Algo como esto debería funcionar, aunque es posible que la consulta interna deba modificarse un poco.
SELECT table1.*, table2.*
FROM table1
INNER JOIN
(
SELECT *
FROM table2
WHERE user = 23 or friend = 23
)
AS table2 ON table1.user = table2.user;