Encontré que esta es la forma más fácil de lidiar con eso
echo json_encode($array, JSON_PRETTY_PRINT | JSON_UNESCAPED_UNICODE | JSON_UNESCAPED_SLASHES);
JSON_PRETTY_PRINT - hace que sea legible
JSON_UNESCAPED_UNICODE - codifica los caracteres correctamente
JSON_UNESCAPED_SLASHES - elimina la barra de escape '\'
también observe que estas opciones están separadas por una barra vertical '|'