Asegúrese de client_encoding
coincide con la codificación de su archivo. Compruebe la configuración regional de su sistema. Luego use un argumento de línea de comando coincidente para psql. Citando el manual aquí:
Ejemplo para un shell de Linux:
env PGCLIENTENCODING='WIN1258' psql DB_NAME -a -f QUERY_NAME.sql
Lista de codificaciones disponibles en el manual.