Después de pasar horas probando todo tipo de configuraciones en los archivos de configuración y reiniciando mysql docenas de veces, se me ocurrió esto que parece resolver el problema (no pude encontrar esto en ninguna documentación en ninguna parte)
MySQLdb.connect(server, username, password, database, local_infile = 1)
