¿Cómo eliminar elementos duplicados en MySQL con un conjunto de datos de 20 millones de filas?

Puedes probar esto:

ALTER IGNORE TABLE my_tablename ADD UNIQUE INDEX idx_name (text1 , text2);

es decir, intente agregar UNIQUE INDEX a sus columnas y alter la mesa

Esto tiene una ventaja que en el futuro tampoco habrá filas duplicadas que pueda insertar en su tabla