MySQL REGEXP/RLIKE apesta para esto:debe convertir los datos as BINARY
para búsquedas sensibles a mayúsculas y minúsculas:
SELECT *
FROM datatbl
WHERE CAST(strfield AS BINARY) rlike '[a-z]*';
Encontrará esto planteado en los comentarios para la documentación REGEXP/RLIKE .