Resultó ser un error tonto, pero publicarlo de todos modos en caso de que alguien más tenga el problema:
Estaba accediendo a la instancia de la réplica por error:había copiado el punto final de la réplica y aparentemente es de solo lectura. Entonces, si tiene este problema, verifique que se esté conectando a la instancia principal o, lo mejor de todo, al punto final del clúster de base de datos.
Editar: Según la respuesta de @Justin, definitivamente deberíamos usar DB Cluster: