Puede utilizar caracteres especiales en los nombres de las claves delimitándolos con ""
:
mysql> set @j = '{"*abc": 123}';
mysql> select json_extract(cast(@j as json), '$."*abc"') as special;
+---------+
| special |
+---------+
| 123 |
+---------+