Flask-MySQL usa MySQL-Python, que não suporta Python 3, e houve um abrir problema sobre isso por mais de um ano. Em vez disso, use Flask-MySQLdb, que usa MySQLclient.
pip install flask-mysqldb
Ou use SQLAlchemy, uma interface muito mais poderosa para trabalhar com bancos de dados.
pip install flask-sqlalchemy mysqlclient