Flask-MySQL usa MySQL-Python, che non supporta Python 3, e c'è stato un numero aperto a riguardo per più di un anno. Usa invece Flask-MySQLdb, che usa MySQLclient.
pip install flask-mysqldb
Oppure usa SQLAlchemy, un'interfaccia molto più potente per lavorare con i database.
pip install flask-sqlalchemy mysqlclient