Ho avuto lo stesso problema e ho passato auth_plugin='mysql_native_password' non ha funzionato, perché ho installato accidentalmente mysql-connector invece di mysql-connector-python (tramite pip3). Lasciarlo qui nel caso possa aiutare qualcuno.