Per modificare il set di caratteri e le regole di confronto predefiniti di una tabella compresi quelli delle colonne esistenti (nota il converti in clausola):
alter table <some_table> convert to character set utf8mb4 collate utf8mb4_unicode_ci;
Modificata la risposta, grazie alla sollecitazione di alcuni commenti:
e