Come cambiare il tipo VARCHAR in DATETIME usando ALTER in MySQL?

ALTER TABLE <tblName> MODIFY <columnName> dataType constraint;

Per la tua esigenza sarà

ALTER TABLE <tblName> MODIFY <columnName> datetime;

Fare riferimento a http://dev.mysql.com/doc/ refman/5.1/en/alter-table.html