Generalmente questo viene fatto utilizzando una transazione. Modifica il file con tutti gli INSERT. Aggiungi una linea in alto e in basso:
BEGIN TRANSACTION;
-- all insert statements go here
COMMIT;
Ora, una volta effettuato l'accesso a MySQL dalla riga di comando, esegui
mysql> source file_name
Vedi qui per i dettagli.