Come ottengo il valore IDENTITY / AUTONUMBER per la riga che ho inserito in pymysql

Puoi usare lastrowid proprietà del tuo oggetto cursore.

Oppure puoi eseguire SELECT LAST_INSERT_ID() e recupera il risultato come scalare con fetchone()