Se hai impostazioni predefinite del server su quei campi, quanto segue dovrebbe fare il lavoro:
session.query(TableName).update({'column1': sa.text('default'),
'column2': sa.text('default'),
'column3': sa.text('default')}, False)