Il commento di Deefour ha capito! È stato il modo in cui ho installato PostgreSQL.
Uso il programma di installazione con un clic di PostgreSQL che immagino non configuri correttamente libpq per Mountain Lion.
Homebrew d'altra parte lo costruirà correttamente per il sistema operativo.
Dopo aver installato Postgres tramite homebrew
brew install postgresql
Sono stato in grado di installare la mia gemma senza problemi.
Grazie a tutti!