Ho capito qual era il problema...
pip -V
ha dato
pip 1.3.1 from /home/benjam15/.env/env/lib/python2.7/site-packages/pip-1.3.1-py2.7.egg
(python 2.6)
mentre stavo usando Python 2.7. Ho seguito questo post dal momento che il comando "pip" predefinito del server è stato indirizzato a Python 2.6, mentre volevo davvero che le cose fossero installate per Python 2.7.