Especifique uma variável de ambiente PIP DOWNLOAD CACHE e pip armazenará em cache os pacotes que baixa e, em seguida, use a versão em cache no futuro, em vez de baixá-la uma segunda vez. Muito útil se, como eu, você é um viciado em virtualenv e tem grandes pacotes como o Django instalados em vários envs virtuais.
Por exemplo, adicione ao seu .zshrc / .bashrc:
export PIP_DOWNLOAD_CACHE=$HOME/.pip-download-cache