Sabe o prompt de comando windows ou o shell do linux? Então, são lugares onde você digita comandos a serem executados pelo computador/dispositivo ao qual você está conectado.
Quando você precisa se conectar com um servidor remoto, é preciso que os comandos, bem como quaisquer informações obtidas como resultado desses sejam trafegados pela rede de forma segura com criptografia. É aí que entra o SSH. O SSH provê essa funcionalidade de prompt de comandos através da rede com criptografia. Como o git é executado por meio de vários comandos shell, então faz sentido que você comunique-se com servidores remotos git por meio do SSH.
No entanto, o protocolo padrão de comunicação na internet é o HTTP e a sua versão com segurança e critografia (HTTPS). Assim sendo, o git também disponibiliza a possibilidade de interagir-se com ele por esse meio.
Em especial, quando você está trabalhando com scripts por linha de comando, o SSH torna-se algo natural. Quando você está utilizando um navegador, o uso do HTTPS torna-se praticamente obrigatório. Para satisfazer a ambos os casos, o git oferece os dois.
Aliás, o significado de SSH é "Secure Shell", e no caso, "Shell" é o nome do prompr de comandos do linux, também chamado de SH.