Sim, e você deve fazer isso, abandone de vez o FTP.
Mas a pergunta principal deve ser, e como é que se faz?
O Git é uma ferramenta de SCM (Source Control Management), ou seja, uma ferramenta para o controle do seu código, versionamento, tag, histórico e tudo de mais legal que esse tipo de ferramenta pode entregar, por legal quero dizer essencial, faça o uso dela, viver com o perigo de perder o código e não ter onde buscar depois é uma loucura, sem contar outros pontos. Não irei me aprofundar sobre isso, pois poderia levantar inúmeros motivos pra utiliza-lo.
Mas somente a utilização do SCM não resolve completamente o seu problema de utilização de FTP pra fazer o deploy. Sim, deploy, você já faz esse processo sem conhecer o termo. Não é nada além de você subir as suas alterações para o seu servidor, no momento que você fez isso, você acabou de fazer um deploy. Mas esse é um processo muito chato quando manual, não? Sim, é chato e sempre igual, por isso existem muitas ferramentas pra fazer isso de forma automatizada pra você, servidores de integração continua que sobem suas alterações para você, e isso é ótimo, pois você será muito mais rápido no seu desenvolvimento e irá parar de perder tempo com tarefas repetíveis e propensas a erros.
Mas isso é um assunto realmente grande, passei bem por cima e não ensinei com um hands-on, somente teoria superficial. Por isso recomendo você ler sobre Integração Continua, e como implementar. Isso com certeza vai mudar o seu processo de desenvolvimento, claro, para muito melhor.