Como as pessoas começam como usuários de computador onde o normal é usar um Microsoft Word por exemplo, e aquilo faz tudo o que ele precisa em termos de edição de texto, quando ela vai programar e mandam ela instalar o Visual Studio, o EclipseEclipse, o Android StudioAndroid Studio ou algum outro IDE ela acha que aquilo é a linguagem de programação.
O compiladorcompilador é o programa que analisa e gera o executável do que está sendo criado. Ele pega um texto compreensível por humanos - o que o programador escreveu - e transforma em código compreensível por máquinas, um código binário que possui instruções do que o processador deve executar (há casos de código intermediário).
A linguagem de programaçãolinguagem de programação é este conjunto de regras. É o que define a sintaxe e semântica a ser obedecida. Assim como toda língua natural, mas neste caso é uma língua mais limitada, mais lógica e com um propósito específico.