Há premissas erradas na pergunta. Assembly (ênfase no maiúsculo) existe antes dos cartões perfurados que na verdade é só uma entrada de dados. Assembler não é um compilador, embora algumas pessoas achem que sim. Ele até é uma forma de compilador, mas não é completo, por isso é considerado apenas um montador, como o nome diz.
Tem perguntas que ajudam entender melhor isso e sobre a primeira linguagem de programação:
A linguagem de máquina é o código binário que a máquina entende. Ela até pode ser escrita fora da máquina, mas é raro quem faça. Ela não precisa ser transformada.
O Assembly é um texto "compreensível" por humanos. O Assembly existe fora da máquina, depois de entrada no computador precisa de uma transformação, pelo assembler. Há uma relação de 1 para 1 entre o código Assembly e o código de máquina.
O assembler é um mecanismo de tradução do Assembly para o código de máquina, portanto ele é um software. Sendo assim, ele precisa ser desenvolvido em alguma linguagem. O primeiro certamente foi escrito em código de máquina. Daí pra frente foi possível, mas não necessariamente foi feito assim, esse e outros assemblers foram usados para escrever qualquer tipo de software, incluindo compiladores e outros assemblers. Hoje é possível usar uma linguagem de alto nível para escrever um assembler.
Então respondendo estritamente a pergunta feita, sim, hoje em dia é possível escrever um assembler com qualquer linguagem de programação. Na década de 40 foi necessário usar a linguagem de máquina.
Assembly é uma linguagem de programação, portanto ela é apenas uma especificação.
Programe binário aqui.
Coloquei no GitHub para referência futura.