As diferenças advêm da classe de que cada uma descende.

[Button][1] descende de TextView. Torna um TextView clicável adicionando um efeito visual ao ser clicado.

[ImageButton][2] descende de ImageView. Torna uma ImageView clicável adicionando um efeito visual ao ser clicado.  

Assim, o *foreground* de um Button, atribuido por `android:text=""`, é um texto, enquanto no ImageButton, atribuido por `android:src=""` é uma imagem.  

Em ambos é possível alterar o background, mas o efeito visual, ao ser clicado, pode ser perdido se o drawable escolhido não tiver [estados][3].  

A escolha entre um e outro depende do *foreground* que pretende, texto ou imagem.

[1]:https://developer.android.com/reference/android/widget/Button.html
[2]:https://developer.android.com/reference/android/widget/ImageButton.html
[3]:https://developer.android.com/guide/topics/resources/drawable-resource.html#StateList