Você deve trabalhar com tamanhos de tela. A maneira mais comum que eu aprendi foi o de utilizar um resource com uma propriedade boolean is (você pode colocar o nome que quiser, isGrid, por exemplo), geralmente utilizam isTablet.
Primeiro, você deve criar uma pasta values para cada qualificador que você tem de layout. Por exemplo, caso você tenha layout-land, layout-large-land, layout-xlarge então você deve também deve ter as pastas values-land, values-large-land e values-xlarge.
Depois você deve criar dentro de cada umas das pastas values um arquivo bool.xml com o seguinte conteúdo:
<?xml version="1.0" encoding="utf-8"?>
<resources>
<bool name="isGrid">false</bool>
</resources>
O valor true ou false muda de acordo com a existência do gridView, caso exista um gridView você deve colocar true, caso contrário false.
Agora na activity que chama o gridView ou o ListView você adiciona o seguinte código:
private boolean isGrid(){
return getResources().getBoolean(R.bool.isGrid);
}
Agora no método onCreate da mesma activity você deve ter um código com o seguinte:
if(this.isGrid()){
//crie uma gridView
}
else{
//crie uma listView
}