Isto tem a ver com tipagem. Você está dividindo 2 inteiros, então recebe um inteiro, se quer um resultado que não seja inteiro precisa dividir números que não sejam inteiros, pode fazer um *cast*, é seguro fazer em algo que aumenta a precisão:

    using static System.Console;
    
    public class Program {
    	public static void Main() {
    		int soma = 7;
    		int cont = 2;
    		double media = (double)soma / (double)cont;
    		WriteLine(media);
    	}
    }

Veja [funcionando no **.NET Fiddle**][1]. E [no **Coding Ground**][2]. Também [coloquei no **GitHub** para referência futura][3].

Não precisa converter os dois operandos, se um deles for `double`, o resultado já será `double` para garantir que não tenha perda de precisão.


  [1]: https://dotnetfiddle.net/xSD4NE
  [2]: http://www.tutorialspoint.com/compile_csharp_online.php?PID=0Bw_CjBb95KQMcG1Xbk1QUm5aREE
  [3]: https://github.com/bigown/SOpt/blob/master/CSharp/Math/DivideIntegerResultDouble.cs