Use o [`TryParse()`][1] se não quiser que gere um erro se o valor for inválido. Você pode tratar como desejar se for inválido. Neste caso eu ignorei a soma.

    private void btn_plus_Click(object sender, EventArgs e) {
        int numero;
        if (Int32.TryParse(resultado.Text, out numero)) {
            resultado.Text = resultado + numero;
        }
    }


  [1]: https://msdn.microsoft.com/en-us/library/f02979c7(v=vs.110).aspx