A sigla já está na pergunta. Esta é uma técnica usada para facilitar o gerenciamento de recursos que um objeto usa vinculando o tempo de vida do recurso (que não deixa de ser um outro objeto) ao tempo de vida do objeto que ele está contido. Assim quando o objeto é criado o recurso é adquirido, e quando o objeto é descartado pela aplicação por qualquer motivo o recurso é liberado junto.
A técnica é considerada um idioma, ou seja, é uma forma especifica de escrever algo, é muito parecido com um padrão de projeto, mas é mais simples e livre. Em alguns casos pode ter algum mecanismo na linguagem ou biblioteca que facilite isso, e costuma ser preciso de fato de auxílio do compilador para obter o resultado desejado.
Em geral a técnica exige que se escreva um código ou use algo pronto da biblioteca, se a operação for muito padronizada, para que o recurso seja adquirido na construção do objeto e depois liberado na destruição do objeto.
Geralmente a técnica é associada à linguagens que possuem gerenciamento de memória determinística, assim o objeto é liberado tão logo ele não esteja mais em uso, liberando assim o recurso de forma sincronizada. Linguagens não determinísticas (Java, C#, etc.) nesse aspecto têm dificuldade porque o objeto demora para ser liberado e geralmente você precisa da liberado do recurso logo, até porque é comum que o recurso seja algo pesado e externo à aplicação, assim exige um outro mecanismo. E por isso vê muito em C++ e Rust.
C tem dificuldade para usar porque a linguagem não controla o tempo de vida dos objetos de nenhuma forma, então dá para fazer, mas é problema do programador gerenciar isso, não é tão bom, robusto e fácil ou ainda portável, e pode criar algum overhead, comparando com as linguagens citadas antes.
Com sua adoção você tem menos dificuldade para gerenciar o tempo de vida dos recursos, caso contrário terá sempre que lembrar que o recurso precisa ser liberado quando o objeto é destruído.
Note que o objeto pode estar em qualquer área da memória, só o tempo de vida dele é conta. Algumas linguagens não determinísticas possuem técnica que ajuda quando o objeto está na pilha, mas as linguagens com RAII real controlam o tempo de vida em qualquer situação, pelo menos se feito da maneira correta. Pode haver o controle em cascata. Então um objeto que está na pilha destruído será o gatilho para destruição de todos objetos associados que usam o RAII, mesmo os que estão fora da pilha, apenas o gatilho inicial precisa estar na pilha.
Mais detalhes.
Documentação C++.
Exemplo Rust.
Relacionado. E também.