Kaio, perguntei porque mais pra frente no curso você vai entender melhor o que vou tentar te explicar a seguir.
Vamos lá, não se trata bem de uma configuração específica ou outra, não se trata de ter mais memória ou processador melhor, se trata da arquitetura com a qual o software é feito. O Android Studio é montado para plataforma X86, então ele roda bem com 4GB só que o problema talvez seja pq ele tem que rodar o Android Studio e o emulador do celular, então se você tem 4gb então vc pode pôr exemplo desenvolver no Pc e testar direto no teu celular, nos vídeos tem o passo a passo de como fazer isso. No Pc vai rodar, mas no momento no seu celular ele não vai rodar por ser de uma outra arquitetura que não é X86, não é questão de configuração mas sim de arquitetura, Beleza?