Ovviamente il carico dipende dalla macchina, a pari macchina quello che può fare la differenza a livello di software è la velocità di esecuzione (che è diverso dalla velocità di caricamento). Ad esempio dei binari compilati per i386 (come slack) o i586 (debian) saranno più piccoli rispetto ad uno ottimizzato per A64 (man gcc o i datasheet dei processori), quindi forse più veloci nel caricarsi ma (a volte) più lenti nell'esecuzione
Per velocizzare l'installazione di gentoo protresti usare vidallinux (al limite però) e poi eliminarne tutta la roba inutile, ricompilare secondo le tue esigenze ed alla fine eliminare gcc e company.
Per la configurazione ti assicuro che, una volta fatta la mano, è molto più semplice rispetto alle altre
La gestione, ripeto la faccio a mano server per server, per cui sono la persona meno adatta per dare consigli sulla velocizzazione. Per consigli e documentazione trovi tutto su gentoo.org o sul forum di gentoo
Ciao