Google, Gmail e YouTube down: l'azienda spiega cos'ha provocato i disservizi

La scorsa settimana il mondo intero ha sofferto gravi disservizi su tutti i servizi Google, e l'azienda è prontamente tornata sull'argomento dichiarando ufficialmente che a provocare il danno è stato un bug nel sistema automatizzato per la gestione delle quote di memoria del Google User ID Service. Il bug ha coinvolto proprio il sistema di log-in all'account Google, impedendo agli utenti di eseguire l'autenticazione su tutti i servizi online e in Cloud.

In breve, chi ha cercato di accedere ai servizi dell'azienda, come Gmail, YouTube, Google Drive, Google Maps, Google Calendar e moltissimi altri servizi, il 14 dicembre scorso, per circa un'ora, è stato accolto da una schermata di errore. Durante il disservizio gli utenti non hanno potuto inviare e-mail attraverso le app mobile di Gmail, o ricevere e-mail via POP3 su desktop, o ancora gli utenti di YouTube hanno ricevuto messaggi di errore (503), con l'invito di riprovare (invano).

Google descrive cause e impatto del disservizio

"Lunedì 14 dicembre 2020 dalle 03:46 alle 04:33 US / Pacific, tutte le operazioni di emissione delle credenziali e le ricerche dei metadati degli account non hanno funzionato", ha spiegato l'azienda su una pagina di resoconto dell'errore. "Di conseguenza, non siamo riusciti a verificare l'autenticazione degli utenti fornendo errori 5xx su tutto il traffico autenticato. La maggior parte dei servizi autenticati ha avuto un impatto: tassi di errore elevati su tutta la Google Cloud Platform, e le Google Workspace API e le Console".

Alla base del problema c'è stata la diminuita capacità di accesso allo spazio di archiviazione da parte del sistema centrale del sistema di autenticazione di Google, il tutto a causa di un bug presente sul sistema di gestione delle quote di memoria. Per via dell'errore le richieste di autenticazione da parte degli utenti fallivano, rimandando ad errori su "virtualmente" tutti i tentativi.

Per l'autenticazione nei suoi servizi Google utilizza il Google User ID Service, un sistema che memorizza gli identificatori univoci per ogni account Google gestendo le credenziali di autenticazione sia per i token OAuth sia per i cookie. Inoltre, memorizza anche i dati degli utenti in un database distribuito che fa uso di protocolli Paxos per coordinare gli aggiornamenti durante l'autenticazione. Il Servizio rifiuta automaticamente tutti i tentativi di accesso che fanno uso di dati obsoleti, motivo per cui durante il disservizio tutte le autenticazioni che richiedevano un accesso Google OAuth venivano rigettate.

Il bug è stato introdotto nei sistemi a ottobre all'interno di un "processo di migrazione dell'User ID Service su un nuovo sistema di gestione delle quote", spiega Google, con parti del sistema precedente che sono rimaste in uso e che hanno impostato a 0 l'uso dell'archiviazione previsto per l'User ID Service. Una volta abilitati i nuovi criteri (la scorsa settimana) è stato subito interdetto l'accesso alla scrittura sui protocolli Paxos e in breve tutte le operazioni in lettura sono diventate obsolete impedendo tutti i tentativi di accesso in esecuzione sulla piattaform.

Due disservizi su Gmail nello stesso giorno

Su Gmail i problemi sono continuati per circa sette ore dopo la risoluzione del malfunzionamento nel sistema di autenticazione, con diversi utenti della piattaforma che non sono riusciti a consegnare le proprie e-mail. Ne parla sempre Google in un altro articolo: "Il messaggio di errore indicava che l'indirizzo e-mail non esisteva e, quindi, alcune e-mail non sono mai state consegnate. Gli utenti coinvolti dovrebbero aver ricevuto un'e-mail di rimbalzo generata da un servizio SMTP intermediario. In alcuni casi il messaggio di errore SMTP era citato nell'e-mail, in base alla configurazione dei client SMTP esterni in connessione al servizio Google SMTP".

Google ha spiegato anche le cause del secondo disservizio, anch'esso provocato da un'operazione in corso di migrazione, in questo caso però del sistema di configurazione sottostante al servizio in entrata SMTP di Gmail.