A giugno, Dropbox e Seagate hanno compiuto un ulteriore passo avanti verso un'infrastruttura scalabile e sostenibile, quando Dropbox ha qualificato con successo le unità disco Exos® da 32 TB di Seagate abilitate alla tecnologia HAMR, basate sulla piattaforma Mozaic™, per l'implementazione nei data center Dropbox. Ciò rappresenta una pietra miliare nella capacità di Dropbox di scalare i carichi di lavoro di IA promuovendo al contempo i propri obiettivi di sostenibilità. La piattaforma Mozaic ad alta capacità consente a Dropbox di espandere la capacità senza dover riprogettare la propria infrastruttura e di farlo senza compromettere potenza, spazio o emissioni di carbonio
Per approfondire l'importanza di questa qualifica e il contesto più ampio del settore, abbiamo chiacchierato con il team infrastrutturale di Dropbox, Ali Dasdan, CTO, Jesse Lee, Tech Lead, e Vishal Mannanal, Storage Technologist.
In che modo i carichi di lavoro di IA in evoluzione stanno rimodellando le priorità dell'infrastruttura dati, in particolare per quanto riguarda capacità di memorizzazione, prestazioni ed efficienza?
Dropbox: l'intelligenza artificiale sta cambiando radicalmente il nostro modo di concepire le infrastrutture. Non si tratta solo di archiviare più dati, ma di archiviarli in modo più intelligente. L'attenzione si sta spostando dalla capacità grezza all'efficienza olistica. Poiché i modelli di IA diventano più complessi e richiedono più dati, in Dropbox siamo consapevoli che prestazioni, scalabilità ed efficienza non sono più compromessi, ma elementi reciprocamente allineati.
I dati di IA sono dinamici: vengono costantemente acquisiti, generati ed elaborati in diversi formati, come testo, immagini e audio. Ogni fase del ciclo di vita dell'IA impone requisiti di memorizzazione specifici, man mano che i set di dati diventano più grandi e complessi. La scelta della giusta architettura di memorizzazione, ovvero un mix strategico di unità disco e unità SSD, è diventata un fattore di differenziazione fondamentale per il successo dell'IA, dalla velocità delle applicazioni all'ottimizzazione dei costi e all'efficienza.
In che modo l'IA su larga scala influenza le decisioni relative all'infrastruttura di memorizzazione?
I carichi di lavoro di IA abbracciano fasi di dati calde, tiepide e fredde, ciascuna con requisiti distinti in termini di prestazioni e costi. Ad esempio, l'acquisizione di documenti offline e i carichi di lavoro di archiviazione traggono vantaggio dall'efficienza dei costi e dalla scalabilità delle unità disco, mentre le unità SSD accelerano i flussi di lavoro operativi in cui la bassa latenza è fondamentale.
La nostra architettura riflette questo:
- HBM/DRAM potenzia la produttività lato elaborazione per l'addestramento e l'inferenza in tempo reale.
- Le unità SSD gestiscono i dati critici, ovvero attività sensibili alla latenza, addestramento di modelli e inferenza in tempo reale, in cui velocità e IOPS sono fondamentali.
- Le unità disco ancorano i livelli di dati caldi e freddi. Supportano l'inserimento scalabile, la conservazione a lungo termine e l'accesso intermittente, ideali per data lake AI, set di training storici e archivi di inferenza. Con l'avanzare della tecnologia basata su unità disco come HAMR, queste unità non faranno altro che migliorare la densità, la durata e l'efficienza energetica, essenziali per supportare la crescita dell'IA e al contempo promuovere gli obiettivi di sostenibilità.
Perché Dropbox ha scelto di integrare la piattaforma Mozaic di Seagate? In che modo l'innovazione a livello di dispositivo, in particolare il salto con Mozaic, consente di realizzare le ambizioni di Dropbox in materia di dati o di risolvere esigenze tecniche e operative che la tecnologia PMR non è riuscita a soddisfare?
Con l'intensificarsi dei carichi di lavoro di IA, diamo priorità alla densità di memorizzazione, al controllo della latenza e alla gestione dei costi senza compromettere le prestazioni. Ecco perché abbiamo integrato la piattaforma Mozaic di Seagate. Questa soluzione di ultima generazione rappresenta un balzo in avanti nella densità d'area grazie alla tecnologia HAMR, supportata dai sistemi avanzati di Seagate, dalle testine di lettura/scrittura riprogettate, dal firmware evoluto e dall'integrazione host senza soluzione di continuità: tutti fattori decisivi per la nostra adozione.
Seagate e Dropbox hanno inoltre progettato insieme uno chassis ad alta densità ottimizzato per l'acustica, le vibrazioni e le dinamiche termiche, che ha garantito un accesso a bassa latenza anche in fase di espasione.
Il risultato? Una partnership vantaggiosa per tutti che consente a Dropbox di rendere la nostra infrastruttura a prova di futuro, promuovendo al contempo le nostre ambizioni in materia di intelligenza artificiale e dati con precisione e sicurezza.
Come è stato possibile che Dropbox adottasse la tecnologia HAMR senza dover riorganizzare radicalmente la propria architettura?
La nostra strategia infrastrutturale lungimirante ha consentito un'integrazione senza intoppi delle unità HAMR: nessun nuovo rack, nessuna riprogettazione complessa e nessuna revisione radicale dell'infrastruttura dell'architettura esistente.
L'architettura di memorizzazione di Dropbox è stata progettata appositamente per essere adattabile. Con l'adozione della tecnologia SMR (Shingled Magnetic Recording) per la piattaforma Magic Pocket, sono state gettate le basi per innovazioni future come HAMR. Le unità Mozaic sono allineate con lo stack software esistente di Dropbox, sfruttando API familiari e modelli di scrittura basati su zone, consentendo un'adozione agevole di tecnologie avanzate e una scalabilità fluida senza necessità di riprogettazione. Siamo stati in grado di passare a una memorizzazione a densità più elevata con interruzioni minime, garantendo eccellenza operativa e valore aziendale a lungo termine, da una maggiore efficienza dei costi a un ridotto impatto energetico, il tutto senza compromettere affidabilità o prestazioni.
Dropbox si concentra da tempo sulla sostenibilità operativa. Poiché l'IA aumenta le esigenze di memorizzazione, in che misura l'efficienza aziendale equivale alla sostenibilità operativa? I due fattori possono essere in conflitto?
stiamo consolidando i carichi di lavoro su piattaforme meno numerose e più dense e abbiamo riscontrato i primi successi che hanno un duplice impatto, sia in termini di efficienza operativa che di sostenibilità. Una maggiore densità di memorizzazione per server significa un minor numero di server, riducendo direttamente i costi di alimentazione, raffreddamento e manutenzione. Allo stesso tempo, ottimizza lo spazio del data center, riducendo al minimo i rifiuti elettronici e il consumo di materie prime.
L'investimento iniziale si ripaga poiché l'aggiornamento dell'hardware riduce significativamente il TCO durante l'intero ciclo di vita, allineando la prudenza finanziaria con la sostenibilità a lungo termine.
Quali sono stati i primi miglioramenti in termini di efficienza o sostenibilità ottenuti da Dropbox con unità a capacità più elevata e in che modo questi primi risultati si traducono in un impatto a lungo termine?
L'adozione della piattaforma Mozaic di Seagate ha rappresentato una svolta nella realizzazione dei data center Dropbox più convenienti fino ad oggi. Aumentando significativamente la densità d'area delle unità, abbiamo ottimizzato il nostro TCO su più fronti, riducendo il numero di unità, rack e infrastrutture di rete necessari per raggiungere gli stessi obiettivi di memorizzazione.
I vantaggi immediati sono evidenti: passando dall'hardware di quarta generazione a quello di settima, abbiamo ridotto il consumo energetico del 50% e l'ingombro fisico del 75% per exabyte di memorizzazione. Ciò si traduce in risparmi tangibili sui costi operativi (OpEx) per quanto riguarda alimentazione, raffreddamento e manutenzione delle unità, limitando al contempo i costi di capitale (CapEx) e riducendo al minimo i requisiti hardware e infrastrutturali.
Oltre all'efficienza operativa, questi primi successi si traducono in un impatto più ampio e a lungo termine sulla sostenibilità, riducendo la nostra impronta di carbonio e migliorando al contempo la nostra capacità di scalare senza problemi man mano che la domanda di dati aumenta. Il vantaggio strategico è un ecosistema di data center più snello, più ecologico e progettato per i carichi di lavoro basati sull'IA di domani.
Guardando al futuro, in che modo l'investimento in piattaforme ad alta capacità e a basso consumo energetico come Mozaic aiuta Dropbox a scalare i carichi di lavoro futuri, soddisfacendo al contempo gli obiettivi ESG?
Investire in piattaforme importanti come Mozaic ci consente di portare avanti parallelamente due priorità fondamentali: prestazioni scalabili e responsabilità ambientale.
Mozaic risolve sfide che le unità PMR tradizionali non erano in grado di affrontare. Implementando unità disco con enormi capacità in architetture ad alta densità, otteniamo una densità areale senza precedenti, superiore a 3 TB per disco. Le unità abilitate per Mozaic offrono prestazioni ottimali su larga scala per la stragrande maggioranza dei carichi di lavoro moderni.
Allo stesso tempo, Mozaic ci aiuta a consolidare l'hardware del server e a utilizzare meno unità, il che a sua volta riduce il consumo di energia per petabyte archiviato, limita l'ingombro della nostra infrastruttura fisica e riduce sia le esigenze di raffreddamento sia l'utilizzo di materie prime. Ciò si traduce in una riduzione continua anno dopo anno della nostra metrica Watt per Petabyte (W/PB), un fattore diretto sia per l'efficienza operativa che per la riduzione dell'impatto ambientale.
Con la continua crescita dei dati, le piattaforme come Mozaic saranno essenziali per permettere alla nostra infrastruttura di affrontare il futuro e creare una base dati agile, resiliente e attenta al clima.
Stiamo assistendo a un passaggio in tutto il settore dai sistemi generici alle infrastrutture ottimizzate per carichi di lavoro specifici. In che modo Dropbox affronta questa tendenza e soddisfa le esigenze legate alle opportunità emergenti dell'IA?
Dropbox sta sviluppando la sua strategia infrastrutturale ottimizzata in base al carico di lavoro per bilanciare prestazioni e sostenibilità, fondamentali per la scalabilità dell'IA.
Con l'intensificarsi dei carichi di lavoro di IA, Dropbox si sta allontanando decisamente dai sistemi tradizionali generici, che sono inefficienti dal punto di vista energetico e inadatti alle moderne esigenze di inferenza. Stiamo invece implementando piattaforme di elaborazione ad alta efficienza, progettate appositamente per l'IA, dimensionando correttamente i carichi di lavoro per ridurre l'eccesso di provisioning e migliorando costantemente l'efficienza di utilizzo dell'energia (PUE) nelle nostre strutture di co-locazione.
Operando come cloud ibrido, Dropbox delega inoltre strategicamente determinate attività di IA per ottimizzare l'utilizzo delle risorse e ridurre il carico energetico interno, mantenendo al contempo il controllo sui compromessi tra costi e sostenibilità.
Questo approccio incentrato sull'infrastruttura riflette l'impegno di Dropbox verso un'innovazione responsabile e ci consente di ampliare le capacità dell'IA senza compromettere l'integrità ambientale o operativa.
In che modo le decisioni infrastrutturali di Dropbox contribuiscono oggi a rendere la piattaforma a prova di futuro per modelli di IA che diventeranno sempre più grandi, più disaggregati e più dispendiosi in termini di energia?
Le decisioni infrastrutturali che prendiamo oggi continueranno a plasmare il futuro. Stiamo progettando soluzioni su larga scala, precise e adattabili, basando la nostra strategia infrastrutturale su tre pilastri: integrazione della piattaforma, allineamento con i fornitori e flessibilità operativa.
Con la crescente domanda di soluzioni di IA, Dropbox sta introducendo livelli hardware dedicati, esplorando il raffreddamento a liquido e perfezionando la gestione acustica e termica, soprattutto perché la memorizzazione basata su HAMR si ridimensiona e sta diventando un pilastro della nostra infrastruttura a prova di futuro.
Questa mentalità di innovazione continua sarà l'area di maggior interesse per Dropbox.
Perché la partnership con Seagate si è rivelata la scelta strategica giusta per Dropbox?
Dropbox e Seagate condividono una partnership realmente collaborativa, orientata all'innovazione e multiforme che va ben oltre il coinvolgimento tra acquirente e venditore.
Insieme abbiamo co-progettato e implementato tecnologie di memorizzazione avanzate, dall'abilitazione della tecnologia SMR alla caratterizzazione congiunta di sistemi server abilitati per HAMR, fino all'integrazione della piattaforma Mozaic di Seagate nell'ambiente di produzione di Dropbox. Questa collaborazione ha consentito a Dropbox di scalare la memorizzazione ad alta densità con precisione ed efficienza.
Oltre all'infrastruttura, la nostra soluzione go-to-market include la linea di prodotti Ultra Touch di Seagate, grazie alla quale i clienti possono usufruire del backup automatico su Dropbox tramite unità disco esterne. Dropbox ha inoltre creato un profilo cliente unico in qualità di partner di memorizzazione completamente abilitato di Seagate, sfruttando le unità disco di Seagate in sede e Lyve Cloud.
Questa partnership esemplifica come l'allineamento strategico e l'innovazione condivisa possano aprire nuove possibilità per le piattaforme dati su larga scala.
Infine, per i colleghi che si chiedono dove investire per stare al passo con la domanda di dati basata su IA, mantenendo al contempo la sostenibilità, qual è il tuo consiglio su come preparare l'infrastruttura di memorizzazione e di elaborazione per gestire la prossima ondata?
Il futuro delle infrastrutture riguarda la scalabilità intelligente, non solo quella su larga scala. La nostra strategia in tre punti per un'infrastruttura pronta per il futuro è la seguente: innanzitutto, costruire un motore di innovazione. In secondo luogo, unificare la strategia infrastrutturale. Terzo, investire in partnership strategiche.
Per rimanere all'avanguardia in termini di prestazioni, efficienza e sostenibilità, è fondamentale creare un motore di innovazione adottando tecnologie emergenti: piattaforme come Mozaic di Seagate ne sono un ottimo esempio, offrendo vantaggi sia in termini di densità che di risparmio energetico. Allo stesso tempo, è importante unificare la strategia infrastrutturale pensando in modo olistico alla memorizzazione e all'elaborazione. Soprattutto con i carichi di lavoro di IA, una stretta integrazione tra le due aiuta a massimizzare la produttività e a ridurre gli sprechi. E infine, la scalabilità non è qualcosa che si ottiene da soli. Le partnership strategiche, come quella tra Dropbox e Seagate, svolgono un ruolo fondamentale nell'accelerare le capacità, nella progettazione congiunta di soluzioni e nella messa a punto di operazioni a prova di futuro.
