notizia

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

Nuovo rapporto sulla saggezza

Redattore: Dipartimento editoriale

[Introduzione alla Nuova Saggezza]OpenAI ha visto successivi cambiamenti nel personale dirigente e senior. In tempi difficili, emergono eroi e un gruppo di stelle nascenti porta la bandiera.

Da quando Ultraman è stato licenziato e reintegrato nel novembre 2023, sembra esserci una costante lotta per il potere all’interno di OpenAI.

Recentemente, molti dirigenti si sono dimessi uno dopo l'altro. Secondo il Financial Times, solo due degli 11 cofondatori originali di OpenAI prestano ancora servizio presso OpenAI.

Oltre ad Altman, solo l'informatico polacco Wojciech Zaremba rimane presso OpenAI come ricercatore.

Il presidente e co-fondatore di OpenAI Greg Brockman, che ha lavorato fianco a fianco con Altman, prolungherà il suo congedo fino alla fine di quest'anno. Questo è ampiamente ritenuto un precursore della sua imminente partenza.

Un altro co-fondatore, John Schulman, se ne andò definitivamente e si unì al concorrente Anthropic. Anche Peter Deng, vicepresidente dei prodotti di consumo, ha lasciato OpenAI.

Secondo le statistiche, quasi 75 dipendenti principali di OpenAI si sono dimessi e hanno fondato circa 30 startup AI.

OpenAI è diventata la "Accademia militare di Whampoa" dell'industria dell'intelligenza artificiale e i suoi ex dipendenti hanno avviato le proprie attività sulla base dell'esperienza e delle connessioni accumulate nell'azienda.

Sebbene questo tipo di produzione di talenti sia vantaggiosa per lo sviluppo dell’intero settore, rappresenta senza dubbio un’enorme perdita per la stessa OpenAI.

Il novellino prende il sopravvento

Sebbene vi sia una perdita di talenti, OpenAI continua a spendere molto per reclutare e promuovere talenti, e altri si sono fatti avanti per assumere le posizioni vacanti.

Questo tipo di scena fa sospirare: "Il Trono di Spade" è ambientato nella realtà e "il caos è la scala per salire".

Ecco uno sguardo al nuovo gruppo di leader di OpenAI, basato sulle conversazioni con ex e attuali dipendenti e altri addetti ai lavori.

Jakub Pachocki - lo "scienziato geniale" succeduto a Ilya

Jakub Pachocki è attualmente il capo scienziato di OpenAI e un dipendente veterano che lavora presso OpenAI dal 2017.

A giudicare dalla passata esperienza di Pachocki e dalla sua velocità di promozione all'interno di OpenAI, è degno del titolo di "scienziato geniale".

Prima di entrare in OpenAI, Pachocki ha conseguito il dottorato di ricerca alla CMU in soli 3 anni e ha condotto ricerche post-dottorato presso l'Università di Harvard per 7 mesi.

Nei primi cinque anni e mezzo dopo l'adesione, Pachocki ha guidato rispettivamente i team di Dota, di ragionamento e di scienze del deep learning, che facevano tutti parte delle iniziative di ricerca trasformativa di OpenAI.

Ha svolto un ruolo chiave nello sviluppo di OpenAI di un bot di gioco Dota 2 che giocava contro se stesso e alla fine raggiungeva un livello professionale.

A partire dal 2021, Pachocki sarà promosso a posizioni come leader della ricerca e direttore della ricerca. È leader nello sviluppo di GPT-4 e OpenAI Five. È elogiato per i suoi contributi alla ricerca nell'apprendimento di rinforzo su larga scala e nell'ottimizzazione del deep learning .

Altman lo elogiò, descrivendo Pachocki come "senza dubbio uno dei più grandi pensatori della nostra generazione" che "ha supervisionato molti dei nostri progetti più importanti".

Riguardo al contributo di Pachocki al progetto GPT-4, Altman una volta ha detto: "L'eccezionale leadership e la visione tecnica mostrate da Jakub Pachocki sono notevoli. Senza il suo contributo, non saremmo in grado di raggiungere quello che siamo oggi. Un risultato".

In una precedente intervista al MIT, Pachocki ha paragonato lo sviluppo di un modello linguistico come GPT-4 alla "costruzione di un'astronave": bisogna assicurarsi che ogni parte sia perfetta.

Ha anche affermato che il metodo di costruzione di base dei modelli GPT non è cambiato molto da quando è stata rilasciata la prima versione nel 2018.

Dopo che Ilya Sutskever si è dimesso nel maggio di quest'anno, Pachocki ha ufficialmente assunto la carica di capo scienziato.

La crescente influenza di Pachocki ha preceduto la sua promozione, secondo gli attuali ed ex dipendenti.

Ultraman apprezzava molto Pachocki e in precedenza gli aveva assegnato compiti simili a Ilya, anche se logicamente parlando, Pachocki doveva fare rapporto a Ilya, il che causò tensione tra i due.

Durante la "Lotta di Palazzo" dello scorso novembre, Ilya e il membro del consiglio Helen Toner hanno lanciato congiuntamente un'azione per "espellere Ultraman". Tuttavia, Pachocki non ha seguito Ilya e si è schierato fermamente dalla parte del sostegno di Ultraman.

Tuttavia, quando Ilya ha annunciato ufficialmente le sue dimissioni, i tweet di Pachocki mostravano ancora il suo rispetto e la sua ammirazione per questo anziano.

Ilya mi ha fatto conoscere il mondo della ricerca sul deep learning ed è stato per molti anni un mentore e un ottimo collaboratore. La sua incredibile visione per il deep learning è la base di ciò che OpenAI e il campo dell'intelligenza artificiale sono oggi. Sono estremamente grato per le innumerevoli conversazioni che ha avuto con noi, dalle discussioni ad alto livello sul futuro dei progressi nell'intelligenza artificiale, alle sessioni tecniche approfondite sulla lavagna. Ilya – Mi mancherà lavorare con te.

I dipendenti hanno affermato che dopo la partenza di Ilya, Pachocki ha ricevuto il sostegno di Ultraman ed è diventato un importante decisore all'interno dell'azienda.

Pachocki è nato in Polonia e si è laureato presso il Dipartimento di Informatica dell'Università di Varsavia Non solo ha conseguito la laurea in soli tre anni, ma ha anche avuto due esperienze di stage presso Facebook e ha anche partecipato a numerosi concorsi di programmazione durante gli studi superiori. scuola e università.

Jakub Pachocki (terzo da sinistra) durante la competizione ICPC 2012

Secondo le statistiche della Programming Hall of Fame, Pachocki ha rappresentato l'Università di Varsavia due volte alle finali mondiali ACM-ICPC nel 2011 e nel 2012, e ha vinto la medaglia d'oro l'anno successivo.

Nella competizione individuale, la prestazione di Pachocki è stata altrettanto sorprendente: ha vinto una medaglia d'argento all'IOI al liceo e ha vinto più volte medaglie nelle competizioni di programmazione ospitate da Topcoder, Facebook e Google.

Tra questi, il miglior risultato è stato vincere la medaglia d'oro al concorso Google Code Jam del 2012, con un premio di 10.000 dollari.

Una volta ha menzionato in un'intervista che le competizioni di programmazione come Google Code Jam sono più simili ai compiti di matematica o alla risoluzione di problemi di logica, e vincere richiede capacità cognitive estremamente elevate.

Barret Zoph

Prima che il co-fondatore John Schulman se ne andasse, ha co-guidato il team post-allenamento con il suo unico rapporto diretto, Barret Zoph.

Secondo un dipendente, Schulman era responsabile della definizione dell'agenda di alto livello durante il suo precedente mandato, mentre Zoph era responsabile della gestione quotidiana e del lavoro di ricerca del team, assicurando che il progetto fosse completato in tempo in modo che il il modello di base potrebbe essere distribuito senza problemi a prodotti come ChatGPT, nonché per gli sviluppatori nell'API.

Zoph è molto rispettato all'interno di OpenAI. Ora che il suo capo immediato si è dimesso, è naturalmente diventato l'unica persona responsabile della squadra.

Zoph si è laureato alla University of Southern California. Mentre era al college, entrò nel gruppo di linguaggio naturale dell'USC Information Sciences Institute e lavorò sulla traduzione automatica statistica con due professori, Kevin Knight e Daniel Marcu.

Dopo la laurea, Zoph è entrato in Google Brain e ha lavorato come ricercatore per 6 anni e 8 mesi, dedicandosi alla formazione di modelli linguistici di grandi dimensioni e alla loro applicazione a varie applicazioni.

Durante la sua permanenza presso Google Brain, Zoph ha ottenuto numerosi risultati accademici. Google Scholar mostra che i suoi articoli sono stati citati complessivamente 62.284 volte.

Nell'agosto 2022, Zoph si è dimesso da Google Brain e si è unito a OpenAI per partecipare alla creazione di ChatGPT. La sua direzione di ricerca principale è l'addestramento di grandi modelli linguistici sparsi e AuoML, come la ricerca di strutture neurali (NAS).

Alla conferenza di maggio di OpenAI, Zoph ha dimostrato la funzione di visione in tempo reale di GPT-4o, consentendo a GPT-4o di risolvere problemi matematici in tempo reale attraverso la fotocamera del telefono cellulare.

Segna Chen

Mark Chen ha ricoperto il ruolo di Direttore della ricerca di frontiera da quando è entrato in OpenAI nel 2018, supervisionando un gruppo di lavoro sotto la guida del Vicepresidente della ricerca Bob McGrew.

Chen ha anche mostrato talenti straordinari molto presto, ottenendo punteggi perfetti in competizioni di matematica come AMC10, AMC12 e AIME, che gli hanno aperto la strada per entrare al MIT.

Dopo la laurea al MIT, Chen ha conseguito una doppia laurea in matematica e informatica. Durante il college ha svolto uno stage presso Microsoft and Trading ed è stato visiting fellow presso l'Università di Harvard.

Dopo la laurea, Chen è entrato nel campo finanziario e si è impegnato nella ricerca quantitativa, costruendo algoritmi di apprendimento automatico per il trading di azioni e futures.

Nell'ultima azienda, Integral Technology, Chen ha raggiunto il livello di partner.

Attualmente ricopre anche il ruolo di allenatore della squadra di allenamento americana dell'IOI.

Di sicuro, le persone brave in matematica possono fare qualsiasi cosa con facilità.

Riposa in pace, Jim Simons. Hai dimostrato in prima persona che essere davvero bravo in matematica ha un impatto positivo su quasi tutto il resto.

Chen si concentra sulla modellazione multimodale e sulla ricerca sull'inferenza presso OpenAI. Ha guidato il team che ha creato DALL·E, nonché il team che ha integrato la percezione visiva in GPT-4.

Chen ha anche guidato lo sviluppo del Codex e ha contribuito al progresso dei modelli GPT, compreso lo sviluppo dell'immagine GPT, ed è stato membro del team di 17 persone per la medaglia d'oro su GPT-4o.

Alla conferenza stampa di maggio di quest'anno, Chen è salito sul palco per dimostrare la funzione vocale di GPT-4o.

L'influenza di Chen è diventata gradualmente evidente durante la "Lotta di Palazzo" nel novembre dello scorso anno. All'epoca, Chen, insieme a Barret Zoph e al ricercatore post-formazione Liam Fedus, costituivano i principali collegamenti tra leadership e dipendenti, secondo un ex dipendente.

Ad esempio, queste tre persone hanno trasmesso una lettera congiunta dei dipendenti che sostengono Ultraman, che è diventata una parte fondamentale nella promozione della reintegrazione di Ultraman. La maggior parte dei dipendenti nella lettera affermava che si sarebbero uniti a Microsoft se Altman non fosse stato reintegrato.

Lilian Weng

Lilian Weng è attualmente a capo del sistema di sicurezza OpenAI ed è principalmente impegnata nell'apprendimento automatico, nell'apprendimento profondo e in altre ricerche.

Weng si è laureato in sistemi informativi e scienze informatiche all'Università di Pechino. Ha frequentato l'Università di Hong Kong per uno scambio a breve termine e poi ha conseguito un dottorato presso l'Università dell'Indiana Bloomington.

Durante il dottorato, il campo di ricerca di Weng riguardava sistemi e reti complessi, concentrandosi su social media, giochi sociali, interazione uomo-computer e modellazione di reti di informazioni complesse.

Aprendo il suo profilo Google Scholar si possono vedere anche gli articoli che Weng ha pubblicato su meme e social network.

Una volta ha svolto uno stage in analisi degli utenti presso eBay, Mozilla e altre società, per poi "passare" con successo a lavorare nell'ingegneria del software e nella scienza dei dati presso Facebook e Dropbox.

Dal 2018, Weng è entrato a far parte di OpenAI come ricercatore. In qualità di direttore tecnico del team di robotica, Weng si concentra sull'addestramento di algoritmi per attività robotiche.

Successivamente Weng ha guidato anche il gruppo di ricerca sull’applicazione dell’intelligenza artificiale ed è attualmente il leader del gruppo di sicurezza.

Nel luglio di quest’anno, OpenAI ha trasferito Aleksander Madry, il precedente capo del team di sicurezza, in un team concentrato sul lavoro di inferenza di base. Una persona a conoscenza della questione ha detto che la squadra di sicurezza originariamente guidata da Madry è stata trasferita a Lilian Weng.

Weng ora gestirà team focalizzati sulla sicurezza dell’intelligenza artificiale sia a lungo che a breve termine, una decisione organizzativa che preoccupa alcuni ricercatori perché gli incentivi per la sicurezza a lungo e a breve termine potrebbero essere in conflitto tra loro.

Vale la pena ricordare che gli articoli del blog scritti da Weng sul suo sito web personale sono molto popolari. Sono fondamentalmente articoli lunghi di 10.000 parole. Contengono sia informazioni tecniche che opinioni e sono un riferimento per molte persone del settore.

Riferimenti:

https://www.theinformation.com/articles/the-rising-guard-at-openai?rc=epv9gi

https://www.sahmcapital.com/news/content/meet-jakub-pachocki-openais-new-chief-scientist-after-ilya-sutskevers-exit-sam-altman-hails-him-as-one-of- le-più-grandi-menti-della-nostra-generazione-2024-05-15