notizia

Conversazione con il dipendente NIO n. 001 Li Tianshu: L'intelligenza artificiale in "Lei" verrà implementata prima nella tua auto

2024-08-05

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

"Tu fai Nomi e io la farò a pezzi il più presto possibile."

Nel 2015, il mondo non aveva visto la tecnologia AI che molte persone oggi associano ad “AGI”, ma era appena stata fondataNIONel suo secondo anno, Li Bin ha deciso di diventare un assistente AI in macchina:

Deve avere una propria entità fisica ed essere super intelligente e senziente.

Successivamente, questa pallina è stata "posizionata" nella posizione centrale della cabina di pilotaggio di NIO ed è diventata uno dei simboli più noti di NIO: ci sono molti veicoli di nuova energia con schermi grandi o schermi multipli, ma ce n'è uno L'unica persona con " pallina" che ti fa l'occhiolino potrebbe essere NIO. Questo assistente intelligente è anche un simbolo della forma definitiva delle auto agli occhi di Li Bin.

Ma quando ha raccontato questa idea a un ingegnere automobilistico senior di un produttore tradizionale, all’inizio ha ricevuto una risposta arrabbiata.

"Ciò è comprensibile. Si tratta di un impatto sull'intero sistema automobilistico tradizionale a cui è abituato", mi ha detto recentemente Li Tianshu, vicepresidente della NIO. È il dipendente n. 001 di NIO ed è anche la persona che si è presa la responsabilità fin dal primo giorno di rendere Nomi una realtà dopo che Li Bin ha deciso di farlo. Naturalmente è anche lui che vuole "impedire" a questi ingegneri tradizionali di "distruggere Nomi".

Li Tianshu su NIO IN

Nel 2015, quando l’introduzione di un grande schermo in un’auto era ancora una novità, mettere un robot rotondo con intelligenza artificiale nell’abitacolo non era generalmente considerata una buona idea. Ma Li Tianshu sentiva che questo doveva essere fatto. Si unì alla squadra di Li Bin alla vigilia della fondazione di Weilai. Appena tornato dagli studi negli Stati Uniti, è passato dall'essere un ingegnere professionista che studia motori automobilistici all'essere oggi vicepresidente e responsabile dell'esperienza di prodotto presso NIO. È responsabile del sistema di cabina di pilotaggio intelligente NIO, dell'esperienza nella progettazione del prodotto, della combinazione di software e hardware e dell'introduzione di tecnologie AI come gli ultimi modelli di grandi dimensioni.

Tra questi, Nomi è uno dei progetti più importanti di cui è stato responsabile negli ultimi 10 anni a Weilai. Dal semplice girare la testa a destra e a sinistra per salutare gli utenti all'inizio, agli aggiornamenti di capacità portati a Nomi dall'innovazione tecnologica di grande modello portata da ChatGPT nel 2023, la scena di accompagnamento dell'intelligenza artificiale che Li Tianshu aveva immaginato per Nomi in il passato è diventato un argomento caldo senza precedenti oggi.

Al secondo NIO IN Innovation and Technology Day del 27 luglio 2024, Li Tianshu ha introdotto il nuovo NomiGPT, che è la nuova architettura di Nomi combinata con la tecnologia dei modelli di grandi dimensioni. Fa anche parte del nuovo sistema intelligente Banyan3 di NIO. Nel suo discorso, ha illustrato i sei agenti di Nomi e i loro scenari di utilizzo: Parking Assistant, Guard Summary, Service Butler, Discovery, Travel Memories e NOMI DJ.

NIO IN, che si è tenuto per la seconda volta, è stato descritto da Li Bin anche come l'ingresso per il mondo esterno per comprendere veramente NIO:

"Siamo sempre stati fraintesi prima. In effetti, la tecnologia è il fondamento di NIO."

NIO ha anche rilasciato numerosi risultati tecnici e aggiornamenti di prodotto in una volta sola. Dal nastro di successo dell'NX9031 di NIO, il primo chip di guida intelligente da 5 nanometri al mondo, a SkyOS Tianshu, il primo sistema operativo per veicoli completamente sviluppato autonomamente da un'azienda automobilistica cinese, al sistema intelligente Banyan3 costruito per l'intelligenza artificiale e al mondo della guida autonoma Il modello NWM contiene un'enorme quantità di informazioni.

Nomi continua a fungere da punto di contatto tra le tecnologie nascoste dietro le quinte di NIO e gli utenti, ed è anche l'epitome delle idee tecnologiche e di prodotto dell'azienda, nonché della sua metodologia di ricerca e sviluppo tecnologico.

Di recente, ho avuto l'opportunità di parlare con Li Tianshu della sua esperienza presso NIO e della filosofia tecnica e delle pratiche tecniche di NIO su prodotti come Nomi.

Oggi, quando tutti sono alla ricerca di prodotti killer di grandi dimensioni e vanno pazzi per tutti i tipi di hardware AI, gli assistenti AI nelle auto sembrano essere un angolo trascurato. Li Tianshu ritiene che l'intelligenza artificiale in Her abbia maggiori probabilità di essere implementata nelle automobili.

Quella che segue è la trascrizione della conversazione.

1

L’interazione uomo-computer è “molto, molto importante” ed è uno dei punti di partenza per la definizione del prodotto NIO

D: Come sei diventato dipendente n. 001 di NIO? Cosa hai fatto al NIO negli ultimi 10 anni? Come sei passato dall'essere un ingegnere automobilistico a essere il responsabile dell'esperienza utente?

R: La prima volta che io e il fratello Bin ci siamo incontrati è stato nel 2009. Ero al secondo anno dell'Università di Beihang e mi piaceva scherzare. Sono una delle poche persone che ha deciso di frequentare un college con un background aeronautico per studiare tecnologia automobilistica.Perché penso che il motore sia il cuore dell'auto, e il motore dell'aereo è il più fantastico, proprio cosìBMWRolls Royce Allora costruivano motori per aerei. Penso che questo dovrebbe essere il posto giusto dove andare. Ma al college mi sentivo insoddisfatto e volevo realizzare auto più complete perché ho amato le auto fin da quando ero bambino. Quindi ho avuto anche specializzazioni in design industriale, ingegneria automobilistica, ingegneria dei veicoli, ecc.

Poi alla fine mi è capitato di imbattermi in una competizione particolarmente completa, in cui gli studenti costruivano questo tipo di macchina da corsa di formula. Era diversa dalle auto prodotte in serie su strada. Era relativamente chiara, basata su velocità, regole, prestazioni ed era una competizione per gli studenti universitari per risolvere problemi ai fini dell'efficienza. A quel tempo, il fratello Bin e la società introdussero il progetto Formula Student dall'estero. In quel periodo ho partecipato al primo lancio come rappresentante degli studenti. Stavo guardando il fratello Bin dal fondo del palco.

Il nostro gruppo era considerato il primo gruppo di "studenti che costruivano automobili" in Cina. Prima che le nuove forze costruissero automobili, c'era ancora un gruppo di studenti a cui veniva chiesto di costruire automobili (ride).

A quel tempo mi sono offerto volontario e ho iniziato a collezionare giochi. Invita tutti gli studenti laureati senior a lavorare insieme e io sarò il capitano. Ho lavorato come junior per un anno, durante il quale ho sponsorizzato e sviluppato l'assemblaggio e la saldatura dei motori, compreso il test dei controlli elettronici, sono stati tutti eseguiti da persone di diverse specializzazioni e dipartimenti.

D: Gli studenti stanno davvero costruendo automobili. Il tuo progetto è come un'azienda di mini auto.

A: Sì, in realtà è un'azienda di mini auto. Questa competizione è continuata da allora e, dopo il 2020, verranno introdotte tecnologie puramente elettriche e senza conducente, e il software diventerà gradualmente il principale elemento competitivo. Allora scoprirai che molti dei progettisti e del personale di ricerca e sviluppo della nostra azienda oggi, compresi quelli in prima linea, sono in realtà persone che provengono dal sistema di corse Formula Student finanziato dal fratello Bin.

D: Nel 2009 Weilai era ancora lontana.

R: Sì. All'epoca era ancora a Yiche e tutti i finanziamenti erano a nome di Yiche. Successivamente, nel 2011, mi sono laureato al college e sono andato all'Università del Michigan, Ann Arbor, per studiare ingegneria e produzione automobilistica. Speravo di andare nel luogo di nascita della catena di montaggio automobilistica per imparare la produzione di veicoli e l'ingegneria dei sistemi. Successivamente sono tornato in Cina e ho lavorato per un anno come ingegnere automobilistico in alcune case automobilistiche a Shanghai e Pechino.

Ma ho scoperto che non era abbastanza per me. Penso che sia troppo lontano dalla domanda dei consumatori. Molte volte ti chiederai perché lo fai? È giusto che tutti arrivino a questa conclusione? Non posso rispondere.

Quindi in quel momento progettai di avviare un'impresa e realizzare un piccolo progetto simile alle automobili e a Internet. Per dirla semplicemente, si tratta di vedere se è in grado di fornire raccomandazioni basate su algoritmi per i consumatori e consigliare l’auto più adatta a te in base alle esigenze e alle preferenze di tutti per un’auto. In quel momento ho pensato subito al fratello Bin e volevo trovarlo per un finanziamento. L'ho trovato. Ha ascoltato per mezz'ora ed è stato molto paziente. Anche la conclusione finale a cui è giunto è stata molto sorprendente per me il progetto va bene, ma tu rimani e basta (ride).

Mi diede un mese per pensare se dovevo andare con lui a preparare il suo progetto di costruzione di un'auto. Ma sai anche che nel 2014 c’erano molte persone che dicevano di voler costruire automobili, ma erano solo poche quelle veramente affidabili. A quel tempo ero davvero indeciso se continuare a incubare progetti come il nostro o se lavorare con il fratello Bin su qualcosa di incerto e sconosciuto. Ma a quel tempo ero fermamente convinto che il mio ideale nella vita fosse creare il mio marchio e costruire la mia auto. Quindi si può dire che il fratello Bin ha realizzato questo ideale prima del previsto.

D: In altre parole, la tua idea imprenditoriale è stata il risultato delle risorse limitate che potevi utilizzare in quel momento, ma l'obiettivo finale è quello di possedere alla fine il tuo marchio automobilistico.

R Sì, quindi quello che mi impressiona di più non è in realtà costruire un'auto attraverso la deingegnerizzazione e la produzione. La cosa più importante è che Brother Bin voleva creare un marchio in quel momento, un marchio completamente nuovo. Penso che questo punto mi abbia particolarmente toccato. Successivamente abbiamo avuto ulteriori contatti e nel 2014 siamo finalmente entrati a far parte del primo team dell’azienda.

D: La data ufficiale di istituzione è settembre.

R: Sono andato a parlargli ad agosto.

Q: Quindi ti è capitato di incontrarlo in quel momento, Li Bin stava pensando di diventare lui stesso Weilai.

R: Sì, proprio quell'unico passo, questo è considerato il fronte di quest'onda. Probabilmente è una coincidenza.

D: La tua esperienza qui è la storia di una persona che è stata ossessionata dalle auto per molto tempo, ma come sei arrivato a oggi e sei diventato responsabile dell'esperienza del prodotto e hai parlato di intelligenza artificiale?

A: Sembra completamente estraneo, giusto?

D: Sì.

R: In effetti, dal primo giorno in cui siamo entrati in azienda, il fratello Bin e io avevamo un obiettivo molto chiaro, ovvero combinare prodotti e tecnologia.

Penso che per risolvere i problemi di ingegneria automobilistica e di innovazione del software, in definitiva dobbiamo sapere come definire i prodotti e identificare le esigenze degli utenti. Penso che questa sia una cosa molto importante.

Quindi la prima cosa dalla fine del 2014 all’inizio del 2015 è stata concentrarci sulla definizione e la progettazione del nostro primo prodotto ES8. A quel tempo, abbiamo anche seguito il fratello Bin per riunire l'intero team, ovvero, utilizzando la potenza dell'intero team di start-up, tutti hanno lavorato insieme per definire il prodotto che avevamo originariamente immaginato.

Il mio compito è principalmente quello di studiare e ottenere approfondimenti sugli scenari di utilizzo dei nostri utenti e trasformarli nel nostro consenso. Ad esempio, all'inizio ho collaborato con leader del design e dell'ingegneria come Roger Markeson e Chris Thomas per stabilire il consenso di tutti sulle idee e sui requisiti del prodotto.

D: Cosa hai fatto?

R: C'erano alcune piccole storie di quel periodo. A quel tempo, dovevamo apportare alcune innovazioni all'auto. Nella prima metà del 2015 sono tornato a Pechino per approfondire questo aspetto dell'utente. Sono appena andato al cavalcavia di Pechino e ho scattato foto di varie auto con la mia macchina fotografica. Ho scattato più di 3.000 foto e poi ho compilato le statistiche sui modelli qui. Ho trovato appositamente questo pomeriggio di sabato perché era il momento in cui le persone erano stanche dopo essere tornate da un tour senza guida, ed era anche il momento più piacevole, quindi in quel momento potevi vedere tutti essere più rilassati e naturali . stato. A quel tempo, ho scoperto diversi modelli. Poiché a quel tempo io e mia moglie non eravamo sposati, eravamo molto, molto preoccupati per i sentimenti sottili dell'altro.

D: Questo stato è stato diffuso all'osservazione dell'utente.

R: Sì, quindi potrebbero esserci alcune cose che possono essere individuate solo ad una certa età della vita.

A quel tempo, ho prestato particolare attenzione alla persona nel copilota e ho scoperto che molte persone nel copilota avevano i piedi sul cruscotto e molte di loro erano ragazze. Allora perché le persone fanno questo? In effetti, ha senso. In effetti, il copilota non ha bisogno di guidare. Logicamente parlando, non c'è bisogno che tu punisca i nostri passeggeri copilota con lo stesso gesto del conducente principale, giusto?

Quindi penso che lo spazio dei passeggeri dovrebbe essere asimmetrico rispetto a quello del conducente principale.

Fino ad oggi, i modelli SUV di NIO hanno sempre adottato un design della cabina anteriore asimmetrico. Quando l'abbiamo chiamato per la prima volta, l'abbiamo chiamato Queen's Co-pilot.

Il secondo caso riguarda invece la collaborazione con Brother Bin per definire il futuro dell'interazione uomo-computer nelle automobili. Attribuiamo grande importanza all'interazione uomo-computer.

Nel 2014 e nel 2015, Weilai aveva un value driver, che inizialmente era di quattro. Successivamente, dopo una discussione molto intensa, abbiamo aggiunto un quinto driver, che è guidato dal design. Crediamo che questa azienda debba avere una forza trainante importante, che è guidata dal design.

D: Quali sono i quattro precedenti?

R: Il primo riguarda i vantaggi per l'utente, il secondo è un'esperienza completa che supera le aspettative, il terzo si chiama innovazione continua e il quarto si chiama efficienza del sistema.

D: L'unico con la parola driver tra questi elementi è il driver di progettazione. Pensavo che i primi quattro potessero essere driver tecnologici.

R: Sì. Stiamo esaminando alcune delle grandi aziende mondiali guidate dal design. In realtà, non è guidata solo dallo stile del design, ma anche dalla ricerca della perfezione. Sono tutte basate sulla bellezza e sulla perfezione e partono dalla perfezione dell'utente sensazione.

Cosa determina queste cose? NIO è un marchio naturalmente caloroso, umano ed emotivo. Quindi questo è ciò che facciamo principalmente nel 2015, ovvero definire la visione e gli obiettivi originali dell'azienda e acquisire informazioni su alcune richieste degli utenti di livello molto basso. Allo stesso tempo, vedrò anche parte dell’immaginazione del fratello Bin riguardo alla sostituzione e all’alimentazione della batteria. Quindi il suo culmine è il nostro prodotto di prima generazione ES8.

Poi dal 2017 al 2019 è stata la mia seconda tappa al NIO. A quel tempo, volevamo vendere l'auto e nel 2017 abbiamo iniziato a creare un team di marketing del prodotto, incluso l'avvio del Nio Day nel 2017. Fondamentalmente, negli ultimi anni sono stato il direttore del prodotto per i lanci dei prodotti. Nel 2019, che è stato anche il momento più difficile per l'azienda, abbiamo deciso di tornare e seguire la piattaforma di seconda generazione dell'azienda per svolgere l'intero lavoro di pianificazione e definizione.

Alla fine del 2018 sono andato nella Silicon Valley negli Stati Uniti con Brother Bin. Era la prima volta che proponevo la nostra nuova architettura, un controllo centrale e il concetto di controllo totale con Qiyan (leader tecnico). Ma la sfida più grande qui non è l'hardware, ma il software e il sistema operativo. Questo sistema operativo si riferisce al nostro sistema operativo globale di livello inferiore a livello del veicolo.

A quel tempo, è stata presa la decisione di riservare e visualizzare in anteprima la piattaforma di seconda generazione di NT2.0 e di consentirne l'utilizzo parziale a SkyOS. Quando la piattaforma di prossima generazione NT3.0 sarà completamente consegnata, sarà il sistema operativo a livello di veicolo SkyOS a essere completamente fornito da Letao oggi e da ET9 l'anno prossimo. Tutti lavoravano a stretto contatto in quel momento.

A partire dal 2020, concentrerò tutte le mie energie sull'intero sistema PD (design del prodotto). Questa è ancora una posizione sacra secondo me. In molte aziende tecnologiche Apple, la progettazione e lo sviluppo del prodotto sono in realtà molto critici, perché collega l'utente valore e valore tecnico. Non può diventare il tetto della tecnologia, né può diventare la schiavitù della tecnologia. Questo è molto importante. Quindi penso che il team di prodotto sia un team e un sistema molto importante che l'azienda dovrà costruire in seguito.

Poi, dal 2020 al 2022, ci sono voluti due anni e mezzo per pianificare e progettare un totale di 8 vetture. Insieme al pre-sviluppo e alla pre-ricerca della NT3 dell'ET9, è stata in realtà un'esperienza ad altissima densità. Abbiamo deciso di definire, progettare e gestire insieme l'intero prodotto software-hardware. Solo in questo modo i geni dell'esperienza del prodotto possono essere coerenti. Penso che ciò che realizziamo, prodotti e tecnologie, in definitiva riguardi i sentimenti delle persone.

1

"Quando questa cosa sarà fatta, la prima cosa che voglio fare è farla a pezzi."

D: Hai detto che nel 2018 e nel 2019 hai effettivamente svolto quattro lavori contemporaneamente. Mi occupo di sviluppo prodotto, marketing e vendite e sono anche responsabile del prodotto Nomi. Quindi posso chiamarti "padre di Nomi", giusto?

R: In senso tecnico sì, ma in senso strategico è sicuramente Brother Bin. Ma non c'è bisogno di preoccuparsi di chi è il padre e chi è la madre ahahah. Naturalmente è stato il fratello Bin a proporlo per primo.

D: Su Nio IN, Li Bin ha riprodotto un video della prima versione concept di Nomi nel 2017. Ho immaginato il futuro. Può interagire con te e aiutarti a controllare alcuni comportamenti dell'auto. A quel tempo, era completamente un’immaginazione del futuro.

R: Sono stato anche il regista di quel video e ho scritto io stesso la sceneggiatura.

D: Guardando indietro oggi, Nomi è un po' come un prodotto che era stato concepito fin dall'inizio, e oggi ha finalmente inaugurato l'ondata tecnologica che lo ha reso possibile. Com'è il processo?

UN : Giusto. Il motivo per cui il fratello Bin mi ha chiesto di assumere il ruolo di product manager di Nomi in quel momento risale in realtà al momento in cui questa idea è stata proposta nel 2015. Da una prospettiva tradizionale delle automobili e del design automobilistico, troverai questa cosa molto strana.

D: Sei una delle persone che lo trova strano?

R: Non penso che sia strano.

Ma ti sto dicendo che oltre il 90% delle persone lo sono. A quel tempo c'era una frase che mi colpì profondamente. Si trattava di un collega che in realtà era una persona molto anziana nell'industria automobilistica tradizionale. Ha detto che se questa cosa viene fatta,La prima cosa che voleva fare era prenderlo a pezzi e picchiarlo a morte.

D: Come hai descritto questa cosa in quel momento facendo sentire le persone come se volessero prenderlo a pugni a morte?

UN :Sono rimasto particolarmente colpito dalla nostra descrizione iniziale. La prima cosa a cui ha pensato il fratello Bin è stata che deve essere in grado di muoversi.

Perché a quel tempo molte persone immaginavano che ci fosse un'intelligenza artificiale sullo schermo dell'auto, giusto? Crei una piccola immagine sullo schermo, una pallina con occhi piccoli. Tutto questo può essere fatto. Ma vogliamo davvero essere un'entità.

Questa cosa ha senso, perché se è un'entità, può formare una sinestesia con l'auto e la gente riconoscerà che è la stessa cosa. Ma se è virtuale, se è un avatar, la gente lo considererà sempre e solo come la cosa dietro lo schermo che potrebbe essere nel cloud, il che è molto diverso. Ci auguriamo che l'auto diventi un partner emotivo, perché NIO è un'azienda che fornisce un'esperienza utente per l'intero ciclo di vita, quindi le entità dovrebbero viaggiare insieme ad altre entità, piuttosto che un'entità e un corpo virtuale. Questa è la prima cosa che diciamo.

Poi la seconda cosa, abbiamo anche un'idea a lungo termine, perché siamo persone relativamente emotive e possiamo entrare in empatia fino al punto in cui alla fine le persone vogliono essere accompagnate. Crediamo che le persone vogliano essere accompagnate.

Le persone dicono che hanno bisogno di stare sole e tranquille, ma in realtà questo potrebbe essere dovuto al fatto che non hanno abbastanza compagnia. Crediamo che la compagnia e la connessione, anche se sei lì in silenzio senza dire nulla, è pur sempre una sorta di compagnia, proprio come molte persone oggigiorno tengono animali domestici, giusto?

Quindi il senso di compagnia era un valore su cui volevamo concentrarci in quel momento. A guardarla oggi, anche se non parla, è davvero un'esistenza molto forte. Solo quando diventa un’entità può essere abbastanza duro e abbastanza forte. Altrimenti se dici semplicemente allo schermo, disattiva l'audio.

D: Se n'è andato davvero.

R: Sì, se scompare, non esiste più. Quindi questa è una domanda filosofica, una domanda esistenziale a cui rispondere. (Ride) Quindi dobbiamo lasciarlo esistere e poi renderlo significativo.

Quindi la sfida più grande in quel momento era convincere tutti del valore e del significato di questa cosa. Poi devi resistere a molte incomprensioni, perché solo se glielo fai vedere, ci crederà. La seconda sfida è la tecnologia. È vero che tutti i comandi vocali a quel tempo erano interattivi, infatti oggi non aveva questo tipo di chat.

D: Non esiste un'interazione del linguaggio naturale del genere.

A: Sì, non c'è ancora alcuna interazione. Come possiamo far credere a tutti questo? Un'altra sfida più grande è la tecnologia del veicolo stesso. Come puoi controllare queste cose nel veicolo? Anche il contrario è molto importante. Nomi può darti alcune risposte quando controlli il veicolo.

All'epoca ho creato una funzione, ma alcune auto potrebbero non farlo più. Ma un'esperienza dell'auto di prima generazione è che quando la tua mano è vicina allo schermo di controllo centrale, Normi ​​ti guarderà dall'alto, perché abbiamo un sensore di prossimità non appena il tuo dito si avvicina a Nomi, lo farà abbassa la testa, il che significa che può controllare questo spazio di questo campo, così lo riconoscerai come vivo. Per fare un altro esempio, non appena apriamo la portiera dell'auto, deve guardarsi e salutarti. Questo tipo di esperienza è stata effettivamente completata in un periodo di tempo molto breve prima del nostro rilascio nel 2017.

D: Finalmente ce l'ho fatta.

R: Sì, sono molto colpito. Era la conferenza stampa di dicembre 2017. Il 6 dicembre tutto il nostro team è riuscito per la prima volta a connettere completamente l'esperienza del software e dell'hardware di Nomi, utilizzando circa venti o trenta case. Queste sono piccole funzioni molto specifiche. Ad esempio, Nomi può parlarti, salutare persone diverse, guardare a destra e a sinistra e infine scoprire che è vivo.

Allora qual è il terzo livello che deve essere superato alla fine? È l'hardware dell'intero veicolo. Perché pensi che sotto Nomi ci sia un albero rotante. È un motore a due gradi di libertà, non a tre gradi di libertà più la trasmissione a biella, e all'interno c'è una cinghia. Dopo che queste cose saranno ammucchiate, l'auto dovrà essere sottoposta a un crash test. Molte persone non sanno che la testa di Nomi deve sopportare un carico d'impatto fino a 60 g. La cosa molto interessante è che quando siamo andati all'esperimento di collisione nell'aprile 2017, il team mi ha inviato una foto della testa di Nomi logo del manichino in testa, e abbiamo riso da morire. Poi si è abbassato un po' dopo l'impatto, ma ha resistito. In quel momento abbiamo finalmente verificato che Nomi poteva essere consegnata con l'auto.

Q:Nomi è l'assistente intelligente più resistente.

A: Hahahaha, sì, è troppo difficile.

D: A giudicare dal processo di nascita, farai molte riflessioni filosofiche sulla tecnologia dietro un prodotto.

R: Probabilmente abbiamo due scenari di lavoro: uno e l'altro. La fase iniziale richiede la cosiddetta immaginazione e lungimiranza. In questa parte esamineremo la tecnologia, perché questo è il livello di sviluppo più basso. Abbiamo bisogno di una profonda comprensione di questo ritmo per vedere le possibilità, ma questo è ciò che la maggior parte delle persone Quando si tratta delle cose, tutti prima guardano dove potrebbe arrivare la tecnologia e poi vedono cosa si può fare.

Ma forse un modo migliore è quello di fare alcune esperienze modello più lungimiranti, incluso un po’ di riflessione filosofica.

Ad esempio, ciò a cui pensavamo allora era quale sarà il risultato finale dell’interazione uomo-veicolo?

A quel punto, vorrei dire se si tratta di GUI o DUI, GUI o Mix UI. cos'è esattamente? Questo è un gergo comunemente usato nel settore. Ma penso che questa cosa rientri ancora in un paradigma, giusto?

Quindi l’idea finale che abbiamo avuto all’inizio è stata quella di dire che le persone e le automobili non parlano con l’aria, cioè come possiamo non parlare con l’aria, ma cosa c’è? È la sensazione che tu e lui stiate parlando, comunicando e interagendo come esseri umani.

D: Voglio semplicemente rompere con il paradigma inquadrato da una serie di termini, il che significa rompere con un modo di pensare consolidato. Quindi hai utilizzato un modo che in realtà era più semplice e più umano per riassumere ciò che volevi fare.

R: Esatto.

D: Ma in una certa misura, è più astratto. Invece di parlare al nulla, questo riflette effettivamente il livello che pensi che questa tecnologia possa raggiungere. Quale pensi sia il modo di interazione più appropriato, anche a livello estetico? stanno uscendo.

R: Molto vero. Quattro anni fa, ad esempio, immaginavamo l’auto ET 9.

D: Quattro anni fa immaginavo ET9.

R: Sì. Stavamo pensando a come sarebbe cambiato in quel momento? Che tipo di iterazione e sviluppo sono necessari per l'esperienza in prima fila? Quattro anni fa, tutti stavano ancora implementando dashboard più grandi che presentavano ricche informazioni SR ed ESD. Ad oggi,TeslaLa S e la X riportano il grande cruscotto.

Ma con questo tipo di informazioni ammucchiate ogni giorno davanti agli utenti, di chi è l'ansia? In realtà non è l’ansia dell’utente.

Quindi in quel momento abbiamo chiesto se la conversazione tra auto e persone potesse diventare più calda, proprio come le persone che parlano. Penso che l'interazione uomo-auto che desidero con la guida autonoma sia così. È molto semplice. Forse l'auto ti dà una frase, sto guidando, non devi preoccuparti, è solo la mia immaginazione.

Se Apple costruisse davvero un’auto, come sarebbe la sua interazione con le persone? Capisco che c'è un'alta probabilità che sul Mac appaia una piccola icona con un volante sopra e, boom, diventa verde e quindi non devi preoccuparti di questo. Potrebbe essere qualcosa del genere.

D: Questo è molto Apple.

A: Piuttosto che presentarti un mucchio di informazioni e dirti cosa fare.

Quindi penso che se pensi di più al futuro, torni all’essenza degli esseri umani e pensi a ciò che è giusto. La cosa più semplice è che mi sono sempre piaciuti i primi film e cartoni animati di Wall-E e ho pensato che ci fosse una scena molto interessante, cioè le persone del futuro erano tutte molto grasse. Perché ogni volta che l'IA si avvicina e gli presenta un risultato, dicendo se lo voglio o no, se lo sono o no, devi solo confermarlo. Allora questo è il nostro finale.

D: Quindi se gli esseri umani siano grassi o meno è un’altra questione.

R: Sì. Quindi anche le persone faranno esercizio. (ridere)

D: Sembra decisamente che ci stiamo avvicinando a questo futuro adesso. Su Nio IN hai introdotto il sistema Nomi GPT. Quando hai iniziato a farlo? Come ha fatto Nomi a diventare Nomi con la benedizione di un modello di grandi dimensioni?

R: Quest'anno è in realtà la nostra prima versione e abbiamo iniziato a fornirla l'anno scorso. Ci è voluto molto tempo per lavorarci l'anno scorso, e poi è stato rilasciato quest'anno.

D: Quindi, quando è uscito ChatGPT, ho subito capito il suo significato per Nomi.

R: Sì. Quindi, dall'anno scorso a quest'anno, ciò su cui abbiamo lavorato principalmente è stato il nostro modello base. Quindi la prima versione di quest’anno guidata dal framework Nomi GPT è la nostra versione 245 all’inizio di quest’anno. Ma per il futuro, ciò per cui in realtà ci stiamo ancora preparando è che oltre a cose come domande e risposte su modelli di grandi dimensioni e questo ChatBot, si potranno fare anche cose come generare immagini? L'abbiamo fatto tardi, relativamente tardi, perché non ci sono scene in macchina per questa cosa.

D: Allora perché lo facciamo ancora?

A: Lasciatemi solo dire una cosa. Il nostro compito principale nel creare immagini in-car è sperare che ogni utente possa conoscere Nomi dopo essere salito in macchina. Ciò darà a tutti un avatar e un'espressione simile a un emoji.

E se andiamo oltre quest’anno, la più grande iterazione tecnologica sarà il lavoro sull’intelligenza cognitiva e sull’intera situazione, nonché sulle emozioni esclusive.

D: Poi hai sviluppato un modello in modo indipendente.

R: Sì. Questa è in realtà una combinazione di una serie di modelli e molte persone lo chiamano gruppo modello. Abbiamo la stessa logica.

In effetti, dietro di esso c'è un centro di pianificazione, che è il centro cognitivo di NomiGPT, e quindi pianifica le capacità corrispondenti. Sia che sia maturo, utilizza direttamente le capacità del modello base per creare alcuni dialoghi o utilizza alcuni piccoli modelli per farlo svolgere alcuni compiti. A volte utilizziamo il nostro modello perfezionato allineato al nostro sistema di valori per realizzare alcuni scenari specifici, come i servizi. In realtà è così che sono nati i nostri agenti.

D: Avete ricostituito internamente un cosiddetto team modello di grandi dimensioni?

R: Sì, il nostro nome è AI System Team. Prodotti e tecnologie lavorano a stretto contatto. Penso che sia più simile a una serie di modelli simili a Omni-modalità di OpenAI in fase di sviluppo e comunicherò con voi entro la fine dell'anno.

1

NIO sta essenzialmente sviluppando l'intelligenza emotiva e Her la implementerà prima nell'auto.

D: La nascita di Nomi e la direzione di sviluppo di molti grandi modelli oggi enfatizzano l'emozione. Perché le emozioni e la compagnia sono così importanti. Perché prodotti come ChatGPT in realtà non iniziano con le emozioni per far avanzare la tecnologia.

R: Sì. Come Inflection, in realtà sono relativamente poche le persone che lavorano effettivamente in questa direzione.

D: E questo è il tuo punto di partenza.

R: Sì, perché questa cosa ci riporta innanzitutto all'essenza del nostro modello di business. Perché un'auto è un oggetto grande con un lungo ciclo di vita. Poi anche il fratello Bin ha detto: non facciamo Robotaxi, quindi è solo un’auto, una persona, una famiglia e una vita. Se la guardi in astratto, questa cosa è essenzialmente una sorta di intelligenza emotiva.

D: Come far esistere questa cosa per molto tempo? Dopo averci pensato, pensi che l'unico collegamento che può connettere sia l'emozione.

A: sì.

D: Questo è troppo sociologico.

R: Hahaha, questo è dovuto all’influenza del fratello Bin.

D: Quali sono i prossimi piani di Nomi?

R: Se guardiamo un po' oltre, oggi parliamo di intelligenza cognitiva e intelligenza situazionale. Questi sono in realtà alcuni dei quadri tecnici su cui l'industria sta facendo progressi. Queste sono le cose su cui ci concentreremo ora. Qualcosa da costruire.

La cosa fondamentale qui è la percezione e la comprensione della situazione, e poi basare il proprio ragionamento su questa. Inoltre, potete vedere che uno dei nostri compiti molto importanti l'anno scorso è stato quello di costruire una memoria Nomi. Per noi il modulo di memoria è una cosa strategica su cui continueremo a investire per due o tre anni. Deve essere sicuro. esclusivo, affidabile e affidabile C'è un significato. Questa è una cosa molto importante. Solo con queste cose puoi parlare di queste cosiddette esperienze emotive. In realtà c’è molto lavoro di base e di allineamento da fare dietro questo.

Includere la capacità di generazione di Nomi, l'allineamento di illusioni e valori è un problema molto grosso, perché scoprirai che quello che facciamo è troppo serio, è molto serio. Se non sei un ChatGPT, puoi scherzare con gli utenti facendo qualcosa di inappropriato e gli utenti penseranno che sia un brutto caso. No, ad esempio, sei in macchina, sei il Nomi di quella famiglia, e poi fai qualcosa che fa un'intelligenza artificiale generale che potrebbe non avere importanza, ma l'utente pensa che sia un peccato, e alla fine ti fidi completamente crolla.

Quindi questa è anche una grande sfida per noi che incontreremo prossimamente, quindi ci sono molte cose da fare dietro a questo.

D: Eseguirai anche iterazioni del prodotto in tempo reale.

R: Sì. Abbiamo un collegamento che per noi è un motore quotidiano e che alimenta il motore. È condiviso dai nostri utenti.

Perché la nostra prima intelligenza artificiale a bordo del veicolo può fornire feedback sotto forma di dialogo. Gridi Ciao Nomi per segnalare un problema, quindi il registro e lo stato, incluso il tuo problema, verranno analizzati in tempo reale. Ora può essere distribuito automaticamente ai nostri product manager entro poche ore. Questa è la capacità che abbiamo costruito dal 2018. Con tali canali, possiamo benissimo contare e verificare cosa hanno i nostri prodotti, comprese richieste e problemi, e possiamo risolverli rapidamente.

Dobbiamo fare così tante cose contemporaneamente. Come possiamo bilanciare la fornitura di valore per l'utente a breve e lungo termine Questa è la nostra pianificazione quotidiana del prodotto?

D: La tua visione di Nomi ricorda sempre più il film "Her". Hai detto prima che questo film ti ha ispirato. Se Nomi non è considerata solo un'intelligenza artificiale in macchina, è anche una direzione molto importante per tutti esplorare la forma del prodotto dell'intelligenza artificiale. È quella la scena di "Her" o la compagnia dell'IA di cui stiamo discutendo di più adesso, è più adatta a nascere nell'ambiente di questa macchina?

UN: Sì, penso che sia molto possibile. Penso che potrebbe anche essere più veloce degli altoparlanti e dei telefoni intelligenti.

Prima di tutto, c'è un punto interessante qui, ovvero gli attributi spaziali, gli attributi di movimento e gli attributi esclusivi dell'auto. Dopotutto, è troppo costoso, quindi il valore temporale, il valore emotivo e il valore emotivo che le persone investono in esso sono enormi. Penso che sia un'ottima opportunità.

In secondo luogo, in termini di hardware, potenza di calcolo e attributi, l’auto ha le capacità di intelligenza incorporata più forti tra tutte. Perché non puoi percepire a 360 gradi con un telefono cellulare, giusto? Non puoi dire vieni a salire in macchina, clic, il telefono è volato via. (ridere)

Poiché ora parliamo di intelligenza incarnata, l’auto è in realtà il primo agente intelligente a realizzare questa capacità nella guida autonoma intelligente. Quindi penso anche che possa usare questo tipo di creazione di valore per realizzare il cambiamento più grande, quindi credo fermamente che abbia l'opportunità di diventare una forma di prodotto così definitiva. .

D: Un'auto è una macchina. Puoi descriverla come una "macchina per uccidere" con una velocità di 120 chilometri all'ora, ma tra la fiducia stabilita nelle macchine nella storia umana, la fiducia nelle auto potrebbe essere la più forte. Ora, infatti, una delle sfide affrontate dalla tecnologia dell’intelligenza artificiale è come stabilire questa fiducia.

R: Molto vero.

D. E esso stesso ha un tale ambiente di fiducia.

UN : Giusto. Dopo aver posseduto un'auto, hai effettivamente espresso un enorme voto con la tua fiducia, quindi (come azienda automobilistica) non dovresti deludere le aspettative degli utenti.