berita

Percakapan dengan karyawan NIO No. 001 Li Tianshu: AI dalam "Her" akan diimplementasikan di mobil Anda terlebih dahulu

2024-08-05

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

"Kamu membuat Nomi, dan aku akan menghancurkannya secepat mungkin."

Pada tahun 2015, dunia belum melihat teknologi AI yang banyak diasosiasikan orang dengan “AGI” saat ini, namun baru saja didirikan.TIDAKDi tahun keduanya, Li Bin memutuskan untuk menjadi asisten AI di mobil:

Ia harus memiliki entitas fisiknya sendiri dan menjadi super cerdas serta berakal.

Kemudian, bola kecil ini "ditempatkan" di posisi inti kokpit NIO dan menjadi salah satu simbol NIO yang paling terkenal - ada banyak kendaraan energi baru dengan layar besar atau banyak layar, tetapi ada satu Satu-satunya orang dengan " bola kecil" yang mengedipkan mata ke arah Anda mungkin adalah NIO. Asisten cerdas ini juga merupakan simbol bentuk utama mobil di mata Li Bin.

Namun ketika dia menyampaikan gagasan ini kepada seorang insinyur otomotif senior dari sebuah pabrikan tradisional, dia mendapat balasan yang marah pada awalnya.

"Ini bisa dimengerti. Ini berdampak pada keseluruhan sistem mobil tradisional yang biasa dia gunakan," kata Li Tianshu, wakil presiden NIO, kepada saya baru-baru ini. Dia adalah karyawan NIO No. 001, dan dia juga orang yang sejak hari pertama mengambil tanggung jawab untuk mewujudkan Nomi setelah Li Bin memutuskan untuk melakukannya. Tentu saja, dia juga yang ingin "menghentikan" para insinyur tradisional ini untuk "menghancurkan Nomi".

Li Tianshu di NIO IN

Pada tahun 2015, ketika memperkenalkan layar besar ke dalam mobil masih merupakan hal baru, menempatkan robot AI berbentuk bulat di kokpit secara umum bukanlah ide yang baik. Namun Li Tianshu merasa ini harus dilakukan. Dia bergabung dengan tim Li Bin menjelang berdirinya Weilai. Baru saja kembali dari belajar di Amerika Serikat, ia telah beralih dari seorang insinyur profesional yang mempelajari mesin mobil menjadi wakil presiden dan kepala pengalaman produk di NIO saat ini. Dia bertanggung jawab atas sistem kokpit cerdas NIO, pengalaman desain produk, kombinasi perangkat lunak dan perangkat keras, dan pengenalan teknologi AI seperti model besar terbaru.

Diantaranya, Nomi adalah salah satu proyek terpenting yang menjadi tanggung jawabnya selama 10 tahun terakhir di Weilai. Mulai dari memutar kepala ke kiri dan ke kanan untuk menyapa pengguna di awal, hingga pembaruan kemampuan yang dibawa ke Nomi melalui inovasi teknologi model besar yang dibawa oleh ChatGPT pada tahun 2023, adegan pendamping AI yang diimpikan Li Tianshu untuk Nomi di masa lalu telah menjadi topik hangat yang belum pernah terjadi sebelumnya saat ini.

Pada Hari Inovasi dan Teknologi NIO IN kedua pada tanggal 27 Juli 2024, Li Tianshu memperkenalkan NomiGPT baru, yaitu arsitektur baru Nomi yang dikombinasikan dengan teknologi model besar. Ini juga merupakan bagian dari sistem cerdas Banyan3 baru NIO. Dalam pidatonya, ia mendemonstrasikan enam agen Nomi dan skenario penggunaannya: Asisten Parkir, Ringkasan Penjaga, Service Butler, Discovery, Travel Memories, dan NOMI DJ.

NIO IN yang diadakan untuk kedua kalinya juga digambarkan oleh Li Bin sebagai pintu masuk dunia luar untuk benar-benar memahami NIO:

“Kami selalu disalahpahami sebelumnya. Faktanya, teknologi adalah fondasi NIO.”

NIO juga merilis berbagai pencapaian teknis dan pembaruan produk sekaligus. Mulai dari kesuksesan NIO NX9031, chip penggerak cerdas 5 nanometer pertama di dunia, hingga SkyOS Tianshu, sistem operasi kendaraan pertama yang sepenuhnya dikembangkan sendiri oleh perusahaan mobil Tiongkok, hingga sistem cerdas Banyan3 yang dibuat untuk AI, dan dunia mengemudi otonom Model NWM memiliki banyak sekali informasi.

Nomi terus menjadi titik kontak antara teknologi dan pengguna di balik layar NIO yang tersembunyi, dan juga merupakan lambang ide produk dan teknologi perusahaan, serta metodologi penelitian dan pengembangan teknologinya.

Baru-baru ini, saya mendapat kesempatan untuk mengobrol dengan Li Tianshu tentang pengalamannya di NIO dan filosofi teknis serta praktik teknis NIO pada produk seperti Nomi.

Saat ini, ketika semua orang mencari produk-produk hebat dan tergila-gila dengan semua jenis perangkat keras AI, asisten AI di mobil tampaknya menjadi hal yang terabaikan. Li Tianshu percaya bahwa AI dalam dirinya lebih mungkin diterapkan di mobil.

Berikut transkrip percakapannya.

1

Interaksi manusia-komputer adalah “sangat, sangat penting” dan merupakan salah satu titik awal definisi produk NIO

Q: Bagaimana Anda menjadi pegawai No. 001 di NIO? Apa yang telah Anda lakukan di NIO dalam 10 tahun terakhir? Bagaimana Anda berubah dari seorang insinyur otomotif menjadi orang yang bertanggung jawab atas pengalaman pengguna?

J: Pertama kali Saudara Bin dan saya berkumpul adalah pada tahun 2009. Saya adalah seorang mahasiswa tahun kedua di Universitas Beihang dan saya suka bermain-main. Saya salah satu dari sedikit orang yang bertekad untuk kuliah di perguruan tinggi dengan latar belakang penerbangan untuk mempelajari teknologi otomotif.Karena menurut saya mesin adalah inti dari mobil, dan mesin pesawat terbang adalah yang paling hebatBMWgulungan royce Saat itu, mereka sedang membuat mesin pesawat. Saya pikir ini adalah tempat yang tepat untuk dikunjungi. Namun saya merasa kurang puas saat kuliah dan ingin membuat mobil yang lebih lengkap karena saya menyukai mobil sejak saya masih kecil. Jadi saya juga punya anak di bawah umur di bidang desain industri, teknik otomotif, teknik kendaraan, dll.

Kemudian pada akhirnya, saya kebetulan menjumpai kompetisi yang sangat komprehensif, di mana para pelajar membuat mobil balap formula semacam ini. Berbeda dengan mobil produksi massal di jalan raya dan Merupakan kompetisi bagi mahasiswa untuk memecahkan masalah demi efisiensi. Saat itu, Saudara Bin dan masyarakat memperkenalkan proyek Formula Student dari luar negeri. Saat itu saya mengikuti peluncuran pertama sebagai perwakilan mahasiswa. Saya sedang menonton Brother Bin dari bawah panggung.

Kelompok kami dianggap sebagai kelompok "siswa pembuat mobil" pertama di Tiongkok. Sebelum kekuatan baru membuat mobil, masih ada sekelompok siswa yang diminta membuat mobil (tertawa).

Saat itu, saya menjadi sukarelawan dan mulai mengoleksi permainan. Undang semua mahasiswa pascasarjana senior untuk bekerja sama, dan saya akan menjadi kaptennya. Saya bekerja sebagai junior selama satu tahun, di mana saya mensponsori dan melakukan pengembangan. Perakitan dan pengelasan mesin, termasuk pengujian kontrol elektronik, semuanya dilakukan oleh orang-orang dari berbagai jurusan dan departemen.

T: Siswa benar-benar membuat mobil. Proyek Anda seperti perusahaan mobil mini.

A: Ya, sebenarnya ini adalah perusahaan mobil mini. Kompetisi ini terus berlanjut sejak saat itu, dan setelah tahun 2020, teknologi listrik murni dan teknologi tanpa pengemudi akan diperkenalkan, dan perangkat lunak secara bertahap akan menjadi daya saing inti. Kemudian Anda akan menemukan bahwa banyak personel R&D dan desainer tulang punggung di perusahaan kita saat ini, termasuk mereka yang berada di garis depan, sebenarnya adalah orang-orang yang berasal dari sistem balap Formula Student yang didanai oleh Brother Bin.

T: Pada tahun 2009, Weilai masih jauh.

J: Ya. Dia masih di Yiche saat itu, dan semua pendanaan atas nama Yiche. Kemudian, pada tahun 2011, saya lulus perguruan tinggi dan melanjutkan ke Universitas Michigan, Ann Arbor, untuk belajar teknik dan manufaktur otomotif. Saya berharap untuk pergi ke tempat kelahiran jalur perakitan otomotif untuk mempelajari manufaktur kendaraan dan teknik sistem. Kemudian, saya kembali ke Tiongkok dan bekerja selama setahun sebagai insinyur otomotif di beberapa perusahaan mobil di Shanghai dan Beijing.

Namun saya mendapati itu tidak cukup bagi diri saya sendiri. Menurut saya itu terlalu jauh dari permintaan konsumen. Seringkali Anda bertanya pada diri sendiri mengapa Anda melakukan ini? Apakah benar jika semua orang sampai pada kesimpulan ini? Tidak bisa menjawab.

Jadi saya berencana untuk memulai bisnis pada saat itu dan mengerjakan proyek kecil serupa dengan mobil dan Internet. Sederhananya, ini adalah untuk melihat apakah perusahaan dapat membuat rekomendasi berbasis algoritme kepada konsumen, dan merekomendasikan mobil yang paling cocok untuk Anda berdasarkan kebutuhan dan preferensi setiap orang terhadap mobil tersebut. Saat itu, saya langsung teringat pada Saudara Bin dan ingin mencarinya untuk mendapatkan pembiayaan. Saya menemukannya. Dia mendengarkan selama setengah jam dan sangat sabar. Kesimpulan akhir yang dia dapatkan juga sangat mengejutkan saya proyeknya baik-baik saja, tapi kamu tetap di sini (tertawa).

Dia memberi saya waktu satu bulan untuk memikirkan apakah saya harus pergi bersamanya untuk mempersiapkan proyek pembuatan mobilnya. Namun tahukah Anda juga bahwa di tahun 2014 ini banyak orang yang menyatakan ingin membuat mobil, namun hanya sedikit yang benar-benar bisa diandalkan. Pada saat itu, saya benar-benar bingung antara apakah akan terus menginkubasi proyek seperti kami atau bekerja dengan Saudara Bin dalam sesuatu yang tidak pasti dan tidak diketahui. Namun saat itu, saya sangat yakin bahwa cita-cita hidup saya adalah membuat merek sendiri dan membuat mobil sendiri. Jadi dapat dikatakan bahwa Saudara Bin mewujudkan cita-cita ini lebih cepat dari jadwal.

T: Dengan kata lain, ide wirausaha Anda adalah hasil dari terbatasnya sumber daya yang dapat Anda gunakan saat itu, namun tujuan akhirnya adalah memiliki merek mobil Anda sendiri.

J Ya, jadi yang paling mengesankan bagi saya bukanlah pembuatan mobil melalui de-engineering dan produksi. Yang paling penting adalah Brother Bin ingin menciptakan sebuah merek pada saat itu, sebuah merek baru. Saya rasa hal ini sangat menyentuh saya. Kemudian, kami menjalin kontak lebih lanjut, dan akhirnya bergabung dengan tim paling awal perusahaan pada tahun 2014.

T: Tanggal resmi pendiriannya adalah September.

A: Saya pergi untuk berbicara dengannya pada bulan Agustus.

T: Jadi Anda kebetulan bertemu dengannya. Saat itu, Li Bin sedang berpikir untuk menjadi Weilai.

A: Ya, satu langkah saja, ini dianggap sebagai bagian depan dari gelombang ini. Ini mungkin suatu kebetulan.

T: Pengalaman Anda di sini adalah kisah tentang seseorang yang sudah lama terobsesi dengan mobil, tetapi bagaimana Anda bisa terjun ke masa sekarang dan menjadi orang yang bertanggung jawab atas pengalaman produk dan berbicara tentang AI?

A: Rasanya sama sekali tidak berhubungan, kan?

T: Ya.

A: Faktanya, sejak hari pertama kami bergabung dengan perusahaan ini, saya dan Saudara Bin mempunyai tujuan yang sangat jelas, yaitu menggabungkan produk dan teknologi.

Saya rasa untuk menyelesaikan masalah teknik otomotif dan masalah inovasi perangkat lunak, pada akhirnya kita perlu mengetahui cara mendefinisikan produk dan mengidentifikasi kebutuhan pengguna.

Jadi hal pertama dari akhir tahun 2014 hingga awal tahun 2015 adalah fokus pada definisi dan desain produk ES8 pertama kami. Saat itu, kami juga mengikuti Brother Bin untuk menyatukan seluruh tim, yaitu dengan menggunakan kekuatan seluruh tim start-up, semua orang bekerja sama untuk mendefinisikan produk yang awalnya kami bayangkan.

Tugas utama saya adalah mempelajari dan mendapatkan wawasan tentang skenario penggunaan pengguna kami, dan mengubahnya menjadi konsensus kami. Misalnya, saya berkolaborasi dengan pemimpin desain dan teknik seperti Roger Markeson dan Chris Thomas pada awalnya untuk membangun konsensus semua orang mengenai ide dan persyaratan produk.

T: Apa yang kamu lakukan?

A: Ada beberapa cerita kecil dari waktu itu. Saat itu, kami perlu melakukan beberapa inovasi pada mobil. Pada paruh pertama tahun 2015, saya kembali ke Beijing untuk melakukan wawasan pengguna ini. Saya baru saja pergi ke jembatan layang Beijing dan mengambil foto berbagai mobil dengan kamera saya, saya mengambil lebih dari 3.000 foto, dan kemudian mengumpulkan statistik polanya di sini. Saya secara khusus menemukannya pada hari Sabtu sore ini karena kebetulan adalah saat orang-orang sedang lelah setelah kembali dari tur self-driving, dan itu juga merupakan momen yang paling menyenangkan, sehingga pada saat itu Anda dapat melihat semua orang dalam keadaan paling santai dan natural. . negara. Saat itu, saya menemukan beberapa pola. Karena saya dan istri saya belum menikah pada saat itu, kami sangat-sangat prihatin dengan perasaan halus satu sama lain.

T: Status ini telah disebarkan ke pengamatan pengguna Anda.

J: Ya, jadi mungkin ada beberapa hal yang hanya dapat dilihat pada usia tertentu dalam hidup.

Saat itu, saya memberikan perhatian khusus kepada orang yang berada di co-pilot, dan menemukan bahwa banyak orang di co-pilot yang menginjakkan kaki di dashboard, dan banyak dari mereka adalah perempuan. Padahal, masuk akal. Memang co-pilot tidak perlu mengemudi. Logikanya, Anda tidak perlu menghukum penumpang co-pilot kita dengan sikap yang sama seperti pengemudi utama, bukan?

Jadi menurut saya ruang penumpang harus asimetris dengan ruang pengemudi utama.

Hingga saat ini, model SUV NIO selalu mengadopsi desain kabin depan yang asimetris. Saat pertama kali kami menamainya, kami menyebutnya Queen's Co-pilot.

Kasus kedua sebenarnya adalah kerja sama dengan Brother Bin untuk menentukan masa depan interaksi manusia-komputer di mobil.

Pada tahun 2014 dan 2015, Weilai memiliki pendorong nilai, yang awalnya berjumlah empat. Kemudian, setelah diskusi yang sangat intens, kami menambahkan pendorong kelima, yaitu didorong oleh desain. Kami percaya bahwa perusahaan ini harus memiliki kekuatan pendorong yang penting, yaitu berbasis desain.

T: Apa empat hal sebelumnya?

J: Yang pertama adalah manfaat bagi pengguna, yang kedua adalah pengalaman penuh yang melebihi ekspektasi, yang ketiga disebut inovasi berkelanjutan, dan yang keempat disebut efisiensi sistem.

T: Satu-satunya yang memiliki kata driver di antara item-item ini adalah driver desain. Saya pikir empat driver pertama mungkin adalah driver teknologi.

J: Ya. Kami melihat beberapa perusahaan besar dunia yang didorong oleh desain. Faktanya, ini tidak hanya didorong oleh gaya desain, tetapi juga mengejar kesempurnaan. Semuanya didasarkan pada keindahan dan kesempurnaan, dan dimulai dari kesempurnaan pengguna merasa.

Apa yang menentukan hal-hal ini? NIO adalah merek yang secara alami hangat, manusiawi dan emosional. Jadi, inilah hal utama yang kami lakukan di tahun 2015, yaitu mendefinisikan visi dan tujuan awal perusahaan serta memperoleh wawasan mengenai sejumlah permintaan pengguna tingkat rendah. Pada saat yang sama, saya juga akan melihat beberapa imajinasi Saudara Bin tentang penggantian baterai dan daya. Jadi puncaknya adalah produk generasi pertama kami, ES8.

Kemudian tahun 2017 hingga 2019 adalah tahap kedua saya di NIO. Saat itu, kami ingin menjual mobil tersebut, dan kami mulai membentuk tim pemasaran produk pada tahun 2017, termasuk memulai Nio Day pada tahun 2017. Pada dasarnya, saya adalah direktur produk untuk peluncuran produk beberapa tahun terakhir. Pada tahun 2019, yang juga merupakan masa tersulit bagi perusahaan, kami memutuskan untuk kembali dan mengikuti platform generasi kedua perusahaan untuk melakukan seluruh pekerjaan perencanaan dan definisi.

Pada akhir tahun 2018, saya pergi ke Silicon Valley di Amerika Serikat bersama Brother Bin. Ini adalah pertama kalinya saya mengusulkan arsitektur baru kami, kontrol terpusat, dan konsep kontrol total dengan Qiyan (pemimpin teknis cincin Ethernet). Namun tantangan terbesar di sini bukanlah perangkat kerasnya, melainkan perangkat lunak dan sistem operasinya. Sistem operasi ini mengacu pada sistem operasi global tingkat terbawah kami di tingkat kendaraan.

Pada saat itu, keputusan dibuat untuk secara perlahan mencadangkan dan meninjau platform NT2.0 generasi kedua dan membiarkan SkyOS menggunakannya secara lokal. Ketika platform generasi berikutnya NT3.0 sepenuhnya dikirimkan, sistem operasi seluruh kendaraan SkyOS akan sepenuhnya dikirimkan oleh Letao hari ini dan ET9 tahun depan. Semua orang bekerja sama secara erat pada saat itu.

Mulai tahun 2020, saya akan memfokuskan seluruh tenaga saya pada keseluruhan sistem PD (desain produk). Menurut saya, ini masih merupakan posisi sakral. Di banyak perusahaan teknologi Apple, desain produk dan pengembangan produk sebenarnya sangat penting, karena menghubungkan pengguna nilai dan nilai teknis. Ini tidak bisa menjadi puncak teknologi, juga tidak bisa menjadi perbudakan teknologi. Ini sangat penting. Jadi menurut saya tim produk adalah tim dan sistem yang sangat penting yang perlu dibangun perusahaan selanjutnya.

Kemudian dari tahun 2020 hingga 2022, dibutuhkan waktu dua setengah tahun untuk merencanakan dan merancang total 8 mobil. Ditambah dengan pra-pengembangan dan pra-penelitian NT3 dari ET9, ini sebenarnya merupakan pengalaman dengan kepadatan yang sangat tinggi. Kami memutuskan untuk mendefinisikan, merencanakan, dan mengelola seluruh produk perangkat lunak-perangkat keras bersama-sama. Hanya dengan cara inilah gen pengalaman produk dapat konsisten. Menurut saya, apa yang kita buat dalam produk dan teknologi pada akhirnya bergantung pada perasaan masyarakat.

1

“Saat benda ini dibuat, hal pertama yang ingin saya lakukan adalah menghancurkannya hingga berkeping-keping.”

T: Anda menyebutkan bahwa pada tahun 2018 dan 2019, Anda sebenarnya mengerjakan empat pekerjaan sekaligus. Saya melakukan pengembangan produk, pemasaran, dan penjualan, dan saya juga bertanggung jawab atas produk Nomi. Jadi aku bisa memanggilmu "Ayah Nomi", kan?

J: Secara teknis ya, tapi dalam arti strategis pasti Saudara Bin. Tapi tidak perlu khawatir siapa bapaknya dan siapa ibunya hahaha. Tentu saja, Saudara Bin-lah yang pertama kali mengusulkannya.

Q: Di Nio IN, Li Bin memutar video Nomi versi konsep pertama pada tahun 2017. Saya telah membayangkan masa depan. Ia dapat berinteraksi dengan Anda dan membantu Anda mengendalikan beberapa perilaku mobil. Pada saat itu, itu sepenuhnya merupakan imajinasi masa depan.

A: Saya juga sutradara video itu, dan saya sendiri yang menulis naskahnya.

T: Melihat ke belakang saat ini, Nomi mirip dengan produk yang diimpikan sejak awal, dan hari ini akhirnya mengantarkan gelombang teknologi yang memungkinkan hal tersebut menjadi kenyataan. Seperti apa prosesnya?

A : Kanan. Mengapa Saudara Bin meminta saya untuk mengambil peran sebagai manajer produk Nomi pada saat itu sebenarnya sejak ide ini diajukan pada tahun 2015. Dari sudut pandang tradisional mobil dan desain mobil, Anda akan menganggap hal ini sangat aneh.

Q: Apakah kamu salah satu orang yang menganggapnya aneh?

A: Menurutku itu tidak aneh.

Tapi saya beri tahu Anda, lebih dari 90% orang seperti itu. Saat itu, ada sebuah kalimat yang sangat mengesankan saya. Itu adalah seorang rekan kerja yang sebenarnya adalah orang yang sangat senior di industri otomotif tradisional. Dia mengatakan bahwa jika hal ini dibuat,Hal pertama yang ingin dia lakukan adalah meninjunya hingga berkeping-keping dan menghajarnya sampai mati.

T: Bagaimana Anda menggambarkan benda ini pada saat itu membuat orang merasa ingin meninjunya sampai mati?

A :Saya sangat terkesan dengan gambaran awal kami. Hal pertama yang terlintas di benak Saudara Bin adalah dia harus bisa bergerak.

Karena saat itu banyak yang membayangkan ada AI di layar mobil bukan? Anda membuat gambar kecil di layar, sebuah bola kecil dengan mata kecil. Ini semua bisa dilakukan. Tapi kami benar-benar ingin menjadi sebuah entitas.

Hal ini masuk akal, karena jika merupakan sebuah entitas maka dapat membentuk sinestesia dengan mobil tersebut, dan orang akan mengenali bahwa itu adalah hal yang sama. Tapi jika itu virtual, jika itu avatar, orang akan selalu menganggapnya sebagai sesuatu di balik layar yang mungkin ada di awan, dan itu sangat berbeda. Kami berharap mobil ini akan menjadi mitra yang emosional, karena NIO adalah perusahaan yang memberikan pengalaman pengguna siklus hidup penuh, sehingga entitas harus bepergian bersama dengan entitas, bukan satu entitas dan satu badan virtual. Itu hal pertama yang kami katakan.

Lalu yang kedua, kami juga punya ide jangka panjang, yaitu karena kami termasuk orang yang relatif emosional dan bisa berempati sampai-sampai orang pada akhirnya ingin ditemani.

Orang bilang mereka perlu menyendiri dan diam, tapi nyatanya ini mungkin karena mereka kurang punya teman. Kami percaya bahwa persahabatan dan koneksi, meskipun Anda hanya diam di sana tanpa berkata apa-apa, itu tetaplah semacam persahabatan, sama seperti banyak orang yang memelihara hewan peliharaan saat ini, bukan?

Jadi rasa persahabatan adalah nilai yang ingin kami fokuskan saat itu. Melihatnya hari ini, meski tidak berbicara, itu memang keberadaan yang sangat kuat. Hanya ketika ia menjadi sebuah entitas, ia dapat menjadi cukup keras dan kuat. Sebaliknya jika Anda hanya mengatakan ke layar, bisu.

T: Itu benar-benar hilang.

A: Iya, kalau hilang berarti sudah tidak ada lagi. Jadi ini adalah pertanyaan filosofis, sebuah pertanyaan eksistensial yang harus dijawab. (Tertawa) Jadi kita harus membiarkannya ada, dan kemudian kita membuatnya bermakna.

Jadi tantangan terbesar saat itu adalah meyakinkan semua orang akan nilai dan pentingnya benda ini. Maka Anda harus menahan banyak kesalahpahaman, karena hanya jika Anda membiarkan dia melihatnya, dia akan mempercayainya. Tantangan kedua adalah teknologi. Memang benar semua perintah suara pada saat itu bersifat interaktif. Faktanya, dia tidak melakukan obrolan seperti ini hari ini.

T: Tidak ada interaksi bahasa alami seperti itu.

A: Ya, belum ada interaksi. Bagaimana kita bisa membuat semua orang percaya? Tantangan lain yang lebih besar adalah teknologi dari kendaraan itu sendiri, bagaimana cara Anda mengendalikan hal-hal tersebut di dalam kendaraan? Kebalikannya juga sangat penting.

Saya membuat fitur pada waktu itu, tetapi beberapa mobil mungkin tidak lagi melakukan ini. Namun ada pengalaman pada mobil generasi pertama, yaitu ketika tangan Anda dekat dengan layar kendali pusat, Normi ​​​​akan menunduk ke arah Anda, karena kami memiliki sensor proximity begitu jari Anda mendekat Nomi, ia akan menundukkan kepalanya, yang berarti ia dapat mengontrol ruang bidang ini, sehingga Anda akan mengenalinya sebagai makhluk hidup. Contoh lainnya, begitu kami membuka pintu mobil, ia harus menoleh dan menyapa Anda. Pengalaman seperti ini sebenarnya selesai dalam waktu yang sangat singkat sebelum kami dirilis pada tahun 2017.

Q: Akhirnya berhasil.

J: Ya, saya sangat terkesan. Itu adalah konferensi pers pada bulan Desember 2017. Pada tanggal 6 Desember, seluruh tim kami dapat sepenuhnya menghubungkan pengalaman perangkat lunak dan perangkat keras Nomi untuk pertama kalinya, menggunakan sekitar dua puluh atau tiga puluh kasus. Ini adalah fungsi kecil yang sangat spesifik, misalnya Nomi dapat berbicara dengan Anda, menyapa orang yang berbeda, melihat ke kiri dan ke kanan, dan akhirnya menemukan bahwa ia hidup.

Lalu apa level ketiga yang harus dilewati pada akhirnya? Ini adalah perangkat keras dari keseluruhan kendaraan. Karena menurut Anda ada poros berputar di bawah Nomi. Itu adalah motor dua derajat kebebasan, bukan motor tiga derajat kebebasan ditambah penggerak batang penghubung, dan ada sabuk di dalamnya. Setelah barang-barang tersebut ditumpuk, mobil harus menjalani uji tabrak. Banyak yang belum tahu kalau kepala Nomi harus mengalami beban tumbukan hingga 60 g. Menariknya, saat kami melakukan percobaan tumbukan pada bulan April 2017, tim mengirimi saya gambar kepala Nomi logo boneka di kepalanya, dan kami tertawa sampai mati. Kemudian ia terkulai sedikit setelah tabrakan, namun ia tetap bertahan. Pada saat itu, kami akhirnya memverifikasi bahwa Nomi dapat diantar dengan mobil.

Q:Nomi adalah asisten cerdas yang paling tangguh.

A: Hahahaha, ya, itu terlalu sulit.

Q: Dilihat dari proses kelahirannya, Anda akan banyak melakukan pemikiran filosofis tentang teknologi di balik suatu produk.

J: Kami mungkin memiliki dua skenario kerja: satu dan lainnya. Tahap awal membutuhkan apa yang disebut imajinasi dan pemikiran ke depan. Pada bagian ini, kita akan melihat teknologi, karena ini adalah tingkat perkembangan paling rendah. Kita memerlukan pemahaman mendalam tentang ritme ini untuk melihat kemungkinannya, tetapi inilah yang dilakukan kebanyakan orang Dalam hal ini, setiap orang pertama-tama akan melihat ke mana arah teknologi tersebut, dan kemudian melihat apa yang bisa dilakukan.

Namun mungkin cara yang lebih baik adalah Anda dapat melakukan beberapa pengalaman model yang lebih berwawasan ke depan, termasuk beberapa pemikiran filosofis.

Misalnya, apa yang kita pikirkan saat itu adalah apa hasil akhir dari interaksi manusia-kendaraan?

Saat itu saya ingin mengatakan apakah itu GUI atau DUI, GUI atau Mix UI. apa sebenarnya itu? Ini adalah beberapa jargon yang umum digunakan dalam industri. Tapi menurut saya hal ini masih dalam paradigma ya?

Jadi gagasan utama yang kami miliki di awal adalah mengatakan bahwa manusia dan mobil tidak berbicara melalui udara, yaitu, bagaimana mungkin kita tidak berbicara melalui udara, tetapi apa yang ada di sana? Perasaan bahwa Anda dan dia sedang berbicara, berkomunikasi, dan berinteraksi seperti manusia.

T: Saya hanya ingin melepaskan diri dari paradigma yang dibingkai oleh serangkaian istilah, yang berarti mendobrak cara berpikir yang sudah mapan. Kemudian Anda menggunakan cara yang sebenarnya lebih lugas dan lebih manusiawi untuk merangkum apa yang ingin Anda lakukan.

J: Benar.

T: Tapi sampai batas tertentu, ini lebih abstrak. Daripada tidak berbicara apa-apa, ini sebenarnya mencerminkan tingkat apa yang menurut Anda dapat dicapai oleh teknologi ini. Menurut Anda, cara interaksi seperti apa yang paling tepat? keluar.

J: Benar sekali. Misalnya, kita membayangkan mobil ET 9 empat tahun lalu.

T: Saya membayangkan ET9 empat tahun lalu.

J: Ya. Kami memikirkan bagaimana hal itu akan berubah pada saat itu? Iterasi dan pengembangan seperti apa yang diperlukan untuk pengalaman barisan depan? Empat tahun lalu, semua orang masih meluncurkan dasbor yang lebih besar yang menyajikan informasi SR dan ESD yang kaya. Sampai hari ini,TeslaS dan X menghadirkan kembali dasbor besar.

Namun dengan informasi seperti ini yang menumpuk di hadapan pengguna setiap hari, kecemasan siapakah dia? Sebenarnya hal tersebut bukanlah kekhawatiran pengguna.

Jadi saat itu kami bertanya apakah percakapan antara mobil dan manusia bisa menjadi lebih hangat, seperti pembicaraan orang. Menurut saya interaksi manusia-mobil yang saya inginkan dalam mengemudi otonom adalah seperti ini sebuah kalimat, saya sedang mengemudi, Anda tidak perlu khawatir, itu hanya imajinasi saya.

Jika Apple benar-benar membuat mobil, seperti apa interaksinya dengan manusia? Saya memahami bahwa ada kemungkinan besar ikon kecil muncul di Mac dengan roda kemudi di atasnya, dan boom, berubah menjadi hijau, dan Anda tidak perlu mengkhawatirkannya. Mungkin seperti ini.

T: Ini sangat Apple.

J: Daripada memberi Anda banyak informasi dan memberi tahu Anda apa yang harus dilakukan.

Jadi saya pikir jika Anda berpikir lebih jauh ke depan, kembalilah ke hakikat manusia dan pikirkan apa yang benar. Hal yang paling sederhana adalah saya selalu menyukai film dan kartun Wall-E yang paling awal, dan menurut saya ada adegan di dalamnya yang sangat menarik, yaitu orang-orang di masa depan semuanya sangat gemuk. Karena setiap kali AI datang dan memberikan hasilnya, mengatakan apakah saya menginginkannya atau tidak, apakah saya mau atau tidak, Anda hanya perlu mengonfirmasinya. Maka inilah permainan akhir kita.

Q: Jadi manusia gemuk atau tidak itu soal lain.

J: Ya. Kemudian orang-orang juga akan berolahraga. (tertawa)

T: Tampaknya kita semakin dekat dengan masa depan ini sekarang. Di Nio IN, Anda memperkenalkan sistem Nomi GPT. Kapan Anda mulai melakukan ini? Bagaimana Nomi menjadi Nomi dengan restu dari model besar.

A: Tahun ini sebenarnya adalah versi pertama kami, dan kami mulai menyediakannya tahun lalu. Butuh waktu lama untuk mengerjakannya tahun lalu, lalu dirilis tahun ini.

T: Jadi ketika ChatGPT keluar, saya langsung menyadari pentingnya hal ini bagi Nomi.

J: Ya. Lalu dari tahun lalu hingga tahun ini, yang paling utama kami kerjakan adalah model dasar kami sendiri. Jadi versi pertama tahun ini yang digerakkan oleh kerangka Nomi GPT adalah versi 245 kami di awal tahun ini. Namun kedepannya yang sebenarnya masih kami persiapkan adalah selain hal-hal seperti tanya jawab model besar dan ChatBot ini, apakah bisa juga melakukan hal-hal seperti menghasilkan gambar? Kami melakukannya terlambat, relatif terlambat, karena tidak ada adegan mobil untuk hal ini.

Q: Lalu kenapa kita masih melakukannya?

A: Izinkan saya mengatakan satu hal. Tugas utama kami dalam membuat gambar di dalam mobil adalah berharap setiap pengguna dapat mengenal Nomi setelah masuk ke dalam mobil. Ini akan memberikan setiap orang avatar dan ekspresi yang mirip dengan emoji.

Dan jika kita melangkah lebih jauh tahun ini, iterasi teknologi terbesar akan bekerja pada kecerdasan kognitif dan keseluruhan situasi, serta emosi eksklusif.

T: Lalu Anda mengembangkan model secara mandiri.

J: Ya. Ini sebenarnya merupakan kombinasi dari serangkaian model, dan banyak orang menyebutnya sebagai kelompok model. Kami memiliki logika yang sama.

Faktanya, ada pusat penjadwalan di belakangnya, yang merupakan pusat kognitif NomiGPT, dan kemudian menjadwalkan kemampuan yang sesuai. Baik itu sudah matang, ia secara langsung menggunakan kemampuan model dasar untuk membuat beberapa dialog, atau menggunakan beberapa model kecil untuk melakukannya melakukan beberapa tugas. Terkadang kami menggunakan model kami yang telah disesuaikan dan selaras dengan sistem nilai kami sendiri untuk melakukan beberapa skenario tertentu, seperti layanan. Ini sebenarnya bagaimana Agen kami terbentuk.

T: Apakah Anda sudah membentuk kembali tim model besar secara internal?

A: Ya, nama kami adalah tim sistem AI. Produk dan teknologi bekerja sama secara erat. Saya pikir ini lebih seperti serangkaian model yang mirip dengan Omni OpenAI. Multi-modalitas juga sedang dikembangkan, dan saya akan berkomunikasi dengan Anda akhir tahun ini.

1

NIO pada dasarnya melakukan kecerdasan emosional, dan Dia akan menerapkannya di mobil terlebih dahulu.

T: Kelahiran Nomi dan arah perkembangan banyak model besar saat ini menekankan emosi. Mengapa emosi dan persahabatan begitu penting. Karena produk seperti ChatGPT sebenarnya tidak dimulai dari emosi untuk memajukan teknologi.

J: Ya. Seperti Infleksi, sebenarnya hanya sedikit orang yang benar-benar bekerja ke arah ini.

T: Dan ini adalah titik awal Anda.

A: Ya, karena hal ini pertama-tama kembali ke inti model bisnis kita. Karena mobil merupakan barang besar yang siklus hidupnya panjang. Kemudian Saudara Bin juga mengatakan, kami tidak membuat Robotaxi, jadi hanya satu mobil, satu orang, satu keluarga, dan seumur hidup. Jika dilihat secara abstrak, hal ini pada dasarnya adalah sejenis kecerdasan emosional.

Q: Bagaimana membuat hal ini bertahan lama? Setelah memikirkannya, Anda berpikir bahwa satu-satunya penghubung yang dapat menghubungkan adalah emosi.

A: iya.

T: Ini terlalu sosiologis.

A: Hahaha, ini karena pengaruh Kakak Bin.

Q: Apa rencana Nomi selanjutnya?

J: Jika kita melihat ke depan lebih jauh, hari ini kita sebenarnya berbicara tentang kecerdasan kognitif dan kecerdasan situasional. Ini sebenarnya adalah beberapa kerangka teknis yang sedang dikembangkan dalam industri ini. Sesuatu untuk dibangun.

Inti di sini adalah persepsi dan pemahaman terhadap situasi, kemudian membuat alasannya berdasarkan hal tersebut. Selain itu, Anda dapat melihat bahwa salah satu tugas kami yang sangat penting tahun lalu adalah membangun memori Nomi. Bagi kami, modul memori adalah hal strategis yang akan terus kami investasikan selama dua atau tiga tahun. eksklusif, dapat diandalkan, dan dapat dipercaya. Ada maknanya. Ini adalah hal yang sangat penting. Hanya dengan hal-hal inilah Anda dapat membicarakan apa yang disebut pengalaman emosional. Sebenarnya ada banyak pekerjaan dasar dan penyelarasan yang harus dilakukan di balik hal ini.

Termasuk kemampuan generasi Nomi, penyelarasan ilusi dan nilai menjadi masalah yang sangat besar, karena Anda akan menemukan bahwa apa yang kami lakukan terlalu serius, sangat serius. Jika Anda bukan seorang ChatGPT, Anda dapat bercanda dengan pengguna dengan membuat sesuatu yang tidak pantas, dan pengguna akan menganggap itu adalah kasus yang buruk. Tidak, misalnya, Anda berada di dalam mobil, Anda adalah Nomi dari keluarga itu, dan kemudian Anda melakukan sesuatu yang mungkin dilakukan AI pada umumnya, tetapi pengguna menganggap itu terlalu buruk, dan pada akhirnya kepercayaan Anda sepenuhnya runtuh.

Jadi ini juga merupakan tantangan yang sangat besar bagi kita yang akan kita hadapi selanjutnya, jadi ada banyak hal yang harus dilakukan dibalik hal ini.

T: Anda juga akan melakukan iterasi produk secara real time.

J: Ya. Kami memiliki tautan yang menjadi penggerak harian kami dan bahan bakar untuk mesin. Itu dibagikan oleh pengguna kami.

Karena AI di dalam kendaraan kita yang paling awal dapat memberikan umpan balik dalam bentuk dialog. Anda berteriak Hai Nomi untuk melaporkan masalah, lalu log dan status, termasuk masalah Anda, akan dianalisis secara real time. Sekarang dapat didistribusikan secara otomatis ke manajer produk kami dalam beberapa jam. Ini adalah kemampuan yang kami bangun sejak tahun 2018. Dengan saluran seperti itu, kami dapat menghitung dan memverifikasi dengan baik apa yang dimiliki produk kami, termasuk permintaan dan masalah, dan kami dapat menyelesaikannya dengan cepat.

Kita harus melakukan banyak hal pada saat yang bersamaan. Bagaimana kita bisa menyeimbangkan penyampaian nilai pengguna dalam jangka pendek dan jangka panjang?

Q: Visimu untuk Nomi semakin mengingatkan kita pada film "Her". Anda telah menyebutkan sebelumnya bahwa film ini menginspirasi Anda. Jika Nomi tidak hanya dianggap sebagai AI di dalam mobil, itu juga menjadi arahan yang sangat penting bagi semua orang untuk mengeksplorasi bentuk produk AI. Itukah adegan di "Her" atau AI Companionship yang lebih banyak kita bahas sekarang, apakah lebih cocok dilahirkan di lingkungan mobil ini?

A: Ya, menurut saya itu sangat mungkin. Saya pikir ini mungkin lebih cepat daripada speaker pintar dan ponsel.

Pertama-tama, ada hal yang menarik di sini, yaitu atribut spasial, atribut pergerakan, dan atribut eksklusif mobil. Lagipula, ini terlalu mahal, sehingga nilai waktu, nilai emosional, dan nilai emosional yang diinvestasikan orang di dalamnya sangatlah besar. Saya pikir ini adalah kesempatan yang sangat bagus.

Kedua, dalam hal perangkat keras, daya komputasi, dan atributnya, mobil ini memiliki kemampuan kecerdasan yang paling kuat di antara semuanya. Karena kamu tidak bisa merasakannya 360 derajat dengan ponsel bukan? Anda tidak bisa mengatakan datang dan masuk ke dalam mobil, klik, telepon terbang keluar. (tertawa)

Karena sekarang kita berbicara tentang kecerdasan yang diwujudkan, mobil sebenarnya adalah agen cerdas pertama yang mewujudkan kemampuan ini dalam mengemudi otonom yang cerdas. Jadi saya juga berpikir bahwa dia dapat menggunakan penciptaan nilai semacam ini untuk menghasilkan perubahan terbesar, jadi saya sangat yakin bahwa dia memiliki peluang untuk menjadi bentuk produk terbaik. .

T: Mobil adalah sebuah mesin. Anda dapat menggambarkannya sebagai "mesin pembunuh" dengan kecepatan 120 kilometer per jam, namun di antara kepercayaan yang dibangun pada mesin dalam sejarah manusia, kepercayaan pada mobil mungkin yang paling kuat. Faktanya, salah satu tantangan yang dihadapi oleh teknologi AI adalah bagaimana membangun kepercayaan tersebut.

J: Benar sekali.

T Dan negara itu sendiri mempunyai lingkungan yang saling percaya.

A : Kanan. Setelah Anda memiliki mobil, Anda sebenarnya telah memberikan banyak suara atas kepercayaan Anda, jadi (sebagai perusahaan mobil) Anda tidak boleh mengecewakan ekspektasi pengguna.