소식

NIO 직원 No. 001 Li Tianshu와의 대화 : "Her"의 AI가 먼저 자동차에 구현됩니다

2024-08-05

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

"당신이 노미를 만들어 주시면, 최대한 빨리 부수겠습니다."

2015년에는 오늘날 많은 사람들이 'AGI'라고 생각하는 AI 기술이 세상에 등장하지 않았지만 이제 막 설립된 상태였습니다.니오2학년이 된 Li Bin은 자동차의 AI 보조원이 되기로 결정했습니다.

그것은 자신의 물리적 실체를 가지고 있어야 하며, 초지능과 지각력을 가지고 있어야 합니다.

나중에 이 작은 공은 NIO 조종석의 핵심 위치에 '배치'되어 NIO의 가장 잘 알려진 상징이 되었습니다. 대형 화면이나 여러 화면을 갖춘 신에너지 차량이 많이 있지만 "라는 표시가 있는 유일한 사람이 있습니다. 당신에게 윙크하는 작은 공"은 NIO일지도 모릅니다. 이 지능형 비서는 리빈의 눈에 자동차의 궁극적인 형태를 상징하기도 합니다.

그러나 그가 이 아이디어를 전통적인 제조업체의 수석 자동차 엔지니어에게 말했을 때, 그는 처음에 화난 대답을 받았습니다.

"이것은 이해할 수 있습니다. 이는 그가 익숙했던 전통적인 자동차 시스템 전체에 영향을 미칩니다." NIO의 부사장인 Li Tianshu가 최근 나에게 말했습니다. 그는 NIO의 001호 직원이자, 리빈이 노미를 하기로 결정한 후 첫날부터 노미를 현실로 만들기 위해 책임을 맡은 사람이기도 하다. 물론, 그는 이러한 전통적인 엔지니어들이 "노미를 박살내는" 것을 "막고" 싶어하는 사람이기도 합니다.

NIO IN의 리 티안슈

자동차에 대형 스크린을 도입하는 것이 아직 생소했던 2015년에는 조종석에 둥근 AI 로봇을 넣는 것이 일반적으로 좋은 생각으로 여겨지지 않았습니다. 그러나 Li Tianshu는 이것이 이루어져야 한다고 느꼈습니다. 그는 Weilai 설립 직전에 Li Bin 팀에 합류했습니다. 미국 유학을 마치고 돌아온 그는 자동차 엔진을 연구하는 전문 엔지니어에서 현재 NIO의 부사장 겸 제품 경험 책임자로 활동하고 있습니다. NIO 지능형 조종석 시스템, 제품 설계 경험, 소프트웨어와 하드웨어의 결합, 최신 대형 모델 등 AI 기술 도입을 담당하고 있습니다.

그중 노미(Nomi)는 그가 지난 10년 동안 웨이라이에서 맡아온 가장 중요한 프로젝트 중 하나이다. 사용자를 맞이하기 위해 처음 고개를 좌우로 돌리는 단순한 것부터 2023년 ChatGPT가 가져온 대형 모델 기술 혁신으로 Nomi에 가져온 기능 업데이트, 과거 Li Tianshu가 Nomi를 위해 구상했던 AI 동반자 장면까지 오늘날 전례 없는 화제가 되었습니다.

2024년 7월 27일 제2회 NIO IN 혁신 및 기술의 날에서 Li Tianshu는 대형 모델 기술과 결합된 Nomi의 새로운 아키텍처인 새로운 NomiGPT를 소개했습니다. 이는 또한 NIO의 새로운 Banyan3 지능형 시스템의 일부입니다. 그는 연설에서 주차 보조원, 경비 요약, 서비스 집사, 디스커버리, 여행 추억, NOMI DJ 등 노미의 6개 에이전트와 사용 시나리오를 시연했습니다.

두 번째로 개최된 NIO IN은 또한 Li Bin이 NIO를 진정으로 이해하기 위한 외부 세계의 입구라고 묘사했습니다.

"우리는 이전에도 항상 오해를 받아왔습니다. 사실 기술은 NIO의 기초입니다."

NIO는 또한 여러 기술적 성과와 제품 업데이트를 한 번에 출시했습니다. 세계 최초 5나노미터 스마트 드라이빙 칩인 NIO의 NX9031의 성공적인 테이프아웃부터 중국 자동차 회사가 최초로 완전 자체 개발한 차량 운영 체제인 SkyOS Tianshu, AI용으로 구축된 Banyan3 지능형 시스템까지, 자율주행의 세계 Model NWM에는 엄청난 양의 정보가 담겨 있습니다.

노미는 계속해서 NIO의 숨겨진 기술과 사용자 사이의 접점 역할을 하고 있으며, NIO의 제품 및 기술 아이디어뿐만 아니라 기술 연구 및 개발 방법론의 전형이기도 합니다.

최근에는 Li Tianshu와 NIO에서의 경험과 NIO의 기술 철학 및 Nomi와 같은 제품에 대한 기술 관행에 대해 이야기할 기회가 있었습니다.

오늘날 모두가 대형 모델 킬러 제품을 찾고 온갖 AI 하드웨어에 열광하는 시대에 자동차의 AI 보조원은 소홀히 여겨지는 구석이 있는 것 같습니다. Li Tianshu는 Her의 AI가 자동차에 구현될 가능성이 더 높다고 믿습니다.

다음은 대화 내용이다.

1

인간-컴퓨터 상호 작용은 "매우 중요"하며 NIO 제품 정의의 출발점 중 하나입니다.

Q: 어떻게 NIO 001호 사원이 되셨나요? 지난 10년 동안 NIO에서 어떤 일을 하셨나요? 어떻게 자동차 엔지니어에서 사용자 경험 담당자가 되셨나요?

A: 빈 형제와 제가 처음 모인 것은 2009년이었습니다. 저는 베이항 대학교 2학년이었고 장난을 좋아했습니다. 나는 자동차 기술을 공부하기 위해 항공 관련 대학에 진학하기로 결정한 몇 안 되는 사람 중 한 명입니다.자동차의 핵심은 엔진이고, 항공기 엔진이 가장 멋지다고 생각하기 때문이죠.BMW롤스 로이스 그 당시 그들은 항공기 엔진을 만들고 있었습니다. 내 생각엔 여기가 딱 맞는 곳인 것 같아. 하지만 대학 시절에는 만족스럽지 못했고, 어릴 때부터 자동차를 좋아했기 때문에 좀 더 완성도 높은 자동차를 만들고 싶었습니다. 그래서 산업디자인, 자동차공학, 자동차공학 등 부전공도 있었어요.

그러다가 우연히 학생들이 이런 종류의 포뮬러 경주용 자동차를 직접 제작하는 매우 종합적인 대회를 접하게 되었습니다. 도로에서 양산되는 자동차와는 속도, 규칙, 측면에서 비교적 명확했습니다. 효율성을 목적으로 대학생들이 문제를 해결하는 대회였는데, 당시 빈 형제와 학회에서는 해외에서 포뮬러 스튜던트(Formula Student) 프로젝트를 소개했습니다. 당시 저는 학생대표로 첫 론칭에 참여했습니다. 나는 무대 아래에서 빈 형제를 지켜보고 있었습니다.

우리 그룹은 중국 최초의 "자동차를 만드는 학생"그룹으로 간주되었습니다. 신군이 자동차를 만들기 전에는 여전히 자동차를 만들도록 요청받은 학생 그룹이있었습니다 (웃음).

그때 자원봉사를 해서 게임을 모으기 시작했어요. 선배 대학원생들을 모두 초대해 함께 일하면 제가 대장이 될 것입니다. 저는 1년 동안 후배로 일하면서 전자 제어 장치 테스트를 포함한 엔진 조립 및 용접을 모두 다양한 전공과 부서의 사람들이 수행했습니다.

Q: 학생들은 실제로 자동차를 만들고 있습니다. 당신의 프로젝트는 마치 미니 자동차 회사와 같습니다.

A: 네, 사실은 소형 자동차 회사입니다. 이러한 경쟁은 이후에도 지속되어 2020년 이후에는 순수 전기화와 자율주행차 기술이 도입되며 점차 소프트웨어가 핵심 경쟁력이 될 것이다. 그러면 최전선에 있는 사람들을 포함하여 오늘날 우리 회사의 중추적인 R&D 인력과 디자이너 중 상당수가 실제로 빈 형제가 자금을 지원하는 Formula Student 경주 시스템 출신이라는 것을 알게 될 것입니다.

Q: 2009년, 웨이라이는 아직 멀었습니다.

답: 그렇습니다. 당시 그는 여전히 이체에 있었고 모든 자금은 이체의 이름으로 이루어졌습니다. 그 후 2011년에 대학을 졸업하고 앤아버에 있는 미시간 대학교에 진학하여 자동차 공학과 제조를 공부했습니다. 자동차 조립 라인의 발상지로 가서 차량 제조와 시스템 공학을 배우고 싶었습니다. 그 후 중국으로 돌아와 상하이와 베이징의 일부 자동차 회사에서 1년 동안 자동차 엔지니어로 일했습니다.

그러나 나는 그것만으로는 충분하지 않다는 것을 알았습니다. 소비자의 요구와는 너무 거리가 먼 것 같아요. 여러 번 당신은 왜 이 일을 하는지 스스로에게 묻게 될 것입니다. 모든 사람이 이런 결론을 내리는 것이 옳습니까? 대답할 수 없습니다.

그래서 그 때 창업을 해서 자동차나 인터넷과 비슷한 작은 프로젝트를 해보자고 생각했어요. 쉽게 말하면 소비자를 위한 알고리즘 기반 추천을 할 수 있는지 알아보고, 자동차에 대한 모든 사람의 요구와 선호도를 바탕으로 나에게 가장 적합한 자동차를 추천하는 것입니다. 그 때 나는 즉시 빈 형제를 찾아 자금 조달을 하고 싶었고, 그는 30분 동안 듣고 참을성 있게 기다려 주었습니다. 프로젝트는 괜찮은데 넌 그냥 있어라(웃음).

그는 자동차 제작 프로젝트를 준비하기 위해 내가 그와 함께 가야 할지 생각할 시간을 한 달 동안 주었습니다. 하지만 2014년에도 자동차를 만들고 싶다고 말하는 사람은 많았지만, 진정으로 믿을 수 있는 사람은 극소수에 불과했습니다. 그 당시 나는 우리와 같은 인큐베이팅 프로젝트를 계속할 것인지, 아니면 불확실하고 알려지지 않은 일에 대해 빈 형제와 함께 일할 것인지 사이에서 정말 고민했습니다. 하지만 그 당시에는 내 인생의 이상은 나만의 브랜드를 만들고, 나만의 자동차를 만드는 것이라는 확고한 믿음이 있었습니다. 그래서 빈 형제는 이런 이상을 예정보다 빨리 실현했다고 할 수 있습니다.

Q: 즉, 당신의 창업 아이디어는 당시 사용할 수 있는 자원이 제한되어 있었던 결과였지만, 궁극적인 목표는 결국 자신의 자동차 브랜드를 소유하는 것입니다.

A 네, 그래서 제가 가장 인상 깊었던 점은 실제로 디엔지니어링과 제품화를 통해 자동차를 만드는 것이 아닙니다. 가장 중요한 것은 당시 빈 형제가 새로운 브랜드를 만들고 싶었다는 점입니다. 이 점이 특히 와닿았던 것 같아요. 나중에 우리는 더 많은 연락을 했고, 마침내 2014년에 회사의 초기 팀에 합류했습니다.

Q. 정식 설립일은 9월이다.

A: 8월에 그 사람이랑 얘기하러 갔어요.

Q: 실제로 그를 우연히 만났는데, 당시 리빈은 웨이라이가 되고 싶은 생각을 하고 있었던 것 같아요.

A: 네, 그 한 걸음이 이 물결의 앞선이라고 봅니다. 아마 우연일 겁니다.

Q: 여기에서의 경험은 오랫동안 자동차에 집착했던 사람의 이야기인데 어떻게 오늘날까지 도약하여 제품 경험을 담당하는 역할이 되어 늘 AI에 대해 이야기를 나누게 되었는지에 대한 이야기입니다.

A: 전혀 관련이 없는 것 같죠?

질문: 그렇습니다.

A: 사실, 빈 형제와 저는 회사에 입사한 첫날부터 매우 명확한 목표를 갖고 있었습니다. 제품과 기술을 결합하는 것이었습니다.

자동차 엔지니어링 문제와 소프트웨어 혁신 문제를 해결하려면 궁극적으로 제품을 정의하고 사용자 요구를 파악하는 방법을 알아야 한다고 생각합니다.

그래서 2014년 말부터 2015년 초까지 가장 먼저 한 일은 첫 번째 ES8 제품의 정의와 디자인에 집중하는 것이었습니다. 그 당시 우리도 빈 형제를 따라 전체 팀을 하나로 모았습니다. 즉, 전체 스타트업 팀의 힘을 사용하여 모두가 협력하여 원래 상상했던 제품을 정의했습니다.

내 임무는 주로 사용자의 사용 시나리오를 연구하고 통찰력을 얻어 이를 합의로 전환하는 것입니다. 예를 들어, 저는 아이디어와 제품 요구 사항에 대한 모든 사람의 합의를 구축하기 위해 초기에 Roger Markeson 및 Chris Thomas와 같은 디자인 및 엔지니어링 리더와 협력했습니다.

질문: 당신은 무엇을 했나요?

A: 그때부터 소소한 이야기가 있었어요. 당시 우리는 자동차에 대한 혁신이 필요했습니다. 2015년 상반기에 저는 이러한 사용자 통찰력을 얻기 위해 베이징으로 돌아왔습니다. 방금 베이징의 고가도로에 가서 카메라로 다양한 자동차의 사진을 찍었습니다. 3,000장이 넘는 사진을 찍고 여기에 패턴에 대한 통계를 정리했습니다. 제가 특별히 찾아간 토요일 오후는 자율주행 투어를 마치고 사람들이 피곤한 시간이기도 하고 가장 즐거운 순간이기도 해서 그 순간 모두가 가장 여유롭고 자연스러운 모습을 볼 수 있었기 때문입니다. 상태. 그 때 나는 몇 가지 패턴을 발견했다. 당시 아내와 저는 결혼하지 않았기 때문에 서로의 미묘한 감정에 대해 매우 걱정했습니다.

Q: 이 상태가 사용자 관찰로 확산되었습니다.

A: 네, 그래서 인생의 특정 나이에만 분별할 수 있는 것들이 있을 수 있습니다.

당시 부조종사에 있는 사람을 유심히 관찰한 결과, 부조종사의 많은 사람들이 대시보드에 발을 올리고 있는 것을 발견했는데, 그 중 많은 사람들이 여자였습니다. 그러면 사람들은 왜 이런 일을 하는 걸까요? 실제로 부조종사는 운전할 필요가 없습니다. 논리적으로 보면 부조종사 승객을 주 운전자와 같은 행동으로 처벌할 필요는 없겠죠?

그래서 조수석 공간은 주 운전자 공간과 비대칭이 되어야 한다고 생각합니다.

오늘날까지 NIO의 SUV 모델들은 항상 이런 비대칭 전면 프레임 디자인을 채택해왔습니다. 처음 이름을 붙였을 때 우리는 이를 Queen's Co-pilot이라고 불렀습니다.

두 번째 사례는 실제로 Bin 형제와 협력하여 자동차에서 인간-컴퓨터 상호 작용의 미래를 정의하는 것입니다.

2014년과 2015년에 Weilai에는 처음에는 4개의 가치 동인이 있었습니다. 이후 매우 치열한 논의 끝에 우리는 디자인 중심의 다섯 번째 동인을 추가했습니다. 우리는 이 회사가 디자인 중심의 중요한 원동력을 가져야 한다고 믿습니다.

Q: 이전 4개는 무엇인가요?

A: 첫 번째는 사용자 이점, 두 번째는 기대를 뛰어넘는 완전한 경험, 세 번째는 지속적인 혁신, 네 번째는 시스템 효율성입니다.

Q: 이 항목 중 드라이버라는 단어가 있는 유일한 것은 디자인 드라이버입니다. 처음 4개는 기술 드라이버일 것이라고 생각했습니다.

답: 그렇습니다. 실제로 디자인의 스타일링뿐만 아니라 완벽함을 추구하는 세계의 몇몇 위대한 기업들을 살펴보고 있습니다. 그들은 모두 아름다움과 완벽함을 기반으로 하며 사용자의 완벽함에서 시작합니다. 감정.

이러한 것들을 결정하는 것은 무엇입니까? NIO는 자연스럽고 따뜻하고 인간적이며 감성적인 브랜드입니다. 따라서 이것이 2015년에 우리가 주로 하는 일입니다. 회사의 원래 비전과 목표를 정의하고 매우 낮은 수준의 사용자 요구에 대한 통찰력을 얻는 것입니다. 동시에 배터리 교체와 전원에 대한 빈 형제의 상상도 일부 볼 수 있을 것이다. 그래서 그 정점은 우리의 1세대 제품인 ES8입니다.

그러다가 2017년부터 2019년까지가 NIO에서의 두 번째 무대였어요. 그때 우리는 차를 팔고 싶었고, 2017년 니오데이를 시작하는 것을 포함해 2017년부터 제품 마케팅팀을 꾸리기 시작했다. 기본적으로 지난 몇 년간 제품 출시를 위한 제품 디렉터를 제가 맡았다. 회사에게도 가장 어려운 시기였던 2019년에 우리는 회사의 2세대 플랫폼을 따라 전체 기획 및 정의 작업을 수행하기로 결정했습니다.

2018년 말, 저는 Bin 형제와 함께 미국 실리콘 밸리에 갔습니다. Qiyan(기술 리더)과 함께 새로운 아키텍처, 중앙 제어 및 전체 제어 개념을 처음으로 제안했습니다. 하지만 여기서 가장 큰 과제는 하드웨어가 아니라 소프트웨어와 운영체제입니다. 이 운영체제는 차량 수준의 가장 낮은 수준의 글로벌 운영체제를 말합니다.

당시 NT2.0의 2세대 플랫폼을 천천히 예약 및 미리 보고 SkyOS에서 부분적으로 사용하도록 하기로 결정이 내려졌습니다. NT3.0 차세대 플랫폼이 완전히 제공되면 현재 Letao와 내년에 ET9가 완전히 제공하게 될 것은 SkyOS 차량 전체 운영 체제가 될 것입니다. 그 당시에는 모두가 긴밀하게 협력했습니다.

2020년부터는 전체 PD(제품 디자인) 시스템에 모든 에너지를 집중할 예정입니다. 제 생각에는 많은 Apple 기술 회사에서 제품 디자인과 제품 개발은 실제로 매우 중요합니다. 가치와 기술적 가치. 그것은 기술의 한계가 될 수도 없고, 기술의 노예가 될 수도 없습니다. 이는 매우 중요합니다. 그래서 제품팀은 회사가 다음에 구축해야 할 매우 중요한 팀이자 시스템이라고 생각합니다.

그러다가 2020년부터 2022년까지 총 8대의 차량을 기획하고 설계하는데 2년 반이 걸렸고, ET9의 NT3 사전 개발과 사전 연구까지 합치면 그야말로 밀도 높은 경험이었다. 우리는 전체 소프트웨어-하드웨어 제품을 함께 정의, 계획 및 관리하기로 결정했습니다. 그래야만 제품 경험 유전자가 일관성을 가질 수 있다고 생각합니다. 우리가 만드는 제품과 기술은 결국 사람의 감정에 달려 있다고 생각합니다.

1

"이것이 만들어지면 가장 먼저 하고 싶은 일은 펀치로 조각내는 것입니다."

Q: 2018년과 2019년에 실제로 4가지 일을 동시에 했다고 말씀하셨는데요. 제품 개발, 마케팅, 영업도 담당하며, 노미(Nomi) 제품도 책임지고 있다. 그럼 '노미의 아버지'라고 부를 수 있겠죠?

답: 기술적인 의미에서는 그렇습니다. 그러나 전략적인 의미에서는 확실히 빈 형제입니다. 하지만 누가 아빠이고 누가 엄마인지 고민할 필요는 없어요 하하하. 물론 그것을 처음 제안한 사람은 빈 형제였습니다.

Q. 니오 IN에서 리빈이 2017년 노미 첫 콘셉트 버전 영상을 틀었다. 나는 미래를 상상했습니다. 그것은 당신과 상호 작용할 수 있고 자동차의 일부 행동을 제어하는 ​​데 도움이 될 수 있습니다. 그 당시에는 완전히 미래에 대한 상상이었습니다.

답: 그 영상의 감독도 제가 맡았고, 대본도 직접 썼습니다.

Q: 지금 돌이켜보면 노미(Nomi)는 초기에 구상했던 제품과 조금 비슷했는데, 오늘 드디어 그것을 가능하게 한 기술적 물결을 열었습니다. 프로세스는 어떤가요?

ㅏ : 오른쪽. 당시 빈 형제가 저에게 노미의 제품 매니저 역할을 맡게 된 이유는 사실 이 아이디어가 제안된 2015년부터였습니다. 자동차와 자동차 디자인의 전통적인 관점에서 보면 이것이 매우 이상하다는 것을 알게 될 것입니다.

Q: 당신도 이상하다고 생각하는 사람 중 하나인가요?

답: 이상하다고 생각하지 않습니다.

하지만 90% 이상의 사람들이 그렇다고 말씀드리고 싶습니다. 그때, 나에게 깊은 인상을 남긴 문장이 있었다. 실제로는 전통 자동차 업계의 선배였던 동료였다. 만약 이게 만들어지면,그가 가장 먼저 하고 싶었던 일은 그를 주먹으로 쳐서 죽이는 것이었습니다.

Q: 당시 사람들이 주먹으로 쳐죽이고 싶은 느낌을 갖게 만드는 이 일을 어떻게 묘사했나요?

ㅏ :저는 우리의 초기 묘사에서 특히 감동받았습니다. 빈 형제가 가장 먼저 생각한 것은 그가 움직일 수 있는 생명체임에 틀림없다는 것이었습니다.

왜냐면 그 당시에는 많은 사람들이 자동차 화면에 AI가 있다고 상상했잖아요? 화면에 작은 눈을 가진 작은 공인 작은 이미지를 만듭니다. 이것은 가능합니다. 하지만 우리는 정말로 하나의 실체가 되기를 원합니다.

이것이 의미가 있는 이유는 그것이 실체라면 자동차와 공감각을 형성할 수 있고 사람들은 그것이 동일한 것이라고 인식할 것이기 때문입니다. 하지만 그것이 가상의 것이라면, 아바타라면 사람들은 항상 그것을 화면 뒤의 클라우드에 있는 것으로만 생각할 것인데, 이는 매우 다릅니다. NIO는 완전한 라이프사이클 사용자 경험을 제공하는 기업이므로 하나의 개체와 하나의 가상 신체가 아닌 개체와 개체가 함께 여행해야 하기 때문에 자동차가 감성적인 파트너가 되기를 바랍니다. 그것이 우리가 가장 먼저 말하는 것입니다.

둘째, 우리는 장기적인 생각을 가지고 있습니다. 왜냐하면 우리는 상대적으로 감정적 인 사람이고 사람들과 공감할 수 있기 때문에 결국 사람들은 여전히 ​​동행하고 싶어한다고 믿습니다. .

사람들은 혼자 있고 조용해야 한다고 말하지만, 실제로는 동료애가 부족하기 때문일 수도 있습니다. 우리는 동료애와 유대감, 아무 말 없이 조용히 그 자리에 있어도 오늘날 많은 사람들이 애완동물을 키우는 것처럼 일종의 동료애라고 믿습니다.

그래서 동지애는 당시 우리가 집중하고 싶었던 가치였습니다. 오늘 보면 말은 안 해도 정말 강한 존재다. 그것이 하나의 실체가 될 때에만 충분히 단단하고 충분히 강해질 수 있습니다. 그렇지 않고 화면에 대고 말하면 음소거해 주세요.

Q. 정말 없어졌어요.

A: 네, 사라지면 더 이상 존재하지 않는 것입니다. 그래서 이것은 철학적인 질문이고, 대답해야 할 실존적 질문입니다. (웃음) 그래서 우리는 그를 존재하게 하고, 그 다음에는 그를 의미있게 만들어야 합니다.

그래서 그 당시 가장 큰 도전은 실제로 모든 사람에게 이 물건의 가치와 중요성을 납득시키는 것이었습니다. 그러면 당신은 많은 오해에 저항해야 합니다. 왜냐하면 당신이 그에게 그것을 보게 해야만 그 사람이 그것을 믿을 것이기 때문입니다. 두 번째 과제는 기술이다. 그 당시에는 모든 음성 명령이 대화형이었던 것이 사실입니다. 사실 오늘날에는 이런 종류의 채팅이 없었습니다.

Q: 그런 자연어 상호작용은 없습니다.

A: 네, 아직 상호작용이 없습니다. 어떻게 모두가 이것을 믿게 만들 수 있을까요? 또 다른 더 큰 과제는 차량 자체의 기술입니다. 차량에서 이러한 것들을 어떻게 제어할 수 있습니까? 그 반대도 차량을 제어할 때 어느 정도 응답을 줄 수 있습니다.

그 때 기능을 만들어 놓았는데, 어떤 차들은 더 이상 이런 기능을 하지 않을 수도 있습니다. 하지만 1세대 자동차에서는 경험이 있습니다. 즉, 손이 중앙 제어 화면에 가까워지면 근접 센서가 있기 때문에 노미가 당신을 내려다볼 것입니다. 노미, 머리를 숙이게 되는데, 이는 이 필드의 이 공간을 제어할 수 있다는 의미이므로 살아있는 것으로 인식하게 됩니다. 또 다른 예를 들자면, 차 문을 열자마자 우리가 살펴보며 인사를 건네는 그런 경험은 사실 2017년 발매 전까지 아주 짧은 시간 안에 완성됐다.

Q. 드디어 해냈습니다.

A: 네, 정말 감동받았어요. 2017년 12월의 기자간담회였습니다. 12월 6일, 우리 팀 전체가 약 20~30개의 사례를 사용하여 처음으로 노미의 소프트웨어와 하드웨어의 경험을 완벽하게 연결할 수 있었습니다. 예를 들어, 노미는 당신과 대화하고, 다른 사람들에게 인사하고, 좌우를 살펴보고 마침내 살아 있음을 발견할 수 있습니다.

그렇다면 결국 통과해야 할 세 번째 단계는 무엇일까? 차량 전체의 하드웨어입니다. 노미 아래에 회전축이 있다고 생각하시겠지만 3자유도 모터+커넥팅로드 드라이브가 아닌 2자유도이고 내부에 벨트가 들어있습니다. 이런 것들을 쌓은 뒤 자동차는 충돌 테스트를 거쳐야 한다. 많은 사람들이 노미의 머리가 최대 60g의 충격 하중을 받아야 한다는 사실을 모르고 있습니다. 매우 흥미로운 점은 2017년 4월 충돌 실험에 갔을 때 팀에서 나에게 노미의 머리 사진을 보냈다는 것입니다. 머리에 더미 로고가 붙어 있고, 웃다가 충돌 후 조금 처졌지만 그 순간 마침내 노미가 자동차와 함께 배송될 수 있음을 확인했습니다.

큐:노미는 가장 터프한 스마트 비서입니다.

A: 하하하하, 응, 너무 힘들어.

Q. 탄생 과정을 보면 제품의 기술에 대해 철학적인 생각을 많이 하게 될 것 같아요.

A: 아마도 두 가지 작업 시나리오가 있을 것입니다. 하나는 다른 하나입니다. 초기 단계에서는 소위 상상력과 미래 지향적인 사고가 필요합니다. 이 부분에서는 기술을 살펴볼 것입니다. 왜냐하면 이것이 가능성을 보려면 이 리듬에 대한 깊은 이해가 필요하기 때문입니다. 모든 일에 있어서는 먼저 기술이 어디로 갈지 살펴본 다음 무엇을 할 수 있는지 살펴봅니다.

하지만 아마도 더 나은 방법은 철학적 사고를 포함하여 좀 더 미래 지향적인 모델 경험을 할 수 있다는 것입니다.

예를 들어, 그 당시 우리가 생각했던 것은 인간과 자동차 상호작용의 최종 결과는 무엇인가였습니다.

그때는 GUI인지 DUI인지, GUI인지 Mix UI인지 말하고 싶습니다. 정확히 무엇입니까? 이것은 업계에서 일반적으로 사용되는 전문 용어입니다. 하지만 이건 아직 패러다임 안에 있는 것 같아요.

그래서 우리가 처음에 가졌던 궁극적인 생각은 사람과 자동차는 허공과 대화하지 않는다는 것, 즉 어떻게 허공과 대화하지 않을 수 있겠느냐는 것이었습니다. 그런데 거기에는 무엇이 있을까요? 당신과 그 사람이 인간처럼 이야기하고 소통하고 교류하는 느낌입니다.

Q: 일련의 용어로 둘러싸인 패러다임, 즉 기존의 사고방식에서 벗어나고 싶을 뿐입니다. 그런 다음 실제로 더 간단하고 인간과 유사한 방식을 사용하여 수행하려는 작업을 요약했습니다.

답: 그렇죠.

Q: 하지만 어느 정도는 더 추상적입니다. 실제로는 이 기술이 어떤 수준에 도달할 수 있다고 생각하는지를 반영합니다. 어떤 종류의, 심지어 미적인 방법이라고 생각하시나요? 것들이 나오고 있습니다.

답변: 매우 사실입니다. 예를 들어, 우리는 4년 전 ET 9 자동차를 상상하고 있었습니다.

Q: 4년 전부터 ET9을 상상하고 있었습니다.

답: 그렇습니다. 그 당시에는 어떻게 변할지 고민하고 있었죠? 최전방 경험을 위해서는 어떤 종류의 반복과 개발이 필요합니까? 4년 전만 해도 모든 사람들은 여전히 ​​풍부한 SR 및 ESD 정보를 제공하는 더 큰 대시보드를 출시하고 있었습니다. 오늘날까지,테슬라S와 X는 큰 대시보드를 다시 가져옵니다.

하지만 매일같이 유저들 앞에 쌓여가는 이런 정보들 속에서 그는 누구의 불안을 느끼는 걸까요? 사실 이는 사용자의 불안이 아니다.

그래서 그때 우리는 사람이 말하는 것처럼 자동차와 사람 사이의 대화가 더 따뜻해질 수 있는지 물었습니다. 자율주행에서 제가 원하는 인간과 자동차의 상호작용은 아마도 자동차가 여러분에게 주는 것은 매우 간단할 것 같습니다. 문장, 내가 운전 중이야, 걱정할 필요 없어, 그냥 내 상상일 뿐이야.

애플이 정말로 자동차를 만든다면 사람들과의 상호작용은 어떨까? 스티어링 휠이 달린 작은 아이콘이 Mac에 나타날 확률이 높다는 것을 알고 있습니다. 붐, 녹색으로 바뀌면 걱정할 필요가 없습니다. 이런 것일 수도 있습니다.

Q: 정말 애플이네요.

A: 많은 정보를 제시하고 무엇을 해야 할지 알려주는 것보다.

그래서 좀 더 앞을 생각한다면 인간의 본질로 돌아가서 무엇이 옳은 것인지 생각해 보아야 한다고 생각합니다. 가장 간단한 것은 나는 항상 초기 Wall-E 영화와 만화를 좋아했고 그 안에 매우 흥미로운 장면이 있다고 생각했습니다. 즉 미래의 사람들은 모두 매우 뚱뚱했습니다. 왜냐하면 AI가 와서 내가 원하든 원하지 않든 결과를 제시할 때마다 확인만 하면 되기 때문입니다. 그렇다면 이것이 우리의 최종 게임입니다.

Q: 그렇다면 인간이 뚱뚱하고 안 뚱뚱하다는 것은 또 다른 문제입니다.

답: 그렇습니다. 그러면 사람들도 운동을 하게 될 것이다. (웃다)

Q: 이제 우리는 확실히 이러한 미래에 점점 가까워지고 있는 것 같습니다. 니오 IN에서는 노미 GPT 시스템을 도입했는데, 언제부터 이 일을 시작하게 됐나요? 노미는 어떻게 대형 모델의 축복을 받아 노미가 됐나요?

A: 올해가 사실상 첫 번째 버전이고, 작년부터 재고를 확보하기 시작했습니다. 작년에 오랜 시간 작업을 거쳐 올해 출시하게 되었습니다.

Q: 그래서 ChatGPT가 나오자마자 노미에게 있어서 그 중요성을 바로 깨달았어요.

답: 그렇습니다. 그러다가 작년부터 올해까지 주로 작업한 것이 자체 베이스 모델이었습니다. 따라서 Nomi GPT 프레임워크를 기반으로 하는 올해 첫 번째 버전은 올해 초의 245 버전입니다. 하지만 미래에 우리가 실제로 준비하고 있는 것은 대형 모델의 질문과 답변, 이 ChatBot 외에도 사진 생성과 같은 작업도 할 수 있다는 것입니다. 우리는 이 작업을 비교적 늦게 했습니다. 왜냐하면 이 작업에는 자동차 장면이 없기 때문입니다.

Q: 그렇다면 우리는 왜 아직도 이 일을 하고 있나요?

A: 한 가지만 말씀드리자면, 차량 내 이미지를 만드는 주요 임무는 모든 사용자가 차에 탑승한 후 노미에 대해 알 수 있기를 바라는 것입니다.

그리고 올해 더 나아가면, 가장 큰 기술적 반복은 인지 지능과 전체 상황, 그리고 배타적인 감정에 대한 작업이 될 것입니다.

Q: 그러다가 독자적으로 모델을 개발하게 됐는데요.

답: 그렇습니다. 이는 실제로 일련의 모델을 조합한 것이며 많은 사람들이 이를 모델군이라고 부릅니다. 우리도 같은 논리를 가지고 있습니다.

실제로 그 뒤에는 NomiGPT의 인지 센터인 스케줄링 센터가 있으며, 성숙 여부에 관계없이 기본 모델 기능을 직접 사용하여 일부 대화를 생성하거나 일부 작은 모델을 사용하여 해당 기능을 예약합니다. 몇 가지 작업을 수행합니다. 때때로 우리는 서비스와 같은 특정 시나리오를 수행하기 위해 자체 가치 체계에 맞춰 조정된 모델을 사용합니다. 이것이 실제로 우리 에이전트가 탄생한 방식입니다.

Q. 내부적으로 소위 대형모델팀을 재구축한 적이 있나요?

A: 네, 저희 이름은 AI시스템팀입니다. 제품과 기술은 서로 긴밀하게 협력하고 있습니다. OpenAI의 Omni와 유사한 모델 세트에 가깝다고 생각합니다. 현재 Multi-modality도 개발 중이며 올해 말에 여러분과 소통하겠습니다.

1

NIO는 본질적으로 감성지능을 수행하고 있으며, NIO는 이를 먼저 자동차에 구현하게 됩니다.

Q. 노미의 탄생과 오늘날 많은 대형 모델의 개발 방향은 감성을 강조한다. 감정과 동료애가 그토록 중요한 이유. ChatGPT와 같은 제품은 실제로 기술을 발전시키기 위해 감정으로 시작하지 않기 때문입니다.

답: 그렇습니다. Inflection과 마찬가지로 실제로 이 방향으로 일하는 사람은 상대적으로 적습니다.

Q: 그리고 이것이 당신의 출발점입니다.

A: 네, 왜냐하면 이 일이 먼저 우리 비즈니스 모델의 본질로 돌아오기 때문입니다. 자동차는 수명이 긴 대형 품목이기 때문입니다. 그러자 빈 형제도 “우리는 로보택시를 하지 않으니 자동차 한 대, 한 사람, 한 가족, 평생일 뿐”이라고 말했다. 추상적으로 보면 이건 본질적으로 일종의 감성지능이다.

Q: 어떻게 하면 이걸 오래오래 존재하게 할 수 있을까? 곰곰이 생각해 보니, 연결될 수 있는 유일한 연결고리는 감정뿐이라는 생각이 든다.

A:네.

Q: 이것은 너무 사회학적이다.

A: 하하하, 이건 빈 형제의 영향이에요.

Q: 노미의 다음 계획은 무엇인가요?

A: 좀 더 살펴보면 오늘 우리는 실제로 인지 지능과 상황 지능에 대해 이야기하고 있습니다. 이는 실제로 업계가 추진하고 있는 기술 프레임워크 중 일부입니다. 구축할 것.

여기서 핵심은 상황에 대한 인식과 이해, 그리고 이를 바탕으로 추론하는 것입니다. 게다가 지난해 우리의 매우 중요한 과제 중 하나가 노미 메모리 구축이었다고 볼 수 있습니다. 우리에게 있어서 메모리 모듈은 앞으로 2~3년 동안 계속해서 투자할 전략적인 부분이기 때문에, 독점적이고 신뢰할 수 있으며 신뢰할 수 있다는 의미가 있습니다. 이것은 매우 중요한 것입니다. 이러한 것들로만 소위 감정적 경험에 대해 이야기할 수 있습니다. 실제로 이 뒤에는 수행해야 할 기초 작업과 조정 작업이 많이 있습니다.

노미의 세대 능력을 포함해서 환상과 가치관의 일치는 매우 큰 문제입니다. 왜냐하면 우리가 하는 일이 너무 심각하다는 것을 알게 될 것이기 때문입니다. ChatGPT가 아닌 경우 부적절한 내용을 만들어 사용자들과 농담을 할 수 있으며, 사용자들은 이를 나쁜 사례라고 생각할 것입니다. 아니, 예를 들어 당신이 차를 타고 있는데, 당신이 그 가족의 노미인데, 일반 AI가 하는 일이 별거 아닐 수도 있지만, 사용자가 너무 나쁘다고 생각하는 일을 하게 되고, 결국 당신은 완전히 신뢰하게 됩니다. 무너진다.

그래서 이 또한 우리가 앞으로 마주하게 될 매우 큰 도전이기 때문에 그 이면에는 할 일이 많습니다.

Q: 실시간으로 제품 반복 작업도 수행하게 됩니다.

답: 그렇습니다. 우리에게는 매일의 운전자이자 엔진에 연료를 공급하는 링크가 있습니다. 이는 사용자들이 공유합니다.

최초의 차량 내 AI가 대화 형식으로 피드백을 제공할 수 있기 때문입니다. 문제를 보고하기 위해 Hi Nomi를 외치면 문제를 포함한 로그와 상태가 실시간으로 분석됩니다. 이제 몇 시간 내에 제품 관리자에게 자동으로 배포될 수 있습니다. 이것이 2018년에 우리가 구축한 역량입니다. 이러한 채널을 통해 우리는 요구 사항과 문제를 포함하여 우리 제품이 무엇인지 잘 계산하고 검증할 수 있으며 이를 신속하게 해결할 수 있습니다.

우리는 동시에 많은 일을 해야 합니다. 어떻게 하면 사용자 가치의 단기 전달과 장기 전달의 균형을 맞출 수 있을까요? 이것이 우리의 일상적인 제품 계획입니다.

Q: 노미에 대한 당신의 비전은 점점 영화 <그녀>를 연상시킨다. 이 영화가 당신에게 영감을 주었다고 이전에 언급하셨죠. 노미가 단순히 자동차 속 AI로 간주되는 것이 아니라, 모두가 AI의 제품 형태를 탐구하는 것도 매우 중요한 방향이다. 그게 지금 우리가 더 논의하고 있는 '그녀'의 장면인가, 아니면 AI 동행인가, 이 차의 환경에서 태어나는 것이 더 적합한가?

ㅏ: 네, 저는 그것이 매우 가능하다고 생각합니다. 스마트 스피커나 휴대폰보다 더 빠를 수도 있다고 생각합니다.

우선 여기서 흥미로운 점이 있는데, 바로 자동차의 공간적 속성, 이동속성, 독점적 속성이다. 결국 너무 비싸기 때문에 사람들이 투자하는 시간가치, 감성가치, 감성가치가 엄청납니다. 아주 좋은 기회라고 생각합니다.

둘째, 하드웨어, 컴퓨팅 성능 및 속성 측면에서 자동차는 모든 것 중에서 가장 강력한 구현 지능 기능을 갖추고 있습니다. 휴대폰으로는 360도 감지할 수 없잖아요? 와서 차에 타라고 말할 수는 없습니다. 딸깍 소리가 나면 전화가 날아갔습니다. (웃다)

이제 우리는 구체화된 지능에 대해 이야기하고 있기 때문에 실제로 자동차는 지능형 자율 주행에서 이 기능을 실현한 최초의 지능형 에이전트입니다. 그래서 저는 그가 이런 가치 창출을 통해 가장 큰 변화를 가져올 수 있다고 생각하며, 그래서 궁극적인 제품 형태가 될 수 있는 기회가 있다고 믿습니다. .

Q: 자동차는 시속 120㎞의 속도를 내는 '킬링 머신'이라고 할 수 있다. 하지만 인류 역사상 기계에 대한 신뢰가 가장 강한 것 같다. 실제로 AI 기술이 직면한 과제 중 하나는 이러한 신뢰를 구축하는 방법입니다.

답변: 매우 사실입니다.

Q 그리고 그 자체로 그런 신뢰의 환경이 있어요.

ㅏ : 오른쪽. 자동차를 소유한 후에는 실제로 신뢰를 바탕으로 엄청난 투표를 한 것이므로 (자동차 회사로서) 사용자의 기대를 실망시켜서는 안 됩니다.