소식

홀로그램 ar 안경이 나왔습니다! zuckerberg는 현장에서 상자를 풀었고 jen-hsun huang은 이를 경험한 첫 번째 배치 중 하나였으며 llama 3.2 대형 모델이 출시되었습니다.

2024-09-26

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

작성자 | 쳉 qianzer0

편집 | 신 위안

zhidongxi는 9월 26일 베이징 시간으로 오늘 오전 1시 15분에 연례 'mr circle spring festival gala' meta connect 2024 컨퍼런스가 공식적으로 시작되었다고 보도했습니다.

메타 ceo 마크 주커버그는 검정색 티셔츠를 입고 무대에 올라 본격적으로 소식을 전했다.퀘스트 3s헤드 디스플레이,라마 3.2대형 모델,레이밴 스마트 안경홀로그램 ar 안경새로운 제품을 기다리고 있습니다.

저커버그가 처음으로 공개한 새로운 하드웨어 제품은퀘스트 3s, 충격적인 가격$299.99(대략 rmb 2,110에 해당)

메타 최초의 소비자급 올인원 mr머신인 퀘스트3에 비하면 성능은 다소 뒤떨어지지만, 초기 가격은$200 할인, apple vision pro와 거의 동일1/11, 정말 비용 효율적인 기계입니다! ! !

대형 모델도 새롭게 출시되었습니다! 메타 다중 모드 모델라마 3.290b 및 11b 매개변수를 포함하여 출시됨시각적 대형 언어 모델, 1b 및 3b 매개변수경량 일반 텍스트 모델

라마 3.2를 사용하면,메타 ai음성 상호 작용을 지원하고 다양한 사운드 옵션(일부 유명 인사의 음성 포함)을 제공하는 새로운 다중 모드 기능을 출시했습니다. zuckerberg는 meta ai를 사용한 실시간 음성 채팅을 시연했는데 매우 원활했습니다.

메타가 역대 최고라고 부르는 ar 안경도 있습니다——홀로그램 ar 안경"오리온"

nvidia 창립자이자 ceo인 jensen huang은 이미 이를 시도했습니다.

01.

quest 3s: 가격이 미화 300달러인 합리적인 가격의 버전입니다.

성능은 quest3와 거의 동일합니다.

우선, quest 장치의 저렴한 버전이 출시되었습니다!

직접 메타퀘스트 3s가격은 200달러(약 1,406위안) 인하됐고, 성능은 퀘스트3와 거의 비슷하다.

meta quest 3s 128gb 버전의 가격은$299.99(대략 rmb 2,110에 해당), 256gb 버전의 가격은$399.99(대략 rmb 2,813에 해당) 512gb quest 3은$499.99(약 3,516 rmb에 해당)

두 헤드셋 모두 동일한 프로세서를 사용합니다.퀄컴 스냅드래곤 xr2 gen 2 칩. 상당한 가격 하락의 핵심은 quest 3s가 pancake 렌즈를무한렌즈

라이브 시연을 보면 4k 디스플레이를 갖춘 quest 3s는 매우 선명한 디스플레이를 제공하며 dolby atmos 서라운드도 지원합니다.

메타horizon os 재구축공간 컴퓨팅을 달성하기 위해 사용자가 youtube, facebook, instagram과 같은 기본 2d 애플리케이션을 사용하도록 더 효과적으로 지원할 수 있습니다.

메타가 추가되었습니다공간 오디오, 그리고 개선된통과대비와 색상은 사진 표현을 더욱 사실적이고 몰입감 있게 만듭니다.

zuckerberg는 meta가 협력하고 있다고 발표했습니다.마이크로소프트협력하다, 이용하다윈도우 11 pc원활한 가상 데스크탑 경험을 달성하기 위해.

meta는 이미 다중 화면 지원과 디스플레이에서 일어나는 일과 직접 상호 작용할 수 있는 기능을 제공합니다. 예를 들어 사용자는 노트북의 인터페이스를 quest 장치로 직접 드래그할 수 있습니다.

보다 현실적인 metaverse 환경을 만들기 위해 meta가 출시되었습니다.하이퍼스케이프, 사용자는 휴대폰으로 자신이 있는 방을 스캔한 다음 헤드셋을 착용하기만 하면 언제든지 방을 "재현"할 수 있습니다.

이 머리 장착형 디스플레이 장치를 사용하면 맨 앞줄에 앉아 콘서트를 관람할 수 있고, 홈시어터에 앉아 고화질 블록버스터 영화를 시청하거나 운동을 할 수 있습니다.

또한 quest 3s는 meta의 수천 가지 앱 및 전체 게임 라이브러리는 물론 batman: arkham shadow와 같은 곧 출시될 quest 3 및 3s 독점 게임과도 호환됩니다.

xr을 처음 사용하거나 quest 및 quest 2 장치의 가격 인하를 기다리고 있는 사람들에게는 quest 3s가 더 나은 선택일 수 있습니다.

02.

llama 3.2: 시각적 모델이 gpt-4o mini를 따라잡습니다.1b 엔드사이드 모델은 gemma와 유사함

오픈소스 ai 측면에서 meta는 새로운 멀티모달 대형 모델을 출시했습니다.라마 3.2

llama 3.2에는 90b 및 11b 매개변수 사양을 갖춘 두 개의 시각적 대형 언어 모델과 사전 훈련 및 지침 조정 버전을 포함하여 장치에서 로컬로 실행할 수 있는 1b 및 3b 경량 일반 텍스트 모델이 있습니다.

다운로드 주소:https://www.llama.com/

1b 및 3b 모델 지원128k 토큰컨텍스트, qualcomm 및 mediatek 하드웨어 및 대상에 적응암 프로세서최적화되었습니다.

3b 모델지침 따르기, 요약, 빠른 재작성, 도구 사용과 같은 작업에서 gemma 2 2.6b 및 phi 3.5-mini 모델보다 성능이 뛰어납니다.1b 모델성능은 젬마와 비슷합니다.

90b 및 11b 시각적 모델해당 텍스트 모델을 직접 대체하며 이미지 이해 작업에 대한 성능은 claude 3 haiku 및 gpt-4o mini와 같은 폐쇄형 모델보다 우수합니다.

예를 들어 회사에 지난해 매출이 가장 높은 달이 무엇인지 묻는다면 라마 3.2는 이용 가능한 차트를 바탕으로 추론하고 신속하게 답변을 제공할 수 있다.

또한 지도에 표시된 특정 경로의 거리와 같은 질문에 대해 추론하고 답변하는 데 지도를 사용할 수도 있습니다.

시각적 모델은 또한 이미지에서 세부 정보를 추출하고 장면을 이해한 다음 이미지 캡션으로 한두 문장을 생성하여 스토리를 전달하는 데 도움이 될 수 있습니다.

다른 개방형 다중 모드 모델과 달리 사전 훈련된 모델과 정렬된 모델 모두 torchtune을 사용하여 맞춤형 애플리케이션에 맞게 미세 조정하고 torchchat을 사용하여 로컬로 배포할 수 있습니다.

11b 및 90b 매개변수가 있는 다중 모드 모델이 필요합니다.이미지 추론을 지원하는 새로운 모델 아키텍처

meta의 훈련 과정은 사전 훈련된 llama 3.1 텍스트 모델로 시작하여 먼저 이미지 어댑터와 인코더를 추가한 다음 대규모 노이즈로 데이터를 사전 훈련한 다음 중간 규모 고품질에 대한 사전 훈련으로 구성됩니다. 도메인 및 지식 증강 데이터에 대한 교육을 제공합니다.

사후 학습에서 meta는 텍스트 모델과 유사한 방법을 사용하여 감독된 미세 조정, 거부 샘플링 및 직접 선호도 최적화 측면에서 여러 라운드의 정렬을 수행합니다. 그 결과 이미지와 텍스트 단서를 모두 수신하고 둘의 조합을 깊이 이해하고 추론할 수 있는 모델 세트가 탄생했습니다.

1b 및 3b 매개변수가 있는 경량 모델의 ​​경우 meta는 강력한 교사 모델을 사용하여 더 나은 성능을 갖춘 작은 모델을 생성함으로써 장치에 효율적으로 적응할 수 있는 최초의 고성능 경량 llama 모델 중 하나가 되었습니다.

meta는 llama의 기존 모델 크기를 줄이면서 최대한 많은 지식과 성능을 복원함으로써 llama 3.1 8b의 구조화된 가지치기를 일회성으로 활용합니다.

사후 훈련에서 연구원들은 사전 훈련된 모델을 기반으로 여러 라운드의 정렬을 수행하여 최종 채팅 모델을 생성하기 위해 llama 3.1과 유사한 접근 방식을 사용했습니다.

meta는 개발자가 단일 노드, 로컬, 클라우드 및 장치 측과 같은 다양한 환경에서 llama 모델을 사용하는 방식을 크게 단순화하고 rag(검색 강화 생성) 및 통합 보안 도구 지원 턴키 배포를 가능하게 하는 첫 번째 공식 llama 스택 릴리스를 공유합니다. 응용 프로그램의.

03.

meta ai: 다양한 유명인의 목소리 중에서 선택하고,

p사진과 실시간 번역이 더 편리해졌습니다

라마 3.2를 사용하면,메타ai에는 목소리가 있다

이제 음성을 사용하여 meta ai와 대화하고 질문에 답하거나 웃게 만드는 농담을 해보세요. meta는 또한 음성에 친숙한 ai 음성을 많이 추가합니다. 영국 여배우 주디 덴치(judi dench)의 목소리도 마찬가지다.