메타, 최신 오픈 소스 대형 모델 Llama 3 발표, OpenAI 지속 추격
panqinlai
发表于 2024-4-19 11:13:57
5434
0
0
4월 18일 (현지 시각) 메타는 8B와 70B의 사전 훈련 및 명령 미세 조정 버전을 제공하는 최신 오픈 소스 모델인 Llama 3를 발표했다.이는 지금까지 가장 선진적인 오픈 소스 모델로 OpenAI를 포함한 대형 모델 회사에 강력한 경쟁을 형성할 것이며, 오픈 소스 모델에 의존하는 많은 인공지능 회사에도 혜택을 줄 수 있다.
큰 시세가 소폭 하락한 가운데 메타 주가는 1.54% 상승했다.
메타의 공식 소개에 따르면 Llama 3는 두 개의 맞춤형 24K GPU 클러스터에서 15T 이상의 데이터를 기반으로 훈련했다. 이는 Llama 2가 사용하는 데이터 세트보다 7배, 4배 많은 코드이며 Llama 3는 8K 컨텍스트 길이를 지원하며 Llama 2 용량의 두 배이다.
메타 공식
또한 메타는 엘라마 3 두 버전과 구글 젬마, 구글 제미니, 미스트랄, 앤트로픽의 클라우드 3 등 경쟁사의 매개변수를 비교했다.
사용자들에게도 메타 자체 출시한 메타 AI를 통해 엘라마3를 느낄 수 있다.저커버그 메타 CEO는 메타 AI가 메타 산하 주요 제품인 왓츠앱, 인스타그램, 페이스북, 메신저 상단의 검색창에 통합되고 웹사이트 메타.ai를 만들어 쉽게 사용할 수 있도록 했다고 설명했다.
메타의 수석 과학자 Yann LeCun에 따르면 앞으로 몇 달 동안 Llama는 더 많은 버전을 계속 출시 할 것이며 Llama 3의 연구 논문도 곧 출시 될 것입니다.엔비디아의 수석 과학자 짐 팬은 나중에 발표 될 수있는 Llama 3-400B 이상의 버전이 GPT-4 수준의 모델을 사용할 수있는 일종의"분수령"이 될 것이라고 생각합니다.
주목할 만한 것은 Llama 3의 출시가 이전 버전처럼 오픈 소스 커뮤니티의 센세이션을 불러일으켰지만, 이번 주 초 바이두의 창업자 리옌훙은 오픈 소스 모델이 점점 더 뒤처질 것이라고 공개적으로 밝혔다.
리옌훙에 따르면 개발자가 바이두의 문심 4.0 다운그레이드를 통해 재단한 더 작은 사이즈 모델은 소스 모델을 직접 꺼내 조정한 모델보다 동등한 사이즈에서 효과가 훨씬 좋다;동등한 효과에서 원가가 현저히 낮다."모두들 이전에 오픈 소스로 오픈 소스가 싸다고 생각했는데, 사실 큰 모델 장면에서 오픈 소스가 가장 비싸다.그래서 오픈 소스 모델은 점점 더 뒤처질 것"이라고 말했다.
CandyLake.com 系信息发布平台,仅提供信息存储空间服务。
声明:该文观点仅代表作者本人,本文不代表CandyLake.com立场,且不构成建议,请谨慎对待。
声明:该文观点仅代表作者本人,本文不代表CandyLake.com立场,且不构成建议,请谨慎对待。
猜你喜欢
- iPhone 16 두 모델의 배송 시간이 단축되었습니다!무슨 신호?
- 애플, 인도 아이폰 모델별 판매가격 인하
- 유럽 프라이버시 규제 기관, 구글이 인공지능 모델에 데이터 활용 실태 조사
- 바이두 심떨림: 10만 카드 계산력 클러스터를 대상으로 계산 플랫폼 능력 문심 대모델 하루 조정량 7억 회 초과
- 메타, 메가톤급 신제품 발표: 299달러 Quest 3S 헤드, AR 안경 프로토타입, 다중모드 AI 모델
- 바이두 월드 2024는 11월 12일에 열릴 문심 대형 모델의 하루 평균 호출량이 이미 7억 건을 초과했다
- 포드 CEO는"지루한"모델 제조에 싫증이 났고, 개성화와 전동화 제품은"새로운 기쁨"이 되었다
- 홍콩 주식 애플 산업 사슬 상승!iPhone 16 Pro 모델의 수요는 여전히 견조하며 향후 판매량은 어떻습니까?
- 머스크 Cybercab 출시 임박!국내의 많은 거두들이 앞다투어 Robotaxi 중국 모델을 탐색하다
- 패러데이는 내년 말까지 2차 브랜드 첫 모델을 하차할 계획이다
-
【英偉達の需要が高すぎる?SKハイニックス:黄仁勲がHBM 4チップの6カ月前納入を要求!】SKハイニックスの崔泰源(チェ・テウォン)会長は月曜日、インビダーの黄仁勲(ファン・インフン)CEOが同社の次世代高帯域 ...
- 琳271
- 前天 17:54
- 支持
- 反对
- 回复
- 收藏
-
ファイザーが前立腺がんを治療する革新薬テゼナ& ;reg;(TALZENNA®,一般名:トルエンスルホン酸タラゾールパーリカプセル)は2024年10月29日に国家薬品監督管理局(NMPA)の承認を得て、HRR遺伝子突然変異 ...
- 什么大师特
- 昨天 17:41
- 支持
- 反对
- 回复
- 收藏
-
南方財経は11月5日、中央テレビのニュースによると、現地時間11月5日、米ボーイング社のストライキ労働者が59%の投票結果で新たな賃金協定を受け入れ、7週間にわたるストライキを終えた。ストライキ労働者は11月12 ...
- Dubssgshbsbdhd
- 昨天 16:27
- 支持
- 反对
- 回复
- 收藏
-
【マスクはテスラが携帯電話を作ることに応えた:作れるが作らないアップルとグーグルが悪さをしない限り】現地時間11月5日、有名ポッドキャストのジョローガン氏のインタビューに応じ、「携帯電話を作るのは私たち ...
- 波大老师
- 昨天 14:41
- 支持
- 反对
- 回复
- 收藏