李彦宏内部発言暴露:オープンソースモデルの効率性が高くないと計算力問題を解決できない
小乖欢颜僮
发表于 2024-9-11 17:15:54
1275
0
0
最近、李彦宏氏の内部発言が明らかになった。李彦宏氏は、将来の大モデル間の格差がますます大きくなる可能性があると考えている。彼はさらに、大きなモデルの「天井」は高く、現在は理想的な状況から非常にかけ離れているため、モデルは絶えず高速に反復し、更新し、アップグレードしなければならないと説明した。数年、十数年を一日のように投入し、ユーザーのニーズを絶えず満たし、コストを下げて効果を高める必要がある。
業界の「大モデル間の能力には壁がない」という説について、李彦宏氏は「新モデルが発表されるたびに、GPT-4 oと比較しなければならない。私の得点はそれとあまり差がないと言っている。一部の単項での得点はそれを超えているが、これは最先端モデルとの差がないことを示しているわけではない」と異なる見方を示した。
彼によると、多くのモデルは自分を証明するために、発表後にランキングを作り、テスト問題を当てたり、クイズを解いたりするが、ランキングを見ると、モデルの能力はすでに近いかもしれないが、「実際の応用には実力に明らかな差がある」という。
李彦宏氏は、モデル間の差は多次元的だと指摘した。業界では理解、生成、論理、記憶などの能力の差に注目することが多いが、コスト、推論速度などの次元は無視されており、同じ効果を達成できるモデルもあるが、コストが高く、推論速度が遅く、先進モデルに及ばないモデルもある。
李彦宏氏はまた、「大モデル時代までは、オープンソースは無料を意味し、コストが低いことを意味することに慣れていた」と述べた。オープンソースのLinuxのように、すでにパソコンがあるのでLinuxを使うのは無料だと説明した。しかし、これらは大モデル時代には成立せず、大モデル推論は高価であり、オープンソースモデルも計算力を送ることができず、自分で設備を買わなければならず、計算力の効率的な利用を実現することができなかった。
「効率的にオープンソースモデルはだめだ」と彼は述べた。「クローズソースモデルは正確にはビジネスモデルと呼ぶべきで、無数のユーザーが研究開発コストを分担し、推理用の機械資源とGPUを分担し、GPUの使用効率は最も高く、百度文心大モデル3.5、4.0のGPU使用率はいずれも90%以上に達した」。
李彦宏氏は、教育科学研究などの分野では、オープンソースモデルは価値があると分析している。しかし、ビジネス分野では、効率、効果、最低コストを追求している場合、オープンソースモデルには優位性はありません。
大モデルの応用面では、李彦宏氏はまず現れたのはCopilotで、人を補助すると考えている。次はエージェントエージェントであり、一定の自主性があり、ツールを自主的に使用し、反省し、自己進化することができる、このような自動化の程度が再発展すれば、AI Workerになり、各方面の仕事を独立して完成することができる。
また、「スマートボディという発展方向をよく見ている人は多いが、今日までスマートボディはコンセンサスではなく、百度のようにスマートボディを大モデルとして最も重要な戦略、最も重要な発展方向としている会社は多くない」と述べた。
李彦宏氏は、スマートボディの敷居は確かに低く、大きなモデルをどのように応用するか分からない人が多いが、スマートボディは非常に直接的で効率的で簡単な方法であり、モデルの上にスマートボディを構築するのはかなり便利だと考えている。
CandyLake.com 系信息发布平台,仅提供信息存储空间服务。
声明:该文观点仅代表作者本人,本文不代表CandyLake.com立场,且不构成建议,请谨慎对待。
声明:该文观点仅代表作者本人,本文不代表CandyLake.com立场,且不构成建议,请谨慎对待。
-
【ゆとりサイクルが始まった!歴史を鑑とする:FED金利調整と大統領選結果には“隠れた関連”があった】データによると、選挙日前に金利が引き上げられた5年間で、大統領やホワイトハウスを支配していた政党が4年連 ...
- 不正经的工程师
- 前天 21:56
- 支持
- 反对
- 回复
- 收藏
-
【トヨタが米国で約4万2000台のカローラCrossをリコール】トヨタ自動車は当時時間9月20日、2022年6月から2024年9月までに生産された一部のカローラCrossハイブリッド車を安全にリコールしていると発表した。リコー ...
- 伍六三
- 1 小时前
- 支持
- 反对
- 回复
- 收藏
-
【図解:史上、FRBが金利を下げた後の株式債為替市場の表現はどうだったのか?】FRBが再び重大な金融政策の転換の「十字路」に立ったことに伴い、歴史的に見て、FRBの金利引き下げは株式市場、債務市場、為替市場の ...
- 愿为素心人
- 3 天前
- 支持
- 反对
- 回复
- 收藏
-
インテルは9月19日、イスラエルの自動運転技術会社Mobileyeの大株主として、ビジネスの将来に自信を持っており、現在、同社の株式の多数を切り離す計画はないと発表した。 ...
- hecgdge4
- 前天 20:20
- 支持
- 反对
- 回复
- 收藏