OpenAIとDeepMindは、スケーリング則に関する研究において異なる視点と手法を持っています。スケーリング則は、大規模モデルのパラメータ数、データ量、計算量の変動に伴う損失変化を予測するものです。両者の競争は人工知能の発展を促進し、人と機械が共存する未来に影響を与えます。大規模言語モデルの事前学習過程では、モデルサイズ、データ量、トレーニングコストのトレードオフが関わってきます。スケーリング則は、最適な設計決定を支援することができます。DeepMindは、モデルサイズとデータ量を同等にスケールさせるべきだと提唱する一方、OpenAIはより大きなモデルを選択する傾向があります。DeepMindはAlphaGoやAlphaFoldを開発し、深層強化学習とニューラルネットワークの可能性を示しました。一方、OpenAIはGPTシリーズモデルを開発し、生成モデルにおける卓越した能力を示しました。研究の結果、モデル性能に影響を与える3つの要素は相互に影響し合うことが示され、DeepMindのChinchillaモデルは優れた性能を示しました。国内の百川智能や明德大模型もスケーリング則の研究に貢献しています。DeepMindはAGIのレベル分類方法を提案し、人工知能の異なる発展段階を明らかにしました。
関連推奨
Google DeepMindがCCP GamesのEVE Onlineに出資し、汎用人工知能の実験場となる
Google DeepMindが『EVE Online』開発元CCP Gamesの少数株を取得し、仮想世界をAIテスト環境に活用。CCP Gamesは1.2億ドルで韓国Pearl Abyssから自社株を買い戻し、Fenris Creationsに改名。取引額は2018年の評価から大幅に下落。汎用人工知能(AGI)のサンドボックス環境を目指す。....
OpenAI、リアルタイム音声モデル3種類を公開 〜推論対話、リアルタイム翻訳、リアルタイム字幕作成向け〜
OpenAIは3種類のリアルタイム音声モデルをリリースしました。GPT-Realtime-2はGPT-5レベルの推論能力を持ち、複雑な要求や自然な会話をサポートします。GPT-Realtime-Translateはリアルタイム翻訳に特化しています。GPT-Realtime-Whisperは音声認識に重点を置いています。これらのモデルは開発者にさまざまなシナリオでの音声アプリケーションの解決策を提供します。
OpenAI Nexusチッププロジェクトが進展困難に ブロードコムとマイクロソフトは初回生産能力の40%を購入することを約束した上で投資を検討
OpenAIが自前で開発する「Nexus」チッププロジェクトが進展困難に陥っている。ブロードコムは、マイクロソフトに初期生産能力の40%を購入することを約束してから投資を行うことを要求している。このプロジェクトでは2030年までに10ギガワットの計算力を持つクラスターを構築することになっており、インテルやナビダスに依存する状況を脱却するのが目的であるが、資金調達における対立により協力関係が停滞している。
OpenAIが信頼できる連絡先機能をリリース:AIが自害予防のバリアとなる
OpenAIは5月7日、AI監視と審査チームを通じてユーザーの自傷傾向を特定し、心理的危機にある成人にデジタルな命綱を提供する「信頼できる連絡先」安全機能を発表した。....
OpenAI が NVIDIA などの大手企業と共同で MRC プロトコルを発表し、大規模な AI 学習ネットワーク構造を再構築
OpenAI は AMD、ブロードコン、インテル、マイクロソフト、NVIDIA など五大企業と共同で、マルチパス信頼性接続(MRC)プロトコルを発表しました。このプロトコルは、大規模な AI 学習におけるネットワーク遅延と障害問題を解決することを目的としています。このプロトコルはオープンコンピューティングプロジェクト(OCP)にオープンソース化され、3層アーキテクチャから2層設計への転換を推進し、単一障害ポイントを打ち破り、学習の安定性と効率を向上させます。
