RWKV:小チームで大規模モデル、AI時代のAndroidを目指す

ソース:

ソース:
人工知能の進歩に伴い、イノベーションと持続可能性のバランスが重要な課題となっています。最近、OpenAIはこれまでで最も強力なAIモデルであるo3を発表しました。しかし、これらのモデルを実行するためのコストに加えて、環境への影響も広く懸念されています。ある研究によると、o3の各タスクは約1,785キロワット時の電力を消費し、これはアメリカの平均的な家庭の2ヶ月分の電力消費量に相当します。SalesforceのAIサステナビリティに関する取り組みなど...
先日、IBMはオープンソース言語モデルGraniteのバージョン3.1を発表しました。今回のアップデートでは多くの重要な改善が加えられています。新バージョンのモデルは再設計され、より密集したアーキテクチャを採用することで、最大128,000トークンを一度に処理できるようになりました。このアップデートにより、Graniteは複雑なテキストやタスクを処理する能力が大幅に向上しました。Granite 3.1バージョンのモデルは、12言語と116種類のプログラミング言語のデータセットでトレーニングされ、合計12兆トークンを処理しました。
データ分析企業Coralogixは最近、AIオブザーバビリティプラットフォームAporiaを買収したと発表しました。これは、同社のAIと機械学習のオブザーバビリティを向上させることを目的としています。この買収により、Coralogixは専用のAI研究センターであるCoralogix AIを設立し、今後2年間で数千万ドルを投資して、AIにおける透明性、セキュリティ、監視、ガバナンス、制御といった根本的な問題に取り組む予定です。この買収により、Coralogixのお客様は統一されたオブザーバビリティプラットフォームを利用できるようになります。
欧州のベンチャーキャピタル市場全体が横ばいであるにもかかわらず、重要な事実が隠されています。欧州の人工知能(AI)スタートアップ企業が急速に成長しているのです。ベンチャーキャピタル企業Balderton CapitalとDealroomのデータによると、今年のベンチャーキャピタル資金の約25%、約137億ドルがAIスタートアップ企業に流入しました。これは4年前の15%から大幅に増加しており、Poolsideなどの新たなユニコーン企業の誕生につながっています。
テクノロジー企業SandboxAQは、量子大規模モデル(LQM)およびその他の人工知能アプリケーションの開発を加速するために、3億ドルを超える資金調達を完了したと発表しました。このラウンドは、Fred Alger Management、T. Rowe Price、Breyer Capitalなどの投資家が主導し、資金調達前の評価額は53億ドルに達しました。自然言語を処理する大規模言語モデル(LLM)とは異なり、LQMは複雑な科学および商業的問題の解決に焦点を当てています。