OpenAIやAnthropicに次ぐ注目を集めるAIスタートアップ企業、Cohereの7月時点での評価額は55億ドルに達しました。「Attention Is All You Need」論文の共著者である同社の共同設立者は、大規模言語モデル(LLM)革命の引き金となったとされるこの論文の著者でもあります。

画像出典:AI生成画像、画像ライセンス提供元Midjourney

OpenAIやAnthropicに次ぐ注目を集めるAIスタートアップ企業、Cohereの7月時点での評価額は55億ドルに達しました。「Attention Is All You Need」論文の共著者である同社の共同設立者は、大規模言語モデル(LLM)革命の引き金となったとされるこの論文の著者でもあります。

画像出典:AI生成画像、画像ライセンス提供元Midjourney
字節のSeedチームが最新論文で明らかにしたところによると、大規模言語モデルが超長テキストを処理する際の性能変動は、主にブロックごとのKVキャッシュ圧縮技術の位相感度性に起因している。この技術は連続されたトークン窓を固定されたステップサイズで圧縮してより少ないエントリにすることにより、長文の推論におけるメモリ消費を抑えるが、これにより圧縮窓に対するトークンの新しい位置座標が導入され、検索のずれを引き起こし、結果として性能の変動を生じる。
ハーバード大の心理学者スティーブン・ピンカー氏は「AIが人類を滅ぼす」という存在リスクは誇張されていると公言。Quillette誌で精神科医でテックブロガーのスコット・アレクサンダー氏への公開書簡で理由を述べた。アレクサンダー氏がAI存在リスクの公開討論を申し込んだが、ピンカー氏は婉拒し、こうした討論は「見世物の競技」に過ぎないと述べた。特に「ペーパークリップ最大化器」などの極端な推論に同意しない。....
Glassdoorのデータによると、米国の従業員が企業がAIを導入することに対して満足度が大幅に低下しています。2019年から2026年の間に、AIや大規模言語モデルなどのキーワードに関連するコメントの割合は240%以上増加しましたが、前向きな評価は81%から急激に43%に下がり、否定的な評価は53%に上昇しました。これは、職場におけるAIの導入に対する態度がすでに消極的になっていることを示しています。
Appleが新型Mac StudioとMac miniを発表。M6およびM5 Ultraチップを搭載し、デスクトップでのローカルAI性能が大幅に向上。M6は初の2nm自社チップで、12コアCPU/GPU、初のデュアル16コアNeural Engineを備え、LLMなどローカルAI処理を強化。....
WikiHowが米連邦地裁にOpenAIを提訴。許可なく1.1万件以上の記事を取得しChatGPT等の訓練に使用、登録著作権1200件以上を侵害と主張。WikiHowは世界最大のハウツー情報サイト。....