したらばTOP ■掲示板に戻る■ 全部 1-100 最新50 | |

【ChatGPT】AIチャット総合 避難所【Gemini・Claude】

807名無しさん:2025/09/20(土) 12:05:03 ID:uq6GNJAs
85 ななしのAIさん 2025/09/20(土) 11:49:35.55 ID:0e0VbntI0
Yann LeCunのJEPA構想が言語LLMへ

LLM-JEPA: Large Language Models Meet Joint Embedding Predictive Architectures
https://www.arxiv.org/abs/2509.14252
https://chatgpt.com/share/68ce05a9-cd40-8006-bbd5-a72484f84374

これまでのLLMは 入力空間の再構成(次トークン予測)で学習・評価
視覚分野では、異なるビュー同士の埋め込みを予測するJEPAが、入力再構成より有利
言語分野では JEPA的目的の設計が難しく、事実上未開拓

→LLMの生成にJEPAを加え、生成力を保ったまま表現を構造化して多様なタスクで精度・収束・汎化を向上させる、言語LLMへのJEPA本格導入の第一歩


新着レスの表示


名前: E-mail(省略可)

※書き込む際の注意事項はこちら

※画像アップローダーはこちら

(画像を表示できるのは「画像リンクのサムネイル表示」がオンの掲示板に限ります)

掲示板管理者へ連絡 無料レンタル掲示板