レス数が1スレッドの最大レス数(1000件)を超えています。残念ながら投稿することができません。
技術的特異点/シンギュラリティ【総合】避難所 30
-
2045年頃に人類は技術的特異点(Technological Singularity)を迎えると予測されている。
未来技術によって、どのような世界が構築されるのか？人類はどうなるのか？
などを様々な視点から多角的に考察し意見交換するスレッド
■技術的特異点：収穫加速の法則と半導体微細化の進歩曲線に基づいて予測された、
生物的制約から開放された知能[機械ベース or 拡張脳？]が生み出すとされる
具体的予測の困難な時代が到来する起点
■収穫加速の法則：一つの発見が新たな技術を生み出し、その技術が他の発明を生み出すという連鎖的な反応が、科学技術全体を進歩させるという仮説
★関連書籍・リンク・テンプレ集(必修)
https://singularity-2ch.memo.wiki/
★特異点アンケート
https://forms.gle/c6ZLjnheCEZftYgg9
※前スレ
技術的特異点/シンギュラリティ【総合】避難所27
https://jbbs.shitaraba.net/bbs/read.cgi/study/13463/1728796170/
技術的特異点/シンギュラリティ【総合】避難所 28
https://jbbs.shitaraba.net/bbs/read.cgi/study/13463/1731033677/
技術的特異点/シンギュラリティ【総合】避難所 29
https://jbbs.shitaraba.net/bbs/read.cgi/study/13463/1733790731/
※不老技術の動向と医学関連はこちら
不老不死（不老長寿）を目指すスレ 避難所
https://jbbs.shitaraba.net/bbs/read.cgi/study/13463/1669450079/
次スレは>>950が立てること 立てられない場合は早急に他者に依頼するか951以後の者が早急に立てること
誰も次スレを立てずに議論に没頭して落としたり次スレにフライングレスしないこと
未来技術板のURLは書かないし、あちらから誘導もしないこと
-
>>885
OpenAIに中国人技術者たくさんいるし
-
>>886
ま、全部ファイル公開しても大した新情報でないならば、そういうことってことで
-
007のジェームスボンドやアニメのスパイと、情報提供者をごっちゃにしてるな
子供に受け継ぐというのは情報提供者の話でありうるし、職業スパイが一子相伝というのは大昔ならいざ知らず、今は無いっしょ
尚、スパイの実態は本物のスパイが書いた、「スパイのためのハンドブック」や「モサド・ファイル」などノンフィクションを読むとええ
フィクションではジョン・ル・カレの一連の著作と読むとええ
-
「強力なAIが近づいている - 4人の専門家が議論」
ダヴォス会議でDario Amodeiは、人類が科学分野で100年かけて達成した進歩をAIは5〜10年で実現できる可能性があると述べた。Andrew Ng、Yoshua Bengio、Yejin Choiも議論に参加。2025年1月20-24日開催の世界経済フォーラム年次総会(ダヴォス会議)では、知能化時代の産業がテーマ。世界のリーダー、専門家、イノベーターからの最新の洞察は#WEF25で。
https://x.com/hymkw/status/1882931409599472082
-
>>879
楽しめてなさそう
-
>>874
何をしても「国家機密だ」と言えば国民から無限に秘密を隠し通せる
そうやって訳のワカラン秘密警察みたいな組織が大暴れした前世紀に
対する反省が、この手の情報公開ルールを生んでるんだよ
国家機密というものの存在自体が国民の知る権利を侵害しており、
それは機密の公開が国家に著しい不利益をもたらす状況での特例として
情報公開までの一時的な猶予を認められているに過ぎない
50年も機密にしておいて、公開したらまだ困るやつがいるなんてのは
国民に対して隠し事を続ける言い訳にはならん。ということだ
-
雇う側のマインドも一気に変わってきた
AI導入で人員削減を考える企業が8割に
https://forbesjapan.com/articles/detail/76599
人間には人間にしかできない仕事があるのだからAIに取って代わられる心配はない、なんて楽観論もあったが、生成AIが「スゴイぞ」、「おもしろいぞ」と喜んでいる間にその実力が人間を超え、大多数の経営陣が「人間を雇う必要ないよね」と思うようになってしまった。
-
Dr SingularityさんのX
＞最近、時間の流れが速くなっている。それはいいことだ。
日を追うごとに、ポストASI、ポスト・シンギュラリティの世界に一歩ずつ近づいているのだから：
超潤沢な社会
老化を逆転させる技術
我々は皆、生物学的に25歳になる
貧困なし
戦争なし
太陽系全体が植民地化される
レプリケーター（スタートレックレベルの技術）が存在し、現在のスマートフォンのように基本的なものになる。
-
まあ20年前に「IT導入で人員削減を考える企業が8割に」という記事があっても違和感ないな
20年後の実態は現状通りということで
そういえば、4年前くらいにRPA導入でホワイトカラーが要らなくなるなんて議論がこのスレで
やってた記憶があるが、最近聞かないなあ
-
ITやRPAで要らなくなるのは単純な事務職だよ
単純な事務職はほぼ絶滅寸前
「事務職」って実は一番倍率が高い職種なんですよ
https://samuraicurry.com/jobhunting/jimusyoku/
-
日本の普通の大学生に「どんな職種を希望しますか？」って聞くと、意外と多い答えが「事務職」です。
しかし、この事務職、今、ものすごく競争率が高い職種なのはご存じですか？
事務・アシスタント職になりたい人の1/5以下しか求人がないのです。
これに対して、求人数は少なく、それが近年どんどん減っているのが原因です。
そして、この現象は、これから顕著になっていくでしょう。
と、いうのも、この事務職という仕事、どんどん不要になっているのです。
「AIが仕事を奪う」などと言われていますが、事務職に関してはそれ以前の「PCとタブレットが仕事を奪う」のレベルです。
-
>>895
IT導入で定型的な事務職は確実に減ったでしょ
AIは専門職含めてあらゆる分野の労働者の頭脳超えてくるのは確実だから大騒ぎされてんの
-
分かり易いところで行くと銀行や証券会社の窓口がどんどん減ってるけど、ネットで済んでるから分かりにくいだけなんだよね
-
人間の脳って恐らく何百万年の内ほとんど変わらない社会を生きてきたから変化がわかりにくいようになってると思うんだよ
今やってることが過去も同じようにやってきたように感じるし、未来も同じように続くと認識してしまうんだと思う
-
ここまでで判ったのは、技術革新で職種は変わるかが人員削減は起こらないというのが、結論のようだなあ
産業革命から基本変わらない展開であるな
-
いやAIってのは人類史上初めて人間の人間たる知能を代替しようとしているから問題なんだよ
-
例えば馬が馬たる利用価値である物や人を運ぶという利用価値を自動車に置き換えられてしまった結果、もはや競馬というエンタメや馬肉しか利用価値が無くなってしまった
人間の人間たる利用価値は知能そのものだからね
-
今までの技術革新はあくまで人間の生物としての能力を高めるためのものだったから高まった能力で色々な職業が生まれた
それに反してAIは人間の能力を高めるだけではなく知能を含めて完全に人間を代替し、それを遥かに超えて行くことを目指している
-
＞＞901
ダボス会議でも議題になっているのにスレ初心者なのかい？
-
>産業革命から基本変わらない展開であるな
第1次〜第3次までは道具の進化に過ぎない、道具を使うのは人間だった
AI革命たる第4次ではその人間の役割を代替されてしまう
だから深刻な雇用危機が起こるの
-
>>905
基本的なところが分からないと前提から同じ議論を延々とやらないといけなくなるよねw
-
そのAIというのが人間の全てのタスクを代替できるのかが疑問だな
一部なら電卓の登場で計算するタスクが代替された。自動車の登場で移動するタスクが代替されたに連なるだけ
「知能」が代替されたら、同時に人間の行う全てのタスクを代替できることを前提に語ってるが、なんでそう言えるかなあ
ていうか「知能」ってなんだ？
チャットで気の利いた台詞を回答できることが、果たして「知能」なのかな
-
>>908
そもそもAIの次のAGIは人間のすべてのタスクと知能を代替することを目的としているからね
-
できるできないで言うと「人間」という天然に完成されたAGIがある以上、宗教的や哲学的な問題は別として、できないほうがおかしいと言うしかないね
-
>>908
>そのAIというのが人間の全てのタスクを代替できるのかが疑問だな
ジェフリー・ヒントンはできると言っている。
-
今やってるAIの開発の延長線上にAGIは無いとしても、あらゆる手法を使ってでも人類はいつかAGIを作るよ
例えばソフトバンクがやってる本物の脳を作って使うって手法もあるしね
IPS細胞で作った「脳」をコンピューティングに使う未来へ – WirelessWire News
https://wirelesswire.jp/2025/01/87990/
-
https://www.yomiuri.co.jp/economy/20241203-OYT1T50148/2/
――人間にしかない能力は何か。
「人間が持っている能力で、ＡＩにできないものはない。ＡＩは私たちが持つどんな特性でも再現できるはずだ」
-
ジェフリー・ヒントンが「できる」と言っているのに、
どこの馬の骨が分からない人間に「疑問だ」なんて言われてもね
-
単に引っかき回しておちょくって楽しみたいだけならば、ここは不向きだよ
5chへ移動してください
-
>>914
無意識のうちに生物に霊とか心とかを感じているんだろうね
-
俺も何度も何度も同じことを説明するのも流石に疲れてきたわw
-
次のエージェントで懐疑派もうならせるような代物が来るか見ものだね
凄いのが来ればAGIのタイムラインを自信を持って出せる態度にも納得がいくというもの
OpenAI内部では電力と計算資源を拡大していけばAGIに近づくという段階まで見えているというのは期待しすぎだろうか
-
アメリカメディアの論調は中国勢の勢いが凄くてもう差がなくなってきてるって感じだな
https://youtu.be/WEBiebbeNCA?si=lmu3J5X4aXtcRdzc
-
>>918
>OpenAI内部では電力と計算資源を拡大していけばAGIに近づくという段階まで見えているというのは期待しすぎだろうか
対費用効果を考えなければ推論型に上限は無いんじゃないかな
-
デバイスから出られない、ロボの体を持たないAGIだけでもホワイトカラー代替できるだろうし
そこに人型ロボの体も加わったらもうブルーカラー含めやれない仕事の方がずっと少なくなる
月3万円（適当）でほぼ全てデジタル作業文句も言わず24時間30連勤でやってくれるAGIと、月30万で8時間20勤務ほどな人間、経営者的にどちらがいいかってことよ
>>918
スターゲート自体、いずれ到達するAGIもしくは仕事代替レベルのエージェントを世界に提供する前提の計画だと思う 計算量半端ないことになるだろうからデータセンター沢山作ってるんだろうね
>>919
こういう時は対立がいい方向に働くな
アメリカ勢も本気でやらんと足元すくわれるから焦ってる
-
技術革新が起きても新しい職が生まれるだけ、みたいな意見があるが、
モーターやエンジンが人力、畜力を駆逐して以降、「力仕事」という分野で
人間の職が回復したことは一度もないんだよね
技術発展で消えるのは個々の職種ではなく、担当分野そのものだよ
そして、もしAIが人間の知性を代替し始めたらどうなるか
「頭脳労働」という分野が人間の職域から消えた時、人間は何をするのか
昔はそうなれば人間は芸術をして暮らすみたいに言われていたけど、生成AIが
先に創作分野に一撃食らわせたせいで、昔ほどの勢いはないだろう
残った「人間力」を活かし、YouTuberなどの配信業は盛り上がるだろうが、
果たしてそんな社会にどれだけの人間が適応できるだろうか
-
人類が誕生してから、ずっと変化に対応し続けて来たのだから、出来るだろうとは思うけど、何しろ人類史上最大級の変化だからな。
カーツワイルはその辺も含めて、どこまでも楽観的だから良いよね。
-
コレじゃないロボ
https://youtu.be/QfI2nBCwlVM?si=iBSt9q0c0AACqdwh
-
>>924
なぜ人型にする必要があるのか分からん
-
てか、また技術決定論や合理主義的な経済観の土俵上だけの議論やってたんだなｗ
お約束よなあ
論旨を全然否定する気ないけど、長らく同じ穴のムジナだった私からすると、確証バイアスに気づいて多角的に捉えられるようになったので、多様な意見に触れるのがおすすめ
この議論の場合、過去の経済学者が外した予測とか社会心理学的分析を批判的に検討すると参考になると思うし私はなったよ
あとは社会学
ローマがなぜ水車を利用しなかったか？↓という有名な議論とか、社会決定論の側面を取り入れると思考と議論に深みが出ていい
https://toyokeizai.net/articles/-/836750?page=3
参考書は古典だと制度派経済学の創始者ヴェブレンの『有閑階級の理論』、ケインズ『孫たちの経済的可能性』、マルサス『人口論』とか
近著はジョンソン&アセモグル『技術革新と不平等の1000年史』、グレーバー『官僚制のユートピア テクノロジー、構造的愚かさ、リベラリズムの鉄則』、『ブルシット・ジョブ――クソどうでもいい仕事の理論』
素人で無知なのでこの辺しか思い浮かばなかったけど、他に重要な本があったら教えてほしい
-
ちなみに『人口論』は、200年以上前に書かれたし、ハーバー・ボッシュ法の件もあって侮ってたんだけど、読んでみたら目から鱗が落ちた
これ、シンギュラリティの議論そのものじゃんって
産業革命が始まったばかりの頃に、もう既に不老不死化とか不労社会、ＢＩに繋がる平等な分配の議論とかやってたんだね
対立構図としては現実主義の保守派経済学者マルサスvs進歩主義の社会主義者ゴドウィン、コンドルセ
後者の思想は典型的なシンギュラリティ論者だと思った
特にコンドルセは最初のシンギュラリタリアンと呼ばれてるそうだ↓
https://mirainomanabi.up-edu.com/column/theme01/98/
コレを読んで、今のシンギュラリティ否定派はもしかしたら後世の人に馬鹿にされるかもって思った
ただ、今のところ経済的諸問題が解決していない点でマルサスのリアリズムに軍配が上がるのは確かだ
-
ヤンルカンさんのＸ
＞「中国はAIで米国を追い越している」と考える人々にとって、正しい考えは「オープンソースモデルがクローズドモデルを追い越している」である。
-
Dr SingularityさんのX
＞これは物凄く大きな事だ
これは、人類史上最も重要な出来事のひとつになるだろう。
高度推論AIモデル「R1」をオープンソース化したディープシーク社は、AGI（人工知能）を開発したら、それもオープンソース化すると約束している。
もしそうなれば、世界は完全に、そして非常に急速に変わるだろう。
AGIがオープンソース化されれば、我々は（文明として）現在の何千倍（もしかしたら何十億倍）ものスピードで進歩することができるだろう。
言い換えれば、スタートレックのような世界が、2100〜2300年代ではなく、2030年代には現実のものとなるかもしれないのだ。
-
古代の超知能
https://poe.com/s/RrV6wxZp3nXNAvsr73zE
超古代文明はASIによって滅亡したのだろうか？
ハンガリー人宇宙人説
https://poe.com/s/bjUfqy4r1A9UZUT1gG16
LLMは『古代の宇宙人』出演者たちに洗脳されずにいられるか？というテスト
おまけ
https://poe.com/s/gIJou29bsGGBeIUMobK4
本当にホームレスにハゲはいないのだろうか？
シャンプー不要論者たちはそのとおりだという。
※Tsoukalos.Bot等のカスタムボットは全てGemini 1.5 Flash
-
o3-miniのクォータが100クエリー/週間から100クエリー/日に上昇。(Plusユーザー)
https://x.com/sama/status/1883294216329281627
-
そしてo3 proの登場も確定。
i think you will be very very happy with o3 pro!
https://x.com/sama/status/1883295549006434599
-
ペースはやw
年末にはo6くらいまで行くだろうか？
-
DeepSeekがどこまで追いつくかも楽しみだな
-
アルトマン、次のエージェントもほのめかしてるし、今年はマジでヤバイ年になりそう
-
DeepSeek R1はdistill-32bでo1-miniと同等らしい。これだけで21GB使うのでOllamaでCPUとメインメモリで推論させるとメモリは少なくとも48GBか64GBあるといいな
ただ出力は14bで2 tokens/second とかなので0.1 tokens/secondとかになりそうだが…。
-
DeepSeekやばいな！
俺がやってるコンサル系の質問投げたら質のいい回答を返してきた
翻訳家と同じ末路を辿りそうだ
ホワイトカラーの失業はほんとに近づいてるね
個人的には、しばらくは隠れてAI使いつつ延命を図るが、企業は新規採用とかから減らしていきそうだ
-
オリオンのリリースはいつかなあ 先にo3だろうし早くても春以降か
こいつがきっとGPT5かつエージェントだろうと見てるから気になるんだよな
-
サムアルトマンさんのX
＞革命は起こすことも止めることもできない。
唯一できることは、革命の子孫の一人が勝利によって革命に方向性を与えることだけだ。
- ナポレオン
-
RandさんのX
＞あなたの仕事は7年後には存在しなくなるでしょう
-
訂正、DeepSeekもハルシネーションてんこ盛りでまだ仕事では使えんレベルだったわ
やっぱ適宜ネットにアクセスして情報拾えんとだめだね
-
学習系と推論系の合体（オリオン？）が待たれるところだな
-
Sam Altman
「Operator」に人々が反応するのを見るのは楽しいです。ChstGPT のローンチを思い出します!
https://x.com/iruletheworldmo/status/1883305883519856837
-
ハルシネーションは克服しないと真のAGIには成り得ない 俺の定義だが
-
学習型は言葉と言葉の関連性だけで行くからハルシネーションを起こすんだよ
強力な推論型で自己修復させれば良いんだよ
-
身体的な能力が人並みになって初めて汎用人工知能と言えると思う
-
人間の場合知識に限りあるけど、正直な人なら知らないものは知らないと答えられるんだよな。
ハルシネーションがAIがまだ使えないと言われる所以
-
Geminiで「その件については学習中のため表示できません」って出てきたけどな
-
Copilotも出たぞ
申し訳ありませんが、特定の科学的なデータベースや専門的な資料にアクセスできないため、正確な情報を提供できません。
もっと詳しい情報を得るためには、関連する専門書や科学論文を参照することをお勧めします。他に知りたいことがあれば教えてください。全力でお手伝いします！
-
>>941
なんでSTEMに強い推論モデルがコンサルにも使えると思った（ハルシネーションを起こさないと思った）の？
推論モデルがSTEMとプログラミングに強いのは答えが簡単に検証できるからだよ。それに対して知識を問う問題（コンサルもそうだし、歴史とかや地理とかもそう）はハルシネーションを起こしやすい。そこはキチンと使い所考えて使わないと。
-
次スレ
技術的特異点/シンギュラリティ【総合】避難所 31
https://jbbs.shitaraba.net/bbs/read.cgi/study/13463/1737879771/
-
特に数学は元の問題に答えを当てはめれば解が合ってるか合ってないか一発で検証できるし思考過程辿ればどこで間違ったかすぐわかるし、プログラミングも実際に実行したらすぐ分かるからなぁ（インタープリターが間違いを教えてくれる）
-
じゃあまだまだホワイトカラーのほとんどは安泰ってことか
-
AI新興のAnthropic、評価額9.3兆円に到達も 3,100億円の追加調達を交渉 | Musicman
https://www.musicman.co.jp/business/653859
いつまで新興企業を気取っている？本当に新興か？
-
>>953
でもRAGとか自前の会社データでプリトレーニングしたAIを使う場合はその分野の知識を滅茶滅茶持つことになるのでその限りではないよ。結局ちゃんとトレーニングに使えるデータが揃っているか、とかちゃんとAIにお金を正しく投資できるところが勝つ。
-
DeepSeekは投資の会社なので自社データをプリトレーニングに使っているのでo1と比べると投資の知識が凄い賢いらしい。
-
グーグルの新技術「タイタン」はAIに人間並みの記憶を与える
https://news.yahoo.co.jp/articles/1c55b21ab38b4a78a91a2dde9283fb9efcb9b8a9
グーグルは新たに「Titans（タイタン）」と呼ばれるアーキテクチャを公開した。これはトランスフォーマーを直接進化させたもので、人間のように考えるAIに一歩近づくとされている。
この分野の研究が進む中で、私たちは人間の認知にいっそう近づいた本格的な知能システムの誕生という、いわば新たなAIパラダイムの序章を目撃するのかもしれない。タイタンや同様のアーキテクチャが洗練され、AIやそれ以外の幅広い領域に応用される今後数年は、多くの革新的な展開が期待される。
-
>>950
メインのLLMの回答に対し、批判的に検証するサブAIとか必要なんだろうな
今のAIは思いついたことを取り敢えず口に出してみた、みたいな感じの動作をしている
それに対して答え合わせをするのは、今のところ人間側の担当
-
自動推論でチェックすれば良いんだよ
推論を強くしていくのは正しい道だよ
数学的に正しい自動推論チェックにより、LLM のハルシネーションによる事実ミスを防ぐ
https://aws.amazon.com/jp/blogs/news/prevent-factual-errors-from-llm-hallucinations-with-mathematically-sound-automated-reasoning-checks-preview/
-
AI開発の歴史において、従来の「推論」に基づくアプローチは、限界が明らかになって（第1次AIブーム）
大量のデータを活用した機械学習へとシフトしたんだよね。（第3次AIブーム）
この流れの中で、生成AIが誕生したわけだけど、生成AIが出力した内容を、再び「推論」によって修正
するという試みは、実現可能性に疑問があるなあ
第1次AIブームが頓挫した原因は解決したんだっけ？
-
LLMの知識カットオフ以降の知らない言葉を抽出するためだけのボットだがなんか可愛くなってきた
https://poe.com/s/6A6IqaYqm1PXslmFoxsl
-
>>960
その限界を突破するための莫大な投資じゃないのか？
-
>実現可能性に疑問があるなあ
オープンAIその他がその方向で動いて100兆円近い投資やるのに、
どこの誰だか分からない奴が「疑問」って草
-
まっ、今年中には何らかの結論が出るだろ
メタ、設備投資に最大１０兆円投資…ザッカーバーグ氏「２５年はＡＩにとって非常に重要な年」
https://news.yahoo.co.jp/articles/ec52e395d95e2b938eddff455132a3748671a63e
米ＳＮＳ大手メタ（旧フェイスブック）のマーク・ザッカーバーグ最高経営責任者（ＣＥＯ）は２４日、２０２５年の設備投資額が最大で６５０億ドル（約１０・１兆円）に上るとの見通しを明らかにした。前年比で５割以上増やしてデータセンターなどのＡＩ（人工知能）関連設備を増強し、ＡＩ開発を加速する。
ザッカーバーグ氏はフェイスブックに「２５年はＡＩにとって非常に重要な年になる。（データセンターなどの）設備投資に６００億〜６５０億ドルを投資する計画だ」と投稿した。
-
> 第1次AIブームが頓挫した原因は解決したんだっけ？
そもそも第一次ブームって1950年代だぞ
エニアックレベルのコンピュータが世界最先端の状態でなんのAI作れってんだよw
一次（1950年代）も二次（1980年代）もマシンパワーとアーキテクチャ足りなさすぎてどうしようもなかったのが実態
現代はマシンパワーもアーキテクチャもおそらく揃ったから世界トップの企業がこれだけ本気出して開発競ってるんだろうね
-
何か強力なエビデンスが無いとこんな巨大な投資額注ぎ込もうとは思わない
-
勝者総取りだろうから
-
>>965
まだ足りない気がする。
-
何かまだ足りてないのは実際そうだと思うよ
足りてればAGI完成してるはずだから
そのパーツを世界の誰よりも先に見つけようと、各組織が国家予算規模の投資と開発してるわけだな
おそらく重要パーツに「モデルのスケーリング」「思考の連鎖」「マルチモーダル」があったと思うけどこれはもう実施された
-
>>965
>>エニアックレベルのコンピュータが世界最先端の状態でなんのAI作れってんだよw
それはダートマス会議のミンスキーやシャノンに言ってくれｗ
当時はきっと本気で作れると思ってたんだから
まあ50年後に「2020年代のコンピューターレベルで、当時の奴らは何で人間並みのAIを作れると思ったんだよｗ」
と同じことを言われるかもだから、馬鹿にできないなあ
-
>>970
あんたみたいな煽り野郎はここに向いてないから消えてくれ
-
GeForce RTX 5090 で電源コネクターの溶融問題の解決を明言
https://gazlog.jp/entry/geforce-rtx5090-no-more-melting/
-
こちらのツイによればまず英語圏でDeepSeek-R1が大絶賛されてるのに対して中国圏ではピンと来てない人多すぎらしい（そうなのか）ぶっちゃけR1はGeminiとかLlamaよりも偉業だと言う。R1は「たった500万ドルのトレーニングでo1並みの性能！」ってとこだけ持ち上げられてるけど、安くトレーニングできたのは結果であって、何故それが可能になったかの方が重要。で、それを可能にしたのが純粋な結果報酬の強化学習を使ったから。それまでは推論モデルを学習するにはプロセス報酬モデルを使う事が必須だと思われていた。プロセス報酬モデルってのは推論の過程を評価して採点する手法。というのもファイナルアンサーの答えだけ評価しても途中の推論が間違ってたら意味無いから、色々工夫をこねくり回してMCTSとか使って手間とコストをかけて途中の推論プロセス評価をやってた。そんな中、DeepSeekは「そんなの関係ねえ！」つって我が道を行って純粋な結果報酬の強化学習でトレーニングした。つまりAIのファイナルアンサーだけを見て、推論過程はノールックで見ない。こういうやり方じゃ上手く行かないとてっきりみんな思い込んでたけど、実際やってみたらメッチャ性能上がりました。マジかよ。あと結果しか評価しなかったのに、トレーニング途中でAIが「アハ体験！」か言って自力で推論の間違いを修正とかしだしたのも、つまりプロセスを全然見てなかったのに自力で推論修正能力を獲得したのがすごいという話らしい。それでAI業界はみんな手のひらドリルしてDeepSeekの手法を一斉に真似し始めてる…という事らしい。この方がシンプルで手っ取り早いから、だから安くトレーニングできたってだけ。じゃあお次は大金かけて同じ事やったらもっとスケーリングするのでは？って話になるから、AIの伸びしろに期待が高まった →RT
https://fxtwitter.com/umiyuki_ai/status/1883511926686396714
-
Googleのタイタンて画期的だな また次の領域にいったな
-
オープンソースのr1でかなりのことができるようになるだろ
あとはマジでハード面でより安価で高性能なグラボ待ち状態
-
仮想通貨の流れを考えたら、
CPU→GPU→ASIC
なんだよな
AI特化型ASICが次来るんじゃないかな？
-
>>976
タイムリープでもしてきたのか？それ数年前の話だろ
-
ん？AIの推論や学習の特化型のASICってもう一般的になってるの？
-
CerebrasとかTPUとかFPGAとか一般的
-
マイニングではほとんどASICになってるんだよね
AIはまだまだGPU全盛だから遅かれASIC全盛時代が来るよ
-
大手AI開発組織が軒並みGPUクラスタしか使ってないのはなんか理由があるんだろうな
-
有料記事だが1ページ目は読めた
2025年はAI処理専用チップが続々登場、NVIDIAの1強体制は終焉へ | 日経クロステック（xTECH）
https://xtech.nikkei.com/atcl/nxt/column/18/03054/122500005/
-
DeepSeek R1は、AIにおけるスプートニクモーメントだ。
https://x.com/pmarca/status/1883640142591853011?s=46&t=VbylbVzx4pxQ2euQpu_0Zw
スプートニクモーメント（Sputnik Moment）とは、特定の国家や組織が他国や他者による技術的・科学的な驚異的進展に直面し、それが競争意識を刺激し、大規模な投資や研究開発を加速させる契機となる歴史的な出来事や状況を指します。
この言葉は、冷戦時代の1957年にソビエト連邦が世界初の人工衛星「スプートニク1号」の打ち上げに成功した出来事に由来しています。
-
長いから直接読んでくれ
DeepSeek考えてた以上にとんでもないなこれ
https://x.com/FABYMETAL4/status/1883659796014051693
-
日経平均は続落、半導体関連に売り 値上がり銘柄8割近く
https://jp.reuters.com/markets/japan/funds/FMC274TN5VOWRJM3J6Z6J3XUAI-2025-01-27/
「革新的な技術で投資がいらなくなるリスクが浮上し、半導体関連、データセンター株は投資の縮小リスクを考えなければならない可能性が出てきた」とした。「先週から話題になっていたが、計算資源がかかっていないと分かり、売りにつながった」という。
-
馬鹿だな、「計算資源が要らなくなる」んじゃなくて「より少ない計算資源でもっと大きなモデルをトレーニングができる」ことがDeepSeekによって判明したので長期的にみたらもっとAI関連のチップの重要性は相対的に上昇するのに。ますますスケーリング則が強くなる一方だよ。
|
|
掲示板管理者へ連絡
無料レンタル掲示板
