※ 引述《minazukimaya (水無月真夜)》之銘言:
: 沒關係,偷偷告訴你一個Insight
: 今年NeurIPS 2025有一篇超重量級的論文
: Introducing Nested Learning
: 這篇文論的重要程度不亞於Attention is all you need
: 甚至可以說有過之而無不及
: Transfomer架構只是發明了蒸氣機
: Nested Learning這篇論文,簡直就是熱力學定律的等級了
: 基本上等於宣告Transformer架構過時了(因為是一種扁平和單一頻率的特例)
: 未來三到五年,全面轉向Nested Learning的時代
如果真的架構更改 那對輝達反而更有利吧?
這幾年設計的ASIC都是基於Transformer架構
基本上要整個打掉重來 重新設計新的ASIC
那就又一次輪迴循環 只能利用NV GPU挺過過渡期
等架構整個穩定 再設計適配的ASIC
每更改一次架構 就讓GPU的商業可用性拉長更多時間
另外假如真的實現agi 對算力的需求會再來一次幾倍的成長的
LLM的泛用性 還不夠廣
agi幾乎什麼都能做 同時也代表架構穩定需要一段時間
其實也會讓NV能賺爛的時間更長
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 36.235.156.233 (臺灣)
※ 文章網址: https://webptt.cc/bbs/Stock/M.1765639922.A.AAA.html
推文 (46)
推
madeinheaven
不管什麼晶片都要用記憶體
12/13 23:36
推
stocktonty
輝又贏
12/13 23:38
→
kamitengo
gh200都變洋垃圾了,還挺個啥?
12/13 23:45
→
potionx
設計是一直都有在改進效率的 只是方向上的差異
12/13 23:47
推
junior020486
直接不玩了,重新設計ASIC,之前那些怎麼辦?等於
12/13 23:48
→
junior020486
舊的ASIC跟上一代的gpu 馬上沒屁用欸
12/13 23:48
→
junior020486
哪來那麼多錢整天重來
12/13 23:48
推
CAFEHu
3A蛙:說得好像以前打3A大作就不用換新顯卡似的
12/13 23:56
推
shter
你覺得那些用 GPU 挖礦的現在還在用 GPU 挖嗎?
12/13 23:59
→
shter
舊的礦機ASIC只要能源效率不如新的馬上就淘汰了
12/13 23:59
→
shter
跑 AI 運算的也一樣,都是在拚算力最佳化
12/14 00:00
→
potionx
據說連電壓都在改高 因為會更省電 什麼花招都用上了
12/14 00:05
→
offstage
但是當初那些買的硬體,會計折舊是設定五年或更長
12/14 00:08
→
offstage
馬上淘汰的話,就要立刻認列大筆的折舊費用,會死人
12/14 00:08
推
CAFEHu
肥宅:說得好像一直啟動顯卡的人跟白癡一樣
12/14 00:09
→
sheep2009
AI變化太快了
12/14 00:09
→
sheep2009
不像礦機 BTC規則都固定了
12/14 00:09
推
darkangel119
MRVL的ASIC可以丟了
12/14 00:13
→
darkangel119
AICHIP: 哭勒 又要爆肝了
12/14 00:14
推
ab4daa
歐印NVDA
12/14 00:31
推
hotbeat
老黃早都說了 也慢太多拍了
12/14 00:34
推
TIPPK
如果一年一換,那有人要買嗎
12/14 00:54
推
stocktonty
沉沒成本當然要繼續買 不硬著頭皮買就輸了 贏者全拿
12/14 00:55
→
fitenessboyz
MRVL真的早晚拜拜
12/14 01:12
→
TaiwanUp
甲骨文本來就只比AT&T IBM好一點而已
12/14 01:20
噓
yuen1029
如果有買輝達怎樣都贏
12/14 01:30
噓
stanleyplus
NV 下探150 空就對了
12/14 01:35
推
acolam
快速響應不就要更多hbm?
12/14 01:42
推
ykjiang
現成硬體來說,確實只有GPU最有利,
12/14 02:06
→
ykjiang
不過估計GPU也需要重新設計,才能更針對這個應用
12/14 02:06
推
CAFEHu
極限玩家:先別說多久汰換,只要性能有重大突破,
12/14 04:21
→
CAFEHu
就算你不換,難道你的對手也不會換嗎?
12/14 04:21
→
fallinlove15
我覺得谷歌只是優化算法用在特定情況下 老黃是對一
12/14 08:58
→
fallinlove15
個平台的硬體下手 自由度比較高 護城河更深 谷歌證
12/14 08:58
→
fallinlove15
明大家能自己設計又怎樣 講得像大部分人做得到一樣
12/14 08:58
→
fallinlove15
所以對於媒體渲染 只要知道 有這種可能 就夠了 等
12/14 08:59
→
fallinlove15
真正有威脅的出現記得要注意 只是現在沒有
12/14 08:59
推
guanting886
Google 花錢投資在ASIC就是在對自己的平台做優化
12/14 11:00
→
guanting886
新的ASIC出來舊的就沒用這個擔心很奇怪
12/14 11:01
→
guanting886
多模態模型本身就會用到TPU 你辨識文件需要OCR 而
12/14 11:04
→
guanting886
且 GCP 也提供相關的服務給別人付費使用 他本質就
12/14 11:04
→
guanting886
深度學習專用的東西 YT/Google Play的搜尋跟推薦模
12/14 11:04
→
guanting886
型用這個在跑的 嵌套學習出來了 以前做好的晶片是
12/14 11:04
→
guanting886
會有什麼影響 一樣都有別處的作用
12/14 11:04
→
guanting886
都迭代到v7了才在想
12/14 11:04
推
poco0960
GPU還可以撐一陣子,asic改算法是直接變垃圾
12/14 13:12