AI晶片 - 工程師
By Aaliyah
at 2022-09-18T13:50
at 2022-09-18T13:50
Table of Contents
※ 引述《waitrop (嘴砲無雙)》之銘言
: 現在業界單純說AI晶片是太籠統的說法了,
: 為了獲得最高效能與最高CP值,
多嘴插句話,除了Training跟Infer差異外,其實真的要細分還有從硬體、軟體的優化,
從最上層到底層跟硬體的結合才能夠把edge computing提升到產品落地階段。
像是閣下說的自然語言這塊把Transformer從軟體層面做降維優化、新一代更輕量的CNN模型
,還有既有的半精度FP8這種跟指令集優化,另外這幾年學界比較有研究的從Complier上做
優化通用矩陣乘法。
我反而不覺得有所謂電子垃圾這一回事,這塊目前還是一個沒有一統江山的通用規範出來反
而是有很多值得嘗試的空間。
最後,真的有辦法解決就是找到一個新的通用矩陣乘法可以並行化同時讓時間複雜度跟計算
複雜度降到最低,這個目前數學家找了十多年都不一定可以找到了,所以大廠才會想從指令
、硬體下手優化。
大概4醬~
--
: 現在業界單純說AI晶片是太籠統的說法了,
: 為了獲得最高效能與最高CP值,
多嘴插句話,除了Training跟Infer差異外,其實真的要細分還有從硬體、軟體的優化,
從最上層到底層跟硬體的結合才能夠把edge computing提升到產品落地階段。
像是閣下說的自然語言這塊把Transformer從軟體層面做降維優化、新一代更輕量的CNN模型
,還有既有的半精度FP8這種跟指令集優化,另外這幾年學界比較有研究的從Complier上做
優化通用矩陣乘法。
我反而不覺得有所謂電子垃圾這一回事,這塊目前還是一個沒有一統江山的通用規範出來反
而是有很多值得嘗試的空間。
最後,真的有辦法解決就是找到一個新的通用矩陣乘法可以並行化同時讓時間複雜度跟計算
複雜度降到最低,這個目前數學家找了十多年都不一定可以找到了,所以大廠才會想從指令
、硬體下手優化。
大概4醬~
--
Tags:
工程師
All Comments
By Adele
at 2022-09-19T01:31
at 2022-09-19T01:31
By Necoo
at 2022-09-19T13:12
at 2022-09-19T13:12
By Regina
at 2022-09-20T00:52
at 2022-09-20T00:52
By Lydia
at 2022-09-20T12:33
at 2022-09-20T12:33
By Ursula
at 2022-09-20T11:22
at 2022-09-20T11:22
By Joe
at 2022-09-20T23:03
at 2022-09-20T23:03
By Lucy
at 2022-09-20T11:22
at 2022-09-20T11:22
By Edith
at 2022-09-20T23:03
at 2022-09-20T23:03
By Sarah
at 2022-09-20T11:22
at 2022-09-20T11:22
Related Posts
華碩周一發表新手機
By Emma
at 2022-09-18T11:51
at 2022-09-18T11:51
AI晶片
By Elizabeth
at 2022-09-18T10:46
at 2022-09-18T10:46
中國逾三千家芯片公司倒閉 IC產量暴跌
By Doris
at 2022-09-18T10:05
at 2022-09-18T10:05
AI晶片
By Aaliyah
at 2022-09-18T00:55
at 2022-09-18T00:55
竹科的司機是不是都財務自由了?
By Ida
at 2022-09-17T22:42
at 2022-09-17T22:42