數位時代 Business Next

數位關鍵字155.尖端AI運算為什麼必用HBM記憶體?未來又將有哪些技術革新


Listen Later

在AI發展如火如荼之際,許多人都在關注AI模型和軟體的進展,但支撐這些突破的硬體技術卻常被忽視。數位時代創新長黃亮崢James邀請友訊科技DLink董事高宏傑Brian,深入探討在AI時代,記憶體技術面臨的挑戰與創新,以及這些技術如何推動AI的發展。

AI的蓬勃發展正在推動記憶體技術的革新。從最初為3D圖形設計的GDDR,到專為高效能運算打造的HBM,再到整合CPU、GPU和大容量HBM的NVIDIA GH200,每一步技術進展都在為AI提供更強大的硬體支持。Apple的統一內存架構(UMA)則展示了軟硬體協同優化的潛力,為AI應用開發提供了更高效的平台。

展望未來,GDDR7和HBM4等新一代規格即將推出,可能會帶來更多突破。而In-Memory Computing技術的概念,更是勾勒出一個記憶體與運算融為一體的未來藍圖。隨著這些技術的發展,我們可以期待看到更強大、更高效的AI應用誕生。

聽完這集可以學到:

1.記憶體在AI時代面臨的三大挑戰:速度、容量、能效,以及這些挑戰如何影響AI的發展。

2.從GDDR到HBM:記憶體技術的演進歷程,以及每種技術如何應對AI時代的需求。

3.Apple的統一內存架構(UMA)如何改變了記憶體與處理器的協作模式,為何這對AI開發如此重要。

4.高頻寬記憶體(HBM)技術的優勢,以及它如何突破傳統記憶體的限制,實現更高效的AI運算。

5.NVIDIA的GH200晶片如何整合CPU、GPU和HBM,展現AI硬體的未來發展方向。



Powered by Firstory Hosting
...more
View all episodesView all episodes
Download on the App Store

數位時代 Business NextBy 數位時代 Business Next

  • 4.3
  • 4.3
  • 4.3
  • 4.3
  • 4.3

4.3

12 ratings


More shows like 數位時代 Business Next

View all
科技報橘 by TechOrange 科技報橘

科技報橘

3 Listeners

聽天下:天下雜誌Podcast by 天下雜誌

聽天下:天下雜誌Podcast

175 Listeners

MacroMicro 財經M平方 by MacroMicro

MacroMicro 財經M平方

63 Listeners

下一本讀什麼? by 閱讀前哨站 瓦基

下一本讀什麼?

184 Listeners

財訊 《Wealth Magazine》 by 財訊雙週刊

財訊 《Wealth Magazine》

27 Listeners

商周Bar by 商業周刊

商周Bar

8 Listeners

天下文化‧相信閱讀 by 天下文化

天下文化‧相信閱讀

45 Listeners

請聽,哈佛管理學! by 哈佛商業評論

請聽,哈佛管理學!

29 Listeners

今周大耳朵 by 今周刊Business Today

今周大耳朵

9 Listeners

天下學習 by 天下雜誌

天下學習

20 Listeners

經理人 by 經理人月刊

經理人

3 Listeners

閱讀經濟學人 |  《給決策者的國際筆記》 by 新台灣人數位有限公司 -Jeff 與編輯團隊

閱讀經濟學人 | 《給決策者的國際筆記》

26 Listeners

數位時代 6 in 5 by 數位時代 Business Next

數位時代 6 in 5

0 Listeners

VK科技閱讀時間 by VK

VK科技閱讀時間

10 Listeners

每日聽管理 by 經理人

每日聽管理

2 Listeners

科技浪 Tech.wav by 哈利

科技浪 Tech.wav

77 Listeners