去年SK海力士 宣佈 ,已開發出具備計算功能的下一代內存半導體技術,首款基於該技術的產品為GDDR6-AiM(Accelerator-in-Memory/內存加速器),將計算功能添加到速率為16 Gbps的GDDR6上。

近日在AI Hardware & Edge AI Summit 2023上,SK海力士 展示 了基於內存計算功能技術打造的AiMX加速卡原型產品,裏面搭載了GDDR6-AiM,專門用於生成式人工智能(AI),比如ChatGPT。SK海力士還在配備了AiMX加速卡的服務器系統上演示了Meta的opt13b模型,與採用普通的GPU系統相比,數據處理時間縮短了10倍以上,而功耗僅為五分之一。
SK海力士表示,AiMX是一種比傳統GPU更低成本、更低功耗、性能更高的解決方案,未來將繼續開發引領人工智能時代的存儲技術。作為一種能夠處理大量數據的低功耗高速存儲器解決方案,SK海力士認為AiMX將在數據密集型生成式人工智能系統的發展中發揮關鍵作用。由於生成式人工智能的性能會隨着對更多數據的訓練而提高,更加凸顯了對應用於該系統的高性能產品的需求。

除了SK海力士以外,三星也有着相同的看法,在內存上集成的AI處理器,使其可以執行CPU、GPU、ASIC或FPGA的操作,未來還會將這項稱為PIM (processing-in-memory) 的技術擴展到DDR4、DDR5、LPDDR5X、GDDR6和HBM3內存上。三星在今年的Hot Chips 2023上還 公佈 了HBM-PIM和LPDDR-PIM的最新研究成果,在AMD Instinct MI100上配備了HBM-PIM內存,並將其應用於生成式人工智能。