快訊

113會考數學/大量圖形考題!幾何題目難、非選出現「魔王題」 考生:卡關好久

新店男高中生捷運站外賣蔬果!網曝「坎坷身世」:被騙過整天營業額

現代管家年輕化 對主人「有求必應」是日常

AI帶動半導體產業 成為驅動相關供應鏈2024年業績的主要動力

※如欲轉載本文,請與北美智權報聯絡

林宗輝╱北美智權報 編輯部

人工智慧技術的快速發展,正在為半導體產業帶來新的成長動能。根據產業分析,人工智慧相關應用將為2024年全球半導體銷售額貢獻約10%的成長。人工智慧需要大量計算資源來訓練模型和進行推理,這將推升對高效能計算晶片的需求,包括圖形處理器(GPU)、應用專用集成電路(ASIC)、以及人工智慧專用晶片,甚至相關的儲存需求等等,隨著人工智慧在產業應用的不斷普及,相關半導體需求也跟著水漲船高,成為驅動2024年業績的主要動力。

人工智慧應用是由訓練和推理建立起來的服務框架,需要龐大的計算能力,因此高速且並行處理能力強的GPU一直是企業建立人工智慧服務的首選。目前主流的GPU廠商如NVIDIA和AMD都專門開發了人工智慧加速功能,並推出了多款專為人工智慧而設計的GPU產品。此外,為了提升人工智慧模型的推理效能和降低功耗,也開發了許多人工智慧專用晶片,如Google的TPU就是一例。這些專用晶片都針對人工智慧運算進行了最佳化設計。

人工智慧也需要大量儲存空間來存放訓練資料和模型,進而帶動對記憶體和儲存裝置的需求,尤其是高頻寬記憶體。訓練大型人工智慧模型需要處理海量資料,因此需要高速的記憶體才能順利進行。此外,已訓練好的大型模型也需要大容量的儲存空間進行保存。例如,目前主流的HBM記憶體提供了極高的記憶體頻寬,可滿足人工智慧訓練與推理\的需求。大容量固態硬碟也被廣泛用於儲存大型人工智慧模型。

從邊緣運算到雲端運算

隨著相關技術的發展,各種人工智慧應用也在快速增加。首先,在邊緣運算應用方面,對即時性和低延遲有較高要求,晶片性能必須足夠,這使得相關的半導體需求正在大幅提升。人工智慧邊緣運算將計算和分析運行於接近資料來源的邊緣設備中,減少了雲端之間的資料傳輸,可實現更快速的分析和響應。例如,自駕車輛需要在車載設備本地即時分析圖像和感測器資料來進行決策。另外,工業物聯網中的各種感測器也需要在邊緣進行即時分析。這些應用都需要高效能的邊緣晶片來實現人工智慧運算。

除了終端應用以外,生成式人工智慧可以自動生成各種內容,也同樣會導致對相關晶片的需求大增。根據KPMG的調查,生成式人工智慧已成為半導體企業重視的新興技術之一。隨著像DALL-E、Stable Diffusion這樣的生成式AI模型應用日益增多,使得能夠加速AI運算的圖形處理器(GPU)需求大幅增加,以滿足這些模型訓練和推理的計算需求。此外,人工智慧晶片的專用化和異質整合也是重要趨勢,除了增加相關模型的訓練與推理效率以外,也能夠有效降低成本。例如Google 的TPU就是人工智慧專用晶片的代表,有效降低對主流GPU的需求。

台積電認為,隨著人工智慧在各個領域的應用日益增多,對半導體的需求也將持續擴大。根據IDC預測,2024年整合生成式AI的新款個人電腦將推出,這也將促進半導體在AI PC市場的銷售。AMD看好人工智慧將推升對其AI晶片的需求,預計2024年從AI晶片可獲得逾20億美元收入。NVIDIA的人工智慧晶片需求甚殷,其新款H100 AI顯卡的交貨時間更長達52周。市調機構預測,到2025年,人工智慧邊緣計算市場規模將達上百億美元。可見,人工智慧市場前景可期,將可為半導體產業注入新的成長動能。

對半導體企業來說,要在AI晶片市場取得成功,就必須加強與人工智慧公司的戰略合作,以掌握市場動向;同時,在人才培養上下功夫,以確保在AI晶片技術上的領先優勢。如果能抓住人工智慧浪潮,半導體企業就能在新一輪的技術革新中站穩陣腳,並在激烈的市場競爭中佔據有利地位。

驅動記憶體及儲存需求

人工智慧模型訓練和推理過程中需要處理大量資料,這對記憶體和儲存裝置的需求提出了更高要求。為了加速訓練和推理速度,需要高頻寬、低延遲的記憶體。同時,存放大型訓練資料和模型本身也需要大容量儲存裝置。隨著人工智慧模型規模不斷擴大,訓練資料量達到TB、PB級,記憶體和儲存的需求更加強烈。

新型記憶體技術如HBM、HMC等堆疊式記憶體,可以為人工智慧應用提供遠超過DDR記憶體的記憶體頻寬。NVMe、SCM等新型儲存介面和技術也可以提供遠高於SATA、SAS等傳統介面的資料存取速度。儲存系統方面,基於快閃記憶體的SSD正在快速取代傳統的機械硬碟,提供了遠超硬碟的讀寫速度。另外,儲存類別的判別以及資料位置感知也很重要,可以讓不同類型、不同存取頻率的資料對應最適合的儲存介質,進一步提升整體儲存系統效能。

隨著人工智慧行業的發展,對高速、大容量記憶體和儲存的需求將持續快速增加。這將推動相關技術的創新,也為記憶體和儲存製造商帶來新的市場機會。

先進製程技術發展

為了實現人工智慧模型的高效訓練和推理,需要使用先進的製程技術來提升晶片的計算密度和效能。人工智慧應用對計算效能、功耗和成本的要求,正在推動半導體製程技術的發展。

先進製程如5奈米、3奈米製程可以大幅提高晶片的邏輯閘數和晶片密度,使單一晶片可以整合更多運算元件,從而提升人工智慧晶片的運算效能。此外,先進製程也可以進一步降低晶片的能源消耗,這對電池供電的終端設備以及大規模資料中心都非常關鍵。除了製程節點的縮小外,新的材料和製程技術如EUV光刻也可以提高製程良率,降低成本。

另外,2.5D和3D堆疊封裝技術可以將多個晶片垂直堆疊起來,使用矽貫通孔(TSV)進行垂直互連,大幅提升晶片間的頻寬,這對記憶體和邏輯晶片的整合具有重要意義。而先進封裝技術的運用,亦能推動人工智慧晶片的異構整合,實現系統級設計的最佳化。

為降低人工智慧系統成本,半導體企業也在持續改進製程技術以提高晶圓產能,同時最佳化晶片設計以提高單晶片閘數,降低單位成本。隨著製程技術的不斷創新,人工智慧晶片的性價比也將越來越高。

為了滿足相關應用的需求,台積電等半導體企業也將持續投入大量資源進行製程技術創新,以滿足人工智慧市場的需求。這將推動半導體技術取得重大突破,也將促進半導體產業的長期發展。

 

作者:林宗輝
現任:北美智權報資深編輯
學歷:大葉大學
經歷:電子時報半導體資深分析師

MIT Techreview 中文版研究經理

財訊雙周刊撰述委員

美國波士頓Arthur wood 投資顧問公司分析師

延伸閱讀&電子報訂閱連結:

【更多內容請見《北美智權報》350期;歡迎訂閱《北美智權報》電子報

延伸閱讀

小摩分析師喊買博通 是僅次於Nvidia的AI晶片首選

全球半導體銷售額 今年將破紀錄

英媒爆中芯將為華為新手機生產5奈米晶片 業界人士透露最大隱憂

威剛營收/1月增逾一成 看好DRAM、NAND Flash價格漲勢

相關新聞

袪痰藥物之均等侵權:Adams Respiratory Therapeutics, Inc. v. Perrigo Co.(Fed. Cir. 2010)

當我們由外界吸入空氣之後,呼吸道中的黏液會將一些外來異物包覆,形成痰液。健康的個體,不會產生太多的痰液,因此,多半無須借助外力,即可自行將痰液咳出。然而,嚴重感染症或長期發炎的患者,痰液的量會變多且濃稠,較不易自行將痰液咳出體外,因此,亟需借助袪痰藥物的使用,輔助患者順利將痰液排出體外,以保持呼吸道暢通。

《專利法公布施行80週年》點滴篇:承先啟後、繼往開來 為打造優良營商環境努力

2024年4月26日,既是世界智慧財產權日,同時也是專利法公布施行80週年;經濟部智慧財產局 (TIPO) 於4月26日舉辦了大師專題演講,並同步舉辦時光迴廊特展,在慶祝世界智慧財產權日的同時,也回顧了我國專利法公布施行80週年的點點滴滴。

《專利法公布施行80週年》局長篇:永無止境的挑戰

智慧局為了慶祝專利法公布施行所出版的特集其實是《智慧財產權月刊》305期的特別企劃,除了邀請3位大師及資深專利審查官撰文外,同時也邀請了歷屆局長作序。承如局長廖承威所言,這將成為專利領域的教科書,而且是重量級的那種。

太空經濟發展潛能不可小覷

儘管業界對於太空應用存在不同意見,但未來十年將經歷重大轉變,相關的公共部門投資持續擴大,日本、秘魯、沙烏地阿拉伯和泰國等國家都投資太空計劃,而印度成為第一個在月球南極附近登陸太空船的國家,都彰顯出太空經濟在已開發與開發中國家的潛力。

數位主權下各國雲端標準研析

由於雲端應用快速普及,資料與技術的安全性開始受到國家重視,如何設立保護機制,同時又不過度扼殺創新,是各國政府目前積極思考的事情。

揭露智駕電動車技術趨勢與商機

本次智駕電動車技術研討會在國際汽車零配件與車用電子展召開得恰逢其時。會議匯聚了業內頂尖的專家學者,圍繞智慧電動車的技術前沿、產業趨勢、安全挑戰等熱點議題展開了深入研討,除了揭露全球電動車市場與技術發展趨勢,也為產業揭示台灣未來在相關產業鏈中所能扮演的角色。

商品推薦

udn討論區

0 則留言
規範
  • 張貼文章或下標籤,不得有違法或侵害他人權益之言論,違者應自負法律責任。
  • 對於明知不實或過度情緒謾罵之言論,經網友檢舉或本網站發現,聯合新聞網有權逕予刪除文章、停權或解除會員資格。不同意上述規範者,請勿張貼文章。
  • 對於無意義、與本文無關、明知不實、謾罵之標籤,聯合新聞網有權逕予刪除標籤、停權或解除會員資格。不同意上述規範者,請勿下標籤。
  • 凡「暱稱」涉及謾罵、髒話穢言、侵害他人權利,聯合新聞網有權逕予刪除發言文章、停權或解除會員資格。不同意上述規範者,請勿張貼文章。