Neuchips 創鑫智慧開發 Raptor 晶片,可實現離線版 ChatGPT

「加三嘻行動哇 Yipee! 成為好友」

FacebookYoutubeTwitterInstagramTelegramLine

AI 人工智慧浪潮襲捲全球,特別是由 ChatGPT 帶起的各種生成式 AI 機會風起雲湧,吸引業界大廠競相加大對於 AI 的投資力度。在 2024 年初的 CES 國際消費電子展上,台灣AI新秀 Neuchips 創鑫智慧憑藉支援 AI 晶片的高能效 PC 應用展示備受矚目。

因應大型語言模型的崛起,為了區隔市場,Neuchips 將 N3000 更名為 Raptor,並定義為專做語言模型的推論加速晶片。只要一台搭配這款 Raptor 晶片與 i5 CPU 的可攜式工作站,利用 Whisper 模型執行語音轉文字(speech to text)並以 Llama-2 模型回應,無需連網即可打造如聊天機器人般的對話功能,可說是以地端(On-Prem)單機實現離線版ChatGPT。

相較於其他競爭方案必須連網或使用幾百顆晶片才能實現相同應用情境,Neuchips Raptor 晶片由於從軟體層寫入模型,還能實現功耗約 55W  的 小尺寸 PCIe 板卡,DM.2版本功耗甚至低至30W。

著眼於此低功耗、小尺寸的特性,國際知名的工程和應用科學專業組織IEEE旗艦雜誌《IEEE Spectrum》報導CES最具潛力的五家公司中,還特別介紹了Neuchips AI PC板卡所具備的超低功耗以及大幅降低記憶體需求等特性優勢。

延伸閱讀:

純法國製造的 ORIZON 新系列脫掛式纜車,可快速在山區、旅遊區和城市空間穿梭

繪王贊助 TED 2024 大會百台 Note 智慧筆記本,展現對原創理念和創造力的支持

Supermicro發表X14伺服器系列,支援 Intel Xeon 6 處理器

Geek+ 模組化「Shelf-to-Person 貨架到人」榮獲《機器人商業評論》創新獎

沙特民航總局 (GACA) 舉辦 2024 年「未來航空論壇」上,探討航空業面臨的挑戰與機遇

圖片及資料來源:美通社

好友人數

大家對網站文章上的一個讚、+1及轉分享,都是對我們的最好的鼓勵及繼續下去的原動力,請大家不要吝嗇。

下一頁

Delta 遊戲模擬器現已登陸 App Store,iPhone 可以下載!

週四 4 月 18 , 2024
「加三嘻行動哇 Yipee! 成為好友」 【Facebook、Youtube、Twitter、Ins […]
Shares