科技情報
準備與GPU分手?亞馬遜Amazon正轉移AI程式到自家EC2 Inf1晶片上
文.圖/P.J 2020-11-16 10:22:39
講起NVIDIA這家公司大家應該都不陌生,除了著名的繪圖顯示晶片是眾多玩家的必備零組件之外,身為老闆的老黃刀法精湛也是聞名已久;不過,老黃家的GPU不單是對付遊戲厲害,一直以來都有工作站取向的顯卡存在(如Quadro),近年來的人工智慧、深度學習等技術也在老黃的GPU上大展手腳,看看前陣子出爐的A100資料中心級的GPU,各大廠商也對應的推出了搭載的伺服器版本,但如此強大且泛用的GPU,好像這陣子越來越抓不住客群了?
據外媒報導,亞馬遜(Amazon)宣布他們正把AI程式轉移到自家Amazon EC2 Inf1晶片上,這代表亞馬遜所提供的「推論」服務(如:Alexa)將會透過更快速、更專業的晶片上運行,而不是在多功能的GPU上。
實際上亞馬遜已經轉移了80%的Alexa程式到他們的Inferencing晶片上了,相較於使用傳統GPU的EC2 G4,此次的EC2 Inf1晶片在提高30%效能的同時還降低了45%的成本。(看來是成本與效能的考量啊!)
這裡小編岔題講一下Alexa的工作模式,其實讀者家裡如果有Alexa的話(Google Nest或Amazon Echo)可以觀察看看,Alexa其實是只是一個智慧音響裡的程式,真正負責大量運算、處理的是Alexa背後的雲端(AWS)。也就是大家把Alexa喚醒的時候,Alexa只會記錄聲音檔給雲端,經過雲端把音檔轉換成文字(就是寫逐字稿啦),之後再判斷下達的指令是什麼,然後「答案」再經由Alexa之口回傳給我們。這邊雲端的工作就是「推論」,而這次亞馬遜使用的EC2 Inf1晶片正是強化了「推理」的部分來達到30%效能成長與45%成本降低。
小編認為系統轉移到專屬的晶片上是必然的結果,但究竟是GPU真的有效能問題,還是亞馬遜早有跳出來自己做想法就不知道了。不過雲端的進步能帶來的幫助肯定是巨大的,如果以後出外景只要帶顆Alexa直接錄音,下班就有更精準的逐字稿了不知道工作會變多輕鬆XD。
★沒新聞心癢?加入PCDIY!官方Telegram頻道:https://t.me/PCDIY
☆「找嘸人」聊科技?加入PCDIY! Telegram討論群:https://t.me/PCDIY_Chat
據外媒報導,亞馬遜(Amazon)宣布他們正把AI程式轉移到自家Amazon EC2 Inf1晶片上,這代表亞馬遜所提供的「推論」服務(如:Alexa)將會透過更快速、更專業的晶片上運行,而不是在多功能的GPU上。
實際上亞馬遜已經轉移了80%的Alexa程式到他們的Inferencing晶片上了,相較於使用傳統GPU的EC2 G4,此次的EC2 Inf1晶片在提高30%效能的同時還降低了45%的成本。(看來是成本與效能的考量啊!)
這裡小編岔題講一下Alexa的工作模式,其實讀者家裡如果有Alexa的話(Google Nest或Amazon Echo)可以觀察看看,Alexa其實是只是一個智慧音響裡的程式,真正負責大量運算、處理的是Alexa背後的雲端(AWS)。也就是大家把Alexa喚醒的時候,Alexa只會記錄聲音檔給雲端,經過雲端把音檔轉換成文字(就是寫逐字稿啦),之後再判斷下達的指令是什麼,然後「答案」再經由Alexa之口回傳給我們。這邊雲端的工作就是「推論」,而這次亞馬遜使用的EC2 Inf1晶片正是強化了「推理」的部分來達到30%效能成長與45%成本降低。
小編認為系統轉移到專屬的晶片上是必然的結果,但究竟是GPU真的有效能問題,還是亞馬遜早有跳出來自己做想法就不知道了。不過雲端的進步能帶來的幫助肯定是巨大的,如果以後出外景只要帶顆Alexa直接錄音,下班就有更精準的逐字稿了不知道工作會變多輕鬆XD。
★沒新聞心癢?加入PCDIY!官方Telegram頻道:https://t.me/PCDIY
☆「找嘸人」聊科技?加入PCDIY! Telegram討論群:https://t.me/PCDIY_Chat
- 發表您的看法
請勿張貼任何涉及冒名、人身攻擊、情緒謾罵、或內容涉及非法的言論。
請勿張貼任何帶有商業或宣傳、廣告用途的垃圾內容及連結。
請勿侵犯個人隱私權,將他人資料公開張貼在留言版內。
請勿重複留言(包括跨版重複留言)或發表與各文章主題無關的文章。
請勿張貼涉及未經證實或明顯傷害個人名譽或企業形象聲譽的文章。
您在留言版發表的內容需自負言論之法律責任,所有言論不代表PCDIY!雜誌立場,違反上述規定之留言,PCDIY!雜誌有權逕行刪除您的留言。
最近新增
- 「Intel合體AMD」聯手成立「x86 生態系統諮詢小組」,「加速開發人員和客戶的創新」共創美好PC產業未來!
- 「OWC Envoy Ultra Thunderbolt 5 SSD」強勢來襲,史上最強「6,000 MB/s 超越極限速度」外接式固態硬碟報到!
- AMD AI PC YES 商用電腦再升級!AI CPU三劍齊發火力全開,Ryzen Pro 8000引爆商用桌機進入AI時代,Ryzen Pro 8040加速商用筆電AI加速,Ryzen Threadripper Pro 7000WX衝破工作站極限效能!
- 香港電訊導入50G光纖上網!HKT成為香港首家提供50G PON電信業者,下載速率狂飆50Gbps 平均延遲只有1.6ms 傳輸影片30GB只要20幾秒 速度更快延遲更低爽度更高!
- Western Digital 開始大量出貨「WD Gold 24TB CMR HDD」機械硬碟,「28TB Ultrastar DC HC680 SMR HDD」與「24TB Ultrastar DC HC580 CMR HDD」獲得業界採用!
- iPhone 15強勢來襲,史上最強智慧型手機報到!
- Wi-Fi 7時代正式來臨!TP-Link發表802.11be規格BE9300、BE11000、BE17000、BE19000、BE22000、BE24000、BE33000無線路由器與商用AP,史上最強Wi-Fi 7無線網路強勢來襲!
- Wi-Fi 7來了!802.11be無線網路推動改朝換代,網路速度飆上46Gbps!TP-Link全球首發震撼登場!
- 玩家嗨翻!中華電信端午節送大禮!HiNet光世代非固定制與固定制大升速,300M用戶升級雙向300M/300M,500M用戶升級雙向500M/500M!
- 史上最強Mac Pro出爐!頂規報價407,170元,升級24核心Apple M2 Ultra處理器,76核心GPU,192GB記憶體,8TB SSD,搭配報價189,900元32吋6K等級6016x3384解析度Nano-texture玻璃Pro Display XDR顯示器大滿配,總價衝上597,160元!
- 釋放真正的潛力!微星Intel 600、700系列主機板搶先支援24GB、48GB記憶體模組,最大容量可擴充到192GB!
- 記憶體史上最大跳水!DDR4-3200 32GB單條跌破台幣2,000元!必恩威記憶體大哥帶頭殺,PNY DDR4-3200 32GB單條賣場報價1,999元!
最多人點閱
- 華碩ROG電競筆電2020展望:雙螢幕Zephyrus Duo 15、主打女性市場與eSports之Zephyrus M和ROG STRIX G15相繼報到
- NVIDIA GeForce RTX 3080遊戲測試效能揭露,據稱約比RTX 2080 Ti快30%!
- Intel 400晶片組家族、對應Z490主機板型號全都露,搭配10代Comet Lake-S處理器必備
- WPA3加密協定進入認證階段,最快2019年就會有實體產品推出
- NVIDIA官方公開創始版GeForce RTX 3080開箱,精緻質感包裝顯卡橫向放置
- 《Bloomberg BusinessWeek》彭博商業周刊爆料 美超微伺服器主機板 黑客門 被偷裝間諜晶片,《Apple、Amazon、SuperMicro》發表聲明駁斥 報導不屬實 精心編造
- 這時脈很瘋狂!據傳AMD Radeon RX 6000 Navi 21 XT時脈將高達2.4 GHz?!
- 購買RTX 30系列顯示卡前必先知道的兩三事:NVIDIA技術簡報 (下篇)
- 中華電信HiNet光世代2G/1G光纖上網來襲,寬頻網路速度再升級!
- 核戰開打!Intel第9代Core處理器即將來襲,八核心Core i9-9900K成新桌上型主流級處理器霸主!
- 筆電沒有網路孔?!你需要USB外接網路卡
- 疫情當前、連呼吸都要小心翼翼,讓Blueair告訴您空氣清淨機的挑選秘辛
