《電子技術應用》
您所在的位置:首頁 > 電子元件 > 業界動態 > 天數智芯首款通用GPU推理產品驚艷亮相

天數智芯首款通用GPU推理產品驚艷亮相

2022-12-22
來源:集微網
關鍵詞: 天數智芯 GPU 智鎧100

  集微網消息,從Midjourney、Stable Diffusion等AIGC(人工智能生成內容)小工具引爆流行,到對ChatGPT是否已能通過圖靈測試的廣泛討論,2022,無疑是人工智能發展史上又一個“大年”。接二連三的“全民級”事件傳播,強烈預示著人工智能產業發展的新階段業已拉開序幕,而廣闊的產業前景與動蕩的供應環境,也呼喚著本土廠商在通用人工智能(AGI)所依賴的訓練推理硬件上大有作為。

  12月20日,上海天數智芯半導體有限公司正式發布其通用GPU推理產品-智鎧100,繼天數智芯2021年發布首代通用GPU云端訓練產品天垓100并實現規模應用后,這家中國本土通用GPU產業“先行者”再次用產品驚艷業界。

  微信圖片_20221222093831.jpg

  云邊協同正當時

  在當天的致辭中,天數智芯總裁蓋魯江表示,智鎧100是繼天垓100后天數智芯正式向市場推出的第二款產品,標志著天數智芯成為國內唯一擁有云邊協同、訓推組合的完整通用算力系統全方案提供商。這是天數智芯繼往開來、奮勇前進的新起點,也是天數智芯發展中極為關鍵的一大步,還是天數智芯發展歷史上又一座里程碑。

  蓋魯江所強調的“云邊協同、訓推組合”,的確是當前通用GPU發展演進的主旋律。以時下引發全球社交平臺“狂熱”追捧,驚為天人的ChatGPT為例,就是“云邊協同、訓推組合”的一個經典案例。

  顧名思義,ChatGPT的基礎是GPT-3這一超大規模預訓練模型,在應用于生成式對話這一場景時,則使用少量人工標準的數據樣本進行模型的精調,參數規模下降了一兩個數量級,輕量化意味著大幅減少的資源開銷,也代表模型迭代效率可以大幅提升。

  在ChatGPT等AIGC“殺手應用”的示范效應下,可以想見,人工智能產業在傳統基于有監督學習的商業模式之外,無標簽大規模預訓練模型生成+邊側/端側小數據模型精調部署的云邊協同模式也將蔚然成風。

  伴隨著產業趨勢的深刻變革,通用GPU這一提供基礎算力的產品形態必然需要形成云端訓練和邊/端側推理的合理搭配,將進一步加速已經明顯形成的訓練、推理產品技術規格分化,云端訓練需要超大算力以承載動輒千億乃至萬億參數規模的大模型,而邊/端側推理則需要適應功耗、時延在應用現場的嚴苛約束,幫助預訓練大模型“蒸餾”之后的“小模型”實現場景可用與實際部署。

  從這一意義上看,高端通用GPU解決方案,必須實現訓練、推理產品“兩條腿走路”,而智鎧100,則標志著天數智芯向前邁出的又一開創性步伐。

  根據蓋魯江的介紹,智鎧100這款推理產品兼具“應用覆蓋廣,計算性能高,使用成本低”三大特質,可以廣泛應用于金融、醫療、教育、安防、互聯網、智能語音、車路協同智能中心等領域。智鎧100的上述主打特色及目標應用領域,可謂精準把握到了邊側/端側人工智能應用的痛點并給出了富有誠意的解決方案,有望繼天垓100之后,打造又一個經得起市場檢驗的“中國芯”標桿產品。

  值得一提的是,德高望重的倪光南院士,也專門為智鎧100的發布送上祝福,充分肯定了天數智芯成立數年來的不凡成績,并鼓勵團隊勇毅前行,為我國通用GPU事業的發展做出更大的貢獻。

  三大特質顯功力

  本次產品發布會上,天數智芯產品線總裁鄒翾對智鎧100的三大特質進行了詳細解讀。

  其一是計算性能高。智鎧100芯片支持FP32、FP16、INT8等多精度混合計算,實現了指令集增強、算力密度提升、計算存儲再平衡,支持多種視頻規格解碼。此次發布會推出的智鎧100產品卡,可提供最高384TOPS@int8、96TFlops@FP16、24TFlops@FP32的峰值算力,800GB/s的理論峰值帶寬以及128路并發的多種視頻規格解碼能力。相較于市場上現有主流產品,智鎧100將提供2-3倍的實際使用性能。

  其二是應用覆蓋廣。基于天數智芯第二代通用GPU架構,智鎧100多達800余條通用指令集,支持國內外主流深度學習開發框架,擁有豐富編程接口拓展和高性能函數庫,可以靈活支持各種算法模型,便于客戶自定義開發。智鎧100廣泛適用于智慧城市、智慧港口、智慧交通、智能制造、電力、智能語音、醫療、教育、智慧金融等眾多場景,為各行業提供堅實算力保障。

  其三是使用成本低。延續天垓100開發易遷移的特點,智鎧100全面支持推理及訓練一體化方案,能夠在不額外增加購置成本的情況下完成增量訓練工作,有效減少用戶的成本支出。延續天垓100的生態兼容策略,智鎧100仍提供開箱即用的產品體驗,降低用戶的開發成本和使用成本。

  鄒翾談到,智鎧100芯片是天數通用GPU架構的第二代產品,也是天垓100之后的新一代迭代,其產品特質,正是基于天垓100商用過程中來自行業一線的客戶需求:“我們的客戶期望能夠有一款產品針對推理應用進行端到端的進一步性能優化,得到性能提升。并且希望這些產品可以快速地支持最近流行的各種各樣的網紅應用,包含最近大家熟知的AI繪圖以及ChatGPT,同時客戶們也希望這樣的產品能夠針對這些應用提供更好的性價比。”

  在鄒翾講解過程中,對客戶案例的信手拈來為集微網留下了深刻印象,例如他引用合作伙伴在疾病AI輔助診斷領域的工作,一次完整的下消化道檢查涉及病變檢測、部位識別以及病變診斷3種業務的并發或順序重組,需要支持5個以上的模型而且還在變化中。智鎧100憑借其強大的算力,可以在只引入1-2ms延遲的情況下完成單卡上多數據流并行分發,滿足實時性要求,以支持在線手術,并且有條件對接高達90路攝像頭,通過圖像批處理完成多臺手術的并行工作。

  這一案例,也極為清晰地展示了為何時延在邊側/端側推理應用中如此重要,人命關天的醫療現場,人工智能應用的滲透往往存在“兩難”,或是高性能神經網絡模型缺少端側計算、存儲資源支撐無法部署,或是依賴于云端模型,存在極高的端到端時延,同樣難以實際應用。

  對行業、領域案例的熟悉,背后折射的是天數智芯作為一家商業公司的“章法”和“檔次”,以客戶成功為導向,以用戶體驗為準繩,使其與不少依然沉迷于標榜參數高低的“做題式”通用GPU玩家形成了巨大差異。

  做難事必有所得

  對人工智能領域稍有涉獵的觀察者都不難了解,英偉達等海外巨頭不僅在通用GPU產品上占據優勢地位,其在人工智能模型開發框架和軟件工具鏈上的優勢甚至更為驚人,以至于英偉達CUDA已成為事實上的行業基準。

  也正因為如此,通用GPU等“大芯片”的流片乃至量產,只是實現商業成功的“第一步”,更艱巨的考驗,在于開拓和培育用戶生態,倪光南院士在致辭中也談到,“國內通用GPU芯片以及支撐它的通用的并行計算架構,也就是CUDA架構,已經成為一個事實標準。在這個領域的市場上和CUDA兼容就是一種迫切的需求,這對于很多廠商都是一個重大的挑戰。”

  回顧過往歷史,不少高調發布乃至少量流片的本土高端芯片產品,往往在量產良率這一關口前就已悄然止步,遑論后續九十九難的商業化之路,而天數智芯,毫無疑問是在這一領域本土廠商中篳路藍縷的“拓荒者”和先行者。

  天數智芯能夠在靠產品力說話的通用GPU市場贏得一席之地,離不開其從基礎硬件到客戶現場服務、軟件工具鏈配套的全方位交付能力。今年8月,天數智芯還發布國內領先的通用計算及人工智能開源平臺DeepSpark,率先向行業開放技術能力。

  這樣的投入,特別是軟件團隊搭建和項目管理,往往對芯片企業而言是極大的挑戰,天數智芯選擇做難而正確的事情,離不開其公司資源圍繞“服務客戶”的極致聚焦。

  鄒翾講解中談到,“一款好的產品,除了良好的性價比通用性外,客戶的使用體驗也至關重要。”

  智鎧100延續天垓100的生態兼容策略,為客戶提供開箱即用的產品體驗,對客戶側不同職能使用者需求有深刻洞察,竭盡所能降低其遷移底層硬件的“成本”,盡可能維持其原有使用習慣,在這一基礎上,再通過產品特性創新,提供“one more thing”式的亮點,如MidJourney等AIGC網紅應用已經成為吸取流量的利器,不少互聯網客戶表達了試圖模仿其擴散模型(Diffusion model)實現類似功能的需求,天數智芯團隊僅用兩周就配合客戶完成了Diffusion模型的適配與調優工作,實現了應用的快速上線,充分顯示出智鎧100支持未知應用快速迭代的能力。

  如果說天垓100代表著天數智芯在通用GPU領域從0到1的突破,那么智鎧100的發布,則令人欣喜地看到,天數智芯從1到100的發展之路上已經走出了一串清晰而扎實的足跡。

  結語

  接連不斷的網紅應用,使今年儼然可以被視為“AIGC元年”乃至“AGI元年”,至少諸多有識之士,已經在非常嚴肅地思索MidJourney、ChatGPT等AI工具與相關領域專業內容生產者之間如何協作,并預卜未來無法有效與AI寫作的創意工作者,將面臨被淘汰的切實風險。

  這一撲面而來的人工智能產業新浪潮,也將為通用GPU市場帶來深刻而巨大的影響,智鎧100的發布,標志著來自中國的力量,也不會在這個巨大的機遇窗口缺席。

更多信息可以來這里獲取==>>電子技術應用-AET<<

微信圖片_20210517164139.jpg

本站內容除特別聲明的原創文章之外,轉載內容只為傳遞更多信息,并不代表本網站贊同其觀點。轉載的所有的文章、圖片、音/視頻文件等資料的版權歸版權所有權人所有。本站采用的非本站原創文章及圖片等內容無法一一聯系確認版權者。如涉及作品內容、版權和其它問題,請及時通過電子郵件或電話通知我們,以便迅速采取適當措施,避免給雙方造成不必要的經濟損失。聯系電話:010-82306118;郵箱:[email protected]
主站蜘蛛池模板: 亚洲欧洲日产国码二区在线 | 日本一级特黄aa毛片免费观看 | 各种偷拍盗摄视频在线观看 | 日韩欧美视频在线一区二区 | 毛片在线播放网站 | 久草在线视频新时代视频 | 亚洲精品一区二区三区不卡 | 国产精品91在线播放 | a毛片免费观看完整 | 国产日韩精品欧美一区 | 久久久免费精品视频 | 国产成人a在一区线观看高清 | 日本全黄 | 日韩精品亚洲人成在线观看 | 特级毛片aaa免费版 特级毛片a级毛免费播放 | 中国国产成人精品久久 | 一级毛片a免费播放王色 | 高清黄色毛片 | 欧美区一区二 | 91无套极品外围在线播放 | 久久九九免费 | 欧美精品成人一区二区视频一 | 日韩无砖专区体验区 | 欧美国产一区二区 | 丝袜精品 欧美 亚洲 自拍 | 在线精品国产三级 | 欧美高清亚洲欧美一区h | 日本三级香港三级少妇 | 国产欧美日韩在线视频 | 国产黄色片在线免费观看 | 成人18视频在线 | 黄色aaaa| 亚洲精品专区一区二区三区 | 女子张开腿让男人桶视频 | 免费在线观看的毛片 | 国产精品_国产精品_国产精品 | 一级片欧美 | 国产黄色自拍 | 欧洲免费无线码二区5 | 国产精品日本 | 成人一级毛片 |