之江天樞正式開源,瞄準人工智慧新基建!

原標題:之江天樞正式開源,瞄準新基建!

昨天上午,之江實驗室舉行釋出會, 面向全球者開源上線“之江天樞人工智慧開源平臺”。“之江天樞”平臺由之江實驗室聯合北京一流科技、中國信通院、浙江大學等業界頂尖力量共同研發, 國內首個由新型研發機構牽頭打造的國產自研人工智慧開源平臺

全面開源

打造自主智慧財產權AI平臺

以深度學習框架為核心的人工智慧開源平臺,上承演算法應用,下接底層硬體,是大規模人工智慧應用的引擎和發動機,是資料驅動智慧研發和產業化的關鍵基礎設施。

之江天樞正式開源,瞄準人工智慧新基建!

“希望吸引全世界的人工智慧從業者和愛好者通過我們的平臺,把最先進的人工智慧演算法和技術匯聚到這裡,進而解決我國人工智慧核心技術‘卡脖子’問題。”潘雲鶴院士在致辭中說。

“天樞最初的原型是之江實驗室內部使用的一個平臺,為科研人員從事人工智慧開發、訓練、推理和分析提供基於深度學習的解決方案。”之江實驗室主任朱世強在釋出會上揭祕天樞的“前世今生”。“從自用走向開源,之江實驗室下了很大的決心。在國外深度學習框架佔據主要市場的背景下,之江實驗室面向國家戰略和市場需求,堅持打造更高效能、更友好易用的國產開源平臺,致力於解決我國人工智慧領域的安全問題,實現人工智慧技術創新的自主可控,搶佔新一輪人工智慧發展的戰略制高點。”朱世強說。

四大核心優勢

實現至快至簡

之江實驗室副主任、天樞平臺總架構師鮑虎軍在釋出會上介紹了之江天樞人工智慧開源平臺的四大核心優勢,分別是開發友好、訓練高效、視覺化分析和模型煉知。

一站平臺 開發友好

之江實驗室打造天樞平臺的初衷是希望給人工智慧開發者提供完備的基礎工具,以更先進的深度學習框架提升人工智慧技術的研發效率。

之江天樞平臺秉持“開發友好” 的理念,打造了一站式AI開發平臺,即使是“AI小白”也能迅速上手。天樞架構師單海軍博士介紹說:“天樞第一個版本支援從資料管理、模型開發、訓練管理到模型管理的全鏈路功能,資料管理還能實現資料的智慧標註與資料增強。”

之江天樞正式開源,瞄準人工智慧新基建!

超大規模,自動並行

深度學習領域,算力是最重要的推動力。如何在超大規模的場景下讓模型訓練更高效地跑起來?“天樞平臺瞄準行業痛點,打造了全新的分散式計算引擎,使用多機多卡如同單卡一樣簡單自動並行,原生支援超大模型訓練,實現出色的執行效率。”單海軍介紹道。

之江天樞正式開源,瞄準人工智慧新基建!

之江天樞平臺的分散式訓練框架支援資料並行、模型並行、流水並行三種並行模式,能根據不同模型自動編排相適應的並行模式,同時具備出色的線性加速比,資料並行效能有了較大幅度的提升。

此外,天樞還自研了高效通訊協議,原生支援RDMA;同時還支援多種深度學習編譯器,多晶片輕鬆實現軟體定義資料流,對AI晶片友好相容。

可視分析 高效調參

值得一提的是,天樞構建的視覺化分析平臺能提供高效的訓練過程調參功能。“在模型訓練過程當中,開發者能夠直觀、實時地洞察模型結構、引數趨勢、降維分析等重要資訊。通過視覺化分析,輔助引數調整,從而改變訓練路徑。”單海軍說道。

之江天樞正式開源,瞄準人工智慧新基建!

模型重組 精煉知識

當前主流深度學習演算法構建過程通常需要經過資料處理、模型開發和大規模訓練計算等步驟來生產模型,而本次天樞推出了全新的模型生產方式“模型煉知”,通過領先的模型重組煉知技術,實現靈活按需定製模型。“天樞的深度模型煉知框架具備度量功能,能夠自動度量多個視覺模型是否能夠進行重組,並通過逐層重組、共同特徵提取、多工自適應分支解碼等,將不同模型結構進行重組,直接生產出一個全新的模型,應用在新的場景。”鮑虎軍詳細介紹了模型煉知方面的技術創新。

▲ 天樞平臺功能演示

計算機視覺任務中有兩類比較常見的任務:一類是影象語義分割,也就是對影象中每一個畫素點進行分類,確定每個點的類別(如屬於行人或車等);另一類是影象深度估計,即對影象中的目標深度進行預測。目前主流的演算法,需要利用兩個單任務模型對兩個視覺任務分別進行處理。單海軍進一步解釋說:“在天樞模型煉知框架上,只要輸入兩個預訓練模型,框架能重組出一個新的多工模型,該模型可以同時處理兩個任務,不僅提升了計算效率,降低了能耗,還增強了模型的能力邊界。”

揭祕天樞全景圖

自2018年10月啟動人工智慧開源平臺研發,到2019年1月獲國家發改委專案支援,再到2020年8月開源上線,之江天樞團隊近百名研發人員,歷時650余天,成功完成平臺第一個版本的研發。

之江天樞正式開源,瞄準人工智慧新基建!

在後續版本中,天樞將進一步豐富演算法庫,搭建面向視覺的AutoML平臺,實現拖拽式模型開發。還將進一步優化分散式訓練效能,不斷提高訓練規模與並行效率,最終形成去中心化式分散式訓練。同時,高效的端側推理平臺在研發計劃中,將完善部署環節,實現端側推理功能。

重磅打造AI新生態

程式碼託管平臺首次亮相

之江天樞正式開源,瞄準人工智慧新基建!

共建共享、聚力協作,開發者社群無疑是開源生態的重要一環。在天樞開源釋出會上,由中國信通院、中國人工智慧產業發展聯盟和之江實驗室共同建設和運營的聚碼坊(CodeLab)開源社群也正式上線。聚碼坊以程式碼託管為核心,以健全、實用的開源機制為基礎,以企業級高效協同開發功能撬動更大開源貢獻,推動開源生態建設,助力人工智慧行業發展。

截至目前,天樞平臺已經匯聚了阿里雲、螞蟻金服、新華三、海康威視等66家生態夥伴。值得一提的是,為支援企業發展,有力擴充套件企業生態,天樞平臺支援中小微企業免費使用,進一步推動人工智慧技術向各行各業滲透應用。

天樞官方網站:

http://tianshu.org.cn/

程式碼託管平臺“聚碼坊(Codelab)人工智慧開源社群”:

http://codelab.org.cn/

之江實驗室簡介

之江實驗室由浙江省人民政府、浙江大學、阿里巴巴集團共同舉辦,以國家目標和戰略需求為導向,以重大科技任務攻關和大型科技基礎設施建設為主線,以打造國家未來戰略科技力量為目標,形成一批原創性、突破性、引領性、支撐性的重大科技成果,匯聚和培養一批具有全球影響力的高層次人才,建設世界一流新型研發機構。

日前, 浙江印發《關於建設之江實驗室等浙江省實驗室的通知》決定建設之江實驗室、良渚實驗室、西湖實驗室、湖畔實驗室等4個省級實驗室。其中,之江實驗室、良渚實驗室、湖畔實驗室位於我區。

內容支援/之江實驗室、新華網

編輯/朱朱

責任編輯:

閱讀 ()
喜歡這篇文章嗎?立刻分享出去讓更多人知道~

相關文章