<kbd id="afajh"><form id="afajh"></form></kbd>
<strong id="afajh"><dl id="afajh"></dl></strong>
    <del id="afajh"><form id="afajh"></form></del>
        1. <th id="afajh"><progress id="afajh"></progress></th>
          <b id="afajh"><abbr id="afajh"></abbr></b>
          <th id="afajh"><progress id="afajh"></progress></th>

          高性能神經(jīng)網(wǎng)絡(luò)與AI芯片の應(yīng)用

          共 4275字,需瀏覽 9分鐘

           ·

          2022-02-12 18:09

          隨著大數(shù)據(jù)的發(fā)展,計算機片算的提升,人工智能近兩年迎來了新一輪的爆發(fā)。而人工智能實現(xiàn)級算力的核就是AI芯片。AI芯片也被稱為人工智能加速,即專門用于處人工智能應(yīng)用中的大量計算任務(wù)的模塊。


          2020年我國人工智能芯片市場規(guī)模約為184億元。未來5G商用的普及將繼續(xù)催生人工智能芯片的應(yīng)用需求,中國人工智能芯片行業(yè)將快速發(fā)展,預(yù)計2023年市場規(guī)模將突破千億元。


          那么,如何借助AI芯片來實現(xiàn)特定的任務(wù),將是所有AI芯片產(chǎn)業(yè)人員必備的技能。


          為此,貪心學(xué)院重磅推出《高性能神經(jīng)網(wǎng)絡(luò)與AI芯片應(yīng)用研修課程,為想進入AI芯片行業(yè)的同學(xué)們提供一個可以大幅提升自身就業(yè)競爭力的選擇。


          本課程會講解AI芯片相關(guān)知識、高性能網(wǎng)絡(luò)設(shè)計、通用芯片及專用芯片計算加速方法等專業(yè)技能,并結(jié)合優(yōu)秀編譯器的架構(gòu)和實現(xiàn)細節(jié)的講解,為學(xué)生構(gòu)建高性能AI算法的軟硬件視角,能夠解決應(yīng)用落地時神經(jīng)網(wǎng)絡(luò)的優(yōu)化和部署相關(guān)問題。



          01

          內(nèi)容亮點


          • 全面技術(shù)講解:課程涵蓋了輕量化神經(jīng)網(wǎng)絡(luò)設(shè)計、神經(jīng)網(wǎng)絡(luò)部署前的優(yōu)化方法、神經(jīng)網(wǎng)絡(luò)編譯器的設(shè)計模式和具體實現(xiàn)、神經(jīng)網(wǎng)絡(luò)部署到芯片上的計算加速等全面的AI嵌入式芯片設(shè)計和應(yīng)用相關(guān)人員就業(yè)必備的知識。
          • 軟硬件相結(jié)合:本課程除了全面講解高性能神經(jīng)網(wǎng)絡(luò)相關(guān)的知識技術(shù)外,還會指導(dǎo)學(xué)員在硬件上進行實操。
          • 專家導(dǎo)師授課:課程導(dǎo)師為AI芯片行業(yè)專家,相關(guān)項目經(jīng)驗十分豐富。

          02

          你將收獲


          • 掌握神經(jīng)網(wǎng)絡(luò)高性能實現(xiàn)的算法及工具
          • 掌握通用芯片及專用AI芯片架構(gòu)及網(wǎng)絡(luò)加速技術(shù)
          • 掌握通用芯片及專用AI芯片神經(jīng)網(wǎng)絡(luò)部署應(yīng)用的實際案例
          • 短期內(nèi)對一個領(lǐng)域有全面的認識,大大節(jié)省學(xué)習(xí)時間
          • 認識一群擁有同樣興趣的人、相互交流、相互學(xué)習(xí)
           
          感興趣的請?zhí)砑幼稍冾檰?/strong>


          03

          項目介紹


          ▌項目1
          項目名稱:模型輕量化
          項目內(nèi)容描述:mobilenet、shufflenet、squeezenet等,模型量化、剪枝和蒸餾技術(shù),網(wǎng)絡(luò)的計算量和內(nèi)存分析的工具,主干網(wǎng)絡(luò)的輕量化,檢測網(wǎng)絡(luò)的輕量化,分割網(wǎng)絡(luò)的輕量化,不同框架提供的加速方案。
          項目使用的數(shù)據(jù)集:COCO,ADE20k,ImageNet
          項目使用的算法:模型量化,模型剪枝和模型蒸餾
          項目使用的工具:python,c/c++,pytorch,tensorflow,distiller,ncnn
          項目預(yù)期結(jié)果:學(xué)員掌握輕量化網(wǎng)絡(luò)設(shè)計準則,模型輕量化技術(shù),能夠上手操作一  個網(wǎng)絡(luò)部署前的優(yōu)化。
          項目對應(yīng)第幾周的課程:1~4周

          ▌項目2
          項目名稱:神經(jīng)網(wǎng)絡(luò)編譯器
          項目內(nèi)容描述:tvm,ncnn,mnn,tnn 各自的特點,對于神經(jīng)網(wǎng)絡(luò)的優(yōu)化方案,tvm的具體設(shè)備的優(yōu)化方案,算子融合,路徑優(yōu)化,內(nèi)存優(yōu)化,ncnn的網(wǎng)絡(luò)的表示數(shù)據(jù)結(jié)構(gòu),ncnn的一些優(yōu)化計算的思路,量化方法,mnn中的數(shù)據(jù)結(jié)構(gòu),模型轉(zhuǎn)換和量化方法,tnn和ncnn的區(qū)別,系統(tǒng)架構(gòu),量化方法。
          項目使用的算法:離線量化,在線感知量化
          項目使用的工具:python,c/c++,tvm,ncnn,tnn,mnn
          項目預(yù)期結(jié)果:學(xué)員對于神經(jīng)網(wǎng)絡(luò)編譯器有全面的了解,對于主流神經(jīng)網(wǎng)絡(luò)編譯器能夠?qū)嵺`使用,完成模型到芯片所需要格式的轉(zhuǎn)換。
          項目對應(yīng)第幾周的課程:5~8周

          ▌項目3
          項目名稱:通用芯片加速技術(shù)
          項目內(nèi)容描述:cpu,arm對應(yīng)的指令集級別的加速,編譯器中具體的優(yōu)化策略,simd,avx,sse,openblas,neon和cpu中對于卷積的運算加速方案,cpu上的具體實例,arm上的具體實例,環(huán)境配置,神經(jīng)網(wǎng)絡(luò)的例子,加速方案的組合和實際效果。
          項目使用的算法:simd,avs,sse,blas,winograd
          項目使用的工具:nnpack,qnnpack,lowpgemm,tvm,ncnn
          項目預(yù)期結(jié)果:學(xué)員深入掌握cpu,arm等芯片的神經(jīng)網(wǎng)絡(luò)加速技術(shù),并且通過一個例子來看具體的加速效果 。
          項目對應(yīng)第幾周的課程:9~12周

          ▌項目4
          項目名稱:專用芯片加速技術(shù) 
          項目內(nèi)容描述:gpu和k210 npu及各自神經(jīng)網(wǎng)絡(luò)編譯器中的加速優(yōu)化技術(shù),gpu上的cuda加速的方法,cublas,opencl,vulkan的開發(fā)例子,nncase上編譯一個網(wǎng)絡(luò),k210開發(fā)板環(huán)境配置及人臉檢測模型的部署
          項目使用的算法:人臉檢測
          項目使用的工具(編程語言、工具、技術(shù)等):Python,C/C++,opencl,vulkan,nncase
          項目預(yù)期結(jié)果:學(xué)員可以掌握gpu及npu上神經(jīng)網(wǎng)絡(luò)的編譯加速,并且通過一個具體的例子來完成人臉檢測模型在k210芯片上的部署 
          項目對應(yīng)第幾周的課程:13~16周


          感興趣的請?zhí)砑幼稍冾檰?/strong>

          04

          詳細內(nèi)容介紹


          第一周:輕量化網(wǎng)絡(luò)結(jié)構(gòu)設(shè)計

          本節(jié)課將講解網(wǎng)絡(luò)參數(shù)量、浮點運算數(shù)等模型評價指標、工具,以及分類網(wǎng)絡(luò), 檢測網(wǎng)絡(luò),分割網(wǎng)絡(luò)的輕量化設(shè)計。

          課程提綱:

          • 輕量化網(wǎng)絡(luò)設(shè)計背景介紹
          • 網(wǎng)絡(luò)的計算量和內(nèi)存分析工具
          • 主干網(wǎng)絡(luò)的輕量化
          • 檢測網(wǎng)絡(luò)的輕量化
          • 分割網(wǎng)絡(luò)的輕量化
          • 典型網(wǎng)絡(luò)的設(shè)計思路


          第二周:知識蒸餾優(yōu)化、低秩分解優(yōu)化

          本節(jié)課將講解神經(jīng)網(wǎng)絡(luò)知識蒸餾優(yōu)化、神經(jīng)網(wǎng)絡(luò)計算低秩分解加速計算方法。

          課程提綱:

          • 知識蒸餾方法介紹

          • 知識蒸餾原理和步驟介紹

          • 知識蒸餾訓(xùn)練方法縮減網(wǎng)絡(luò)的實際分類網(wǎng)絡(luò)演示

          • 低秩分解原理

          • 低秩分解加速計算在神經(jīng)網(wǎng)絡(luò)推理中的應(yīng)用


          第三周:網(wǎng)絡(luò)剪枝

          本節(jié)課將講解網(wǎng)絡(luò)稀疏性原理,網(wǎng)絡(luò)剪枝原則及剪枝的常見方法。
          課程提綱:
          • 網(wǎng)絡(luò)剪枝的原理
          • 常用的剪枝策略
          • 神經(jīng)網(wǎng)絡(luò)框架中的剪枝功能介紹
          • 剪枝的實際使用


          第四周:網(wǎng)絡(luò)量

          本節(jié)課將講解網(wǎng)絡(luò)的低比特化,以及在AI芯片中的計算,實現(xiàn)網(wǎng)絡(luò)量化的離線和在線感知的量化方法。
          課程提綱:
          • 網(wǎng)絡(luò)量化的技術(shù)發(fā)展
          • 不同離線量化算法的實現(xiàn)原理
          • 神經(jīng)網(wǎng)絡(luò)框架中在線感知量化算法的原理及實現(xiàn)
          • 實際案例


          第五周:神經(jīng)網(wǎng)絡(luò)編譯器簡介

          本節(jié)課將講解tvm、ncnn、tnn、mnn的簡要對比,tvm relay和網(wǎng)絡(luò)轉(zhuǎn)換,網(wǎng)絡(luò)的編譯優(yōu)化和推理加速。

          課程提綱:

          • tvm、ncnn、tnn、mnn的簡要對比
          • tvm relay和網(wǎng)絡(luò)轉(zhuǎn)換
          • 網(wǎng)絡(luò)的編譯優(yōu)化和推理加速
          • tvm的實際案例


          第六周:ncnn

          本節(jié)課將講解ncnn的系統(tǒng)架構(gòu)圖,數(shù)據(jù)結(jié)構(gòu),支持的框架,網(wǎng)絡(luò)的表示,網(wǎng)絡(luò)優(yōu)化,量化,以及各平臺的優(yōu)化策略。

          課程提綱:

          • ncnn的系統(tǒng)架構(gòu)圖
          • ncnn的數(shù)據(jù)結(jié)構(gòu)及支持框架
          • ncnn的網(wǎng)絡(luò)表示
          • ncnn網(wǎng)絡(luò)優(yōu)化,量化,及各平臺的優(yōu)化策略


          第七周:tnn
          本節(jié)課將講解tnn的系統(tǒng)架構(gòu)圖,數(shù)據(jù)結(jié)構(gòu),支持的框架,網(wǎng)絡(luò)的表示,網(wǎng)絡(luò)優(yōu)化,量化,以及各平臺的優(yōu)化策略。
          課程提綱:
          • tnn的系統(tǒng)架構(gòu)圖
          • tnn的數(shù)據(jù)結(jié)構(gòu)及支持框架
          • tnn的網(wǎng)絡(luò)表示
          • tnn網(wǎng)絡(luò)優(yōu)化,量化,及各平臺的優(yōu)化策略


          第八周:mnn

          本節(jié)課將講解mnn的系統(tǒng)架構(gòu)圖,數(shù)據(jù)結(jié)構(gòu),支持的框架,網(wǎng)絡(luò)的表示,網(wǎng)絡(luò)優(yōu)化,量化,以及各平臺的優(yōu)化策略。

          課程提綱:

          • mnn的系統(tǒng)架構(gòu)圖
          • mnn的數(shù)據(jù)結(jié)構(gòu)及支持框架
          • mnn的網(wǎng)絡(luò)表示
          • mnn網(wǎng)絡(luò)優(yōu)化,量化,及各平臺的優(yōu)化策略

           

          第九周:cpu中的指令集優(yōu)化

          本節(jié)課將講解cpu中的指令集優(yōu)化,simd、avx、sse方法,及tvm中對于cpu上神經(jīng)網(wǎng)絡(luò)加速的位置。

          課程提綱:

          • cpu中的指令集優(yōu)化:simd,avx,sse方法
          • tvm中對于cpu上神經(jīng)網(wǎng)絡(luò)加速的位置

          第十周:arm中的神經(jīng)網(wǎng)絡(luò)加

          本節(jié)課將講解arm中的neon優(yōu)化,及ncnn,tnn和mnn的實現(xiàn),并結(jié)合實際例子來看具體的加速效果。
          課程提綱:
          • arm中的neon優(yōu)化
          • ncnn,tnn和mnn實現(xiàn)的講解
          • 具體加速效果的實際案例


          第十一周:卷積計算的優(yōu)化算
          本節(jié)課將講解卷積計算的優(yōu)化算法,包括winograd等。

          第十二周:神經(jīng)網(wǎng)絡(luò)加速庫
          本節(jié)課將講解openblas庫的優(yōu)化,nnpack/qnnpack的優(yōu)化,及l(fā)owpgemm。
          課程提綱:
          • openblas庫的優(yōu)化

          • nnpack/qnnpack的優(yōu)化

          • lowpgemm


          第十三周:gpu上神經(jīng)網(wǎng)絡(luò)的運行和加速

          本節(jié)課將講解gpu與cpu計算加速的區(qū)別,英偉達gpu的原生cuda加速方法,及推理側(cè)tensorrt的使用。

          課程提綱:

          • gpu與cpu計算加速的區(qū)別
          • 英偉達gpu的原生cuda加速方法
          • 推理側(cè)tensorrt的使用

           

          第十四周:gpu加速通用加速庫

          本節(jié)課將講解通用加速庫cublas,vulkan,opencl的使用。

          課程提綱:

          • 通用加速庫cublas的使用
          • Vulkan的使用
          • opencl的使用


          第十五周:dsp,fpga,npu專用加速計算

          本節(jié)課將講解dsp,fpga,npu的專用加速計算

          課程提綱:

          • dsp計算加速
          • fpga計算加速
          • npu專用加速計算
          第十六周:npu使用
          本節(jié)課將以嘉楠科技的k210為例,實現(xiàn)一個人臉檢測案例。
          課程提綱:
          • 嘉楠科技k210芯片介紹
          • nncase人臉檢測案例


          感興趣的請?zhí)砑幼稍冾檰?/strong>

          05

          授課方式


          • 基礎(chǔ)知識講解

          • 前沿論文解讀

          • 論文代碼復(fù)現(xiàn)

          • 該知識內(nèi)容的實際應(yīng)用

          • 該知識的項目實戰(zhàn)

          • 該方向的知識延伸及未來趨勢講解

           

          06

          適合人群


          大學(xué)生
          • 編程及深度學(xué)習(xí)基礎(chǔ)良好,為了想進入AI芯片行業(yè)發(fā)展

          在職人士
          • 想進入AI芯片行業(yè)的算法或IT工程師
          • 想通過掌握硬件技術(shù),拓寬未來職業(yè)路徑的AI算法工程師

          入學(xué)基礎(chǔ)要求
          • 掌握python、C++開發(fā),及深度學(xué)習(xí)的基礎(chǔ)知識。


          07

          課程研發(fā)及導(dǎo)師團隊


          王歡

          肇觀科技算法總監(jiān)
          華中科技大學(xué)模式識別與人工智能碩士
          原拼多多、同盾科技等公司算法工程師,AI算法領(lǐng)域從業(yè)15+年



          藍振忠
          課程研發(fā)顧問
          ALBERT模型的第一作者

          西湖大學(xué)特聘研究員和博士生導(dǎo)師
          Google AI實驗室科學(xué)家
          美國卡耐基梅隆大學(xué)博士
          先后在NIPS, CVPR, ICCV, IJCAI等會議發(fā)表30篇以上論文,1000+引用次數(shù)


          Jerry Yuan
          課程研發(fā)顧問
          美國微軟(總部)推薦系統(tǒng)部負責人
          美國亞馬遜(總部)資深工程師

          美國新澤西理工大學(xué)博士
          14年人工智能, 數(shù)字圖像處理和推薦系統(tǒng)領(lǐng)域研究和項目經(jīng)驗
          先后在AI相關(guān)國際會議上發(fā)表20篇以上論文


          李文哲
          貪心科技CEO
          美國南加州大學(xué)博士

          曾任獨角獸金科集團首席數(shù)據(jù)科學(xué)家、美國亞馬遜和高盛的高級工程師
          金融行業(yè)開創(chuàng)知識圖譜做大數(shù)據(jù)反欺詐的第一人
          先后在AAAI、KDD、AISTATS、CHI等國際會議上發(fā)表過15篇以上論文


          感興趣的請?zhí)砑幼稍冾檰?/strong>

          08

          歷屆學(xué)員去向



          瀏覽 30
          點贊
          評論
          收藏
          分享

          手機掃一掃分享

          分享
          舉報
          評論
          圖片
          表情
          推薦
          點贊
          評論
          收藏
          分享

          手機掃一掃分享

          分享
          舉報
          <kbd id="afajh"><form id="afajh"></form></kbd>
          <strong id="afajh"><dl id="afajh"></dl></strong>
            <del id="afajh"><form id="afajh"></form></del>
                1. <th id="afajh"><progress id="afajh"></progress></th>
                  <b id="afajh"><abbr id="afajh"></abbr></b>
                    <th id="afajh"><progress id="afajh"></progress></th>
                    精品九九九九九九 | 日韩在线视频免费 | 成人欧美在线 | 日韩无码av中文字幕 | 黄色a一级 |