18video性欧美19sex,欧美高清videosddfsexhd,性少妇videosexfreexxx片中国,激情五月激情综合五月看花,亚洲人成网77777色在线播放

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

支持大模型部署和運(yùn)行的邊緣計(jì)算SoC芯片

Carol Li ? 來(lái)源:電子發(fā)燒友網(wǎng) ? 作者:李彎彎 ? 2024-05-27 08:00 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

電子發(fā)燒友網(wǎng)報(bào)道(文/李彎彎)如今,AI在邊緣側(cè)的應(yīng)用越來(lái)越廣泛,這其中少不了AI SoC芯片的支持,邊緣計(jì)算AI SoC是一種集成了人工智能(AI)和邊緣計(jì)算能力的系統(tǒng)級(jí)芯片。這種芯片結(jié)合了高性能的處理器核心、AI加速器、內(nèi)存控制器、外設(shè)接口以及通信接口等關(guān)鍵組件,旨在在數(shù)據(jù)產(chǎn)生的源頭附近(即邊緣)實(shí)現(xiàn)實(shí)時(shí)的數(shù)據(jù)處理、分析和決策。

邊緣計(jì)算SoC的發(fā)展歷程

SoC的發(fā)展經(jīng)歷了多個(gè)階段,早期階段(1970年代至1980年代),微處理器技術(shù)開(kāi)始興起,英特爾Intel)推出了第一款微處理器Intel 4004,這通常被認(rèn)為是SoC技術(shù)的起點(diǎn)。隨著制造工藝的改進(jìn),設(shè)計(jì)師開(kāi)始將更復(fù)雜的元素(如中央處理器CPU、內(nèi)存和輸入/輸出I/O電路)集成到單個(gè)芯片上,創(chuàng)建更先進(jìn)的應(yīng)用特定集成電路ASIC)。

進(jìn)一步發(fā)展階段(1990年代至2000年代):隨著半導(dǎo)體工藝技術(shù)的進(jìn)一步發(fā)展,將整個(gè)系統(tǒng)(包括模擬和數(shù)字功能)集成到單個(gè)芯片上成為可能。這為邊緣計(jì)算提供了更強(qiáng)大的硬件支持,因?yàn)檫吘壴O(shè)備需要具備一定的數(shù)據(jù)處理和計(jì)算能力。在這個(gè)時(shí)期,SoC的設(shè)計(jì)變得更加復(fù)雜,集成了更多的功能和組件,如圖形處理器(GPU)、數(shù)字信號(hào)處理器(DSP)等。

定制化SoC的發(fā)展(2010年代):隨著物聯(lián)網(wǎng)IoT)應(yīng)用、可穿戴設(shè)備以及邊緣計(jì)算設(shè)備的需求不斷增加,制造商開(kāi)始針對(duì)特定用例調(diào)整SoC設(shè)計(jì),整合人工智能(AI)和機(jī)器學(xué)習(xí)(ML)功能。這推動(dòng)了定制化SoC的發(fā)展,使其能夠更好地滿足特定應(yīng)用的需求,提高性能和效率。

AI與SoC的深度融合(2020年代及以后):隨著進(jìn)入AI、5G連接和邊緣計(jì)算時(shí)代,SoC繼續(xù)演變以適應(yīng)不斷增長(zhǎng)的復(fù)雜性和處理要求。AI技術(shù)成為SoC架構(gòu)的重要組成部分,為邊緣設(shè)備提供了更強(qiáng)大的智能處理能力。例如,通過(guò)集成AI加速器、神經(jīng)網(wǎng)絡(luò)處理器(NPU)等專用硬件,SoC可以加速AI算法的執(zhí)行,提高處理速度和效率。

如今,邊緣計(jì)算AI SoC的應(yīng)用涵蓋多個(gè)領(lǐng)域和行業(yè)。如智能制造,在通過(guò)安裝集成了AI SoC的邊緣計(jì)算設(shè)備,可以實(shí)時(shí)監(jiān)測(cè)生產(chǎn)設(shè)備的運(yùn)行狀態(tài)、產(chǎn)品質(zhì)量等信息。這些設(shè)備能夠?qū)崟r(shí)分析數(shù)據(jù),預(yù)測(cè)設(shè)備故障,優(yōu)化生產(chǎn)流程,提高生產(chǎn)效率和產(chǎn)品質(zhì)量。

再如智慧城市,在智能交通系統(tǒng)中,邊緣計(jì)算AI SoC可以實(shí)時(shí)分析交通流量、車輛行駛軌跡等數(shù)據(jù),優(yōu)化交通信號(hào)燈的控制策略,緩解交通擁堵。在智能安防領(lǐng)域,通過(guò)在城市各個(gè)角落部署邊緣計(jì)算設(shè)備,可以實(shí)時(shí)監(jiān)測(cè)城市的安全狀況,進(jìn)行人臉識(shí)別、行為分析等操作,提高城市的公共安全水平。

還有醫(yī)療領(lǐng)域,在醫(yī)院中,邊緣計(jì)算AI SoC可以實(shí)時(shí)監(jiān)測(cè)患者的生理數(shù)據(jù),如心率、血壓、血糖等。通過(guò)對(duì)這些數(shù)據(jù)的實(shí)時(shí)分析,醫(yī)生可以及時(shí)了解患者的健康狀況,為患者提供更加準(zhǔn)確的診斷和治療方案。在遠(yuǎn)程醫(yī)療領(lǐng)域,邊緣計(jì)算AI SoC可以實(shí)現(xiàn)遠(yuǎn)程會(huì)診、遠(yuǎn)程手術(shù)等功能。醫(yī)生可以通過(guò)遠(yuǎn)程訪問(wèn)患者的醫(yī)療數(shù)據(jù),進(jìn)行遠(yuǎn)程診斷和治療,提高醫(yī)療服務(wù)的效率和可及性。

邊緣AI SoC支持大模型

隨著大模型的發(fā)展,其在邊端側(cè)的部署應(yīng)用成為趨勢(shì),如今也有不少企業(yè)推出邊緣SoC芯片支持大模型的運(yùn)行。如邊緣AI半導(dǎo)體公司安霸(Ambarella),日前在美國(guó) AutoSens 展會(huì)宣布推出兩款用于車載車隊(duì)遠(yuǎn)程信息處理系統(tǒng)的最新一代 AI 系統(tǒng)集成芯片(SoC)。

新款 CV75AX 非常適合集成前置 ADAS 和駕駛員監(jiān)控系統(tǒng)(DMS)的 AI 行車記錄儀,與安霸上一代SoC相比,其 AI 性能提高了 2 倍,使最新的Transformer神經(jīng)網(wǎng)絡(luò)能夠提高準(zhǔn)確性并減少誤報(bào),而無(wú)需針對(duì)每個(gè)對(duì)象進(jìn)行訓(xùn)練。

新款CV72AX 非常適合下一代車載網(wǎng)關(guān),支持多達(dá)10個(gè)攝像頭,其AI性能比其前代產(chǎn)品高出6倍,支持視覺(jué)Transformer和多模態(tài)視覺(jué)語(yǔ)言模型(VLM ) ,可提供實(shí)時(shí)監(jiān)測(cè)預(yù)警,以及多通道視頻預(yù)分類和自然語(yǔ)言搜索,以實(shí)現(xiàn)更高效的視頻分析。

安霸此前就宣布推出了基于 CV72 芯片的多模態(tài)大模型推理解決方案——Cooper Mini。這一解決方案是為邊緣計(jì)算環(huán)境量身定制的,特別適用于需要在設(shè)備上直接進(jìn)行高級(jí)數(shù)據(jù)處理的應(yīng)用。安霸在2024年CES期間推出了基于N1的多模態(tài)大模型解決方案 Cooper Max,通過(guò)單顆N1芯片支持高達(dá)340億參數(shù)的多模態(tài)大模型推理。新推出的基于CV72 的Cooper Mini,則可實(shí)現(xiàn)低功耗系統(tǒng)單芯片高達(dá)30億參數(shù)的多模態(tài)大模型推理。

還有AMD此前推出的第二代Versal自適應(yīng)SoC,其中的Versal AI Edge系列特別針對(duì)AI驅(qū)動(dòng)型嵌入式系統(tǒng)進(jìn)行了設(shè)計(jì)。這款SOC每瓦TOPS(每秒萬(wàn)億次操作/瓦特)最多提升3倍,標(biāo)量算力最多提升10倍,使其能夠更有效地支持大模型的部署和運(yùn)行。

國(guó)內(nèi)的云天勵(lì)飛也有一款邊緣計(jì)算芯片DeepEdge10,這是一款國(guó)產(chǎn)Chiplet大模型推理芯片,內(nèi)置自研新一代神經(jīng)網(wǎng)絡(luò)處理器NNP400T,通過(guò)D2D高速互聯(lián)Chiplet技術(shù)、C2CMesh互聯(lián)架構(gòu)實(shí)現(xiàn)算力擴(kuò)展,能夠支持千億級(jí)參數(shù)大模型,落地于邊緣設(shè)備和邊緣服務(wù)器。

還有北京奕斯偉推出的一款邊緣計(jì)算SoC芯片EIC7700X,采用64位RISC-V高性能處理器,并搭配自主研發(fā)的高效神經(jīng)網(wǎng)絡(luò)計(jì)算單元,支持全棧浮點(diǎn)計(jì)算,全面加速生成式大模型。它擁有豐富的外圍擴(kuò)展接口,并具備強(qiáng)大的音視頻處理能力,在計(jì)算機(jī)視覺(jué)應(yīng)用領(lǐng)域具有超高的適應(yīng)能力。

寫在最后

總之,邊緣計(jì)算AI SOC在當(dāng)前的計(jì)算領(lǐng)域具有顯著的優(yōu)勢(shì),包括效率高、功耗低、安全性高、實(shí)時(shí)分析、分布式處理等,憑借著諸多優(yōu)勢(shì),邊緣計(jì)算SOC已經(jīng)在各個(gè)領(lǐng)域得到應(yīng)用。同時(shí),也有不少邊緣SOC能夠支持大模型的運(yùn)行。不過(guò)邊緣計(jì)算SOC也仍然尤其局限性,如定制化成本高、技術(shù)更新迅速、數(shù)據(jù)隱私和安全挑戰(zhàn)等,需要持續(xù)去突破。
聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • soc
    soc
    +關(guān)注

    關(guān)注

    38

    文章

    4481

    瀏覽量

    226635
  • 邊緣計(jì)算
    +關(guān)注

    關(guān)注

    22

    文章

    3428

    瀏覽量

    52334
  • 大模型
    +關(guān)注

    關(guān)注

    2

    文章

    3360

    瀏覽量

    4780
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    ALINX VD100低功耗端側(cè)大模型部署方案,運(yùn)行3B模型功耗僅5W?!

    模型運(yùn)行≠用戶體驗(yàn)好。 IDC 預(yù)測(cè),到 2026 年,全球超過(guò) 50% 的企業(yè) AI 工作負(fù)載將部署邊緣設(shè)備上。在 AI 部署逐漸從
    的頭像 發(fā)表于 09-03 14:58 ?323次閱讀
    ALINX VD100低功耗端側(cè)大<b class='flag-5'>模型</b><b class='flag-5'>部署</b>方案,<b class='flag-5'>運(yùn)行</b>3B<b class='flag-5'>模型</b>功耗僅5W?!

    利用超微型 Neuton ML 模型解鎖 SoC 邊緣人工智能

    的 ML 模型,你所需要的只是一個(gè)數(shù)據(jù)集。Neuton 模型可以在任何 Nordic SoC(如我們的旗艦產(chǎn)品 nRF54L15)上運(yùn)行,而且非常高效,也非常適合空間最有限的
    發(fā)表于 08-31 20:54

    超小型Neuton機(jī)器學(xué)習(xí)模型, 在任何系統(tǒng)級(jí)芯片(SoC)上解鎖邊緣人工智能應(yīng)用.

    個(gè)高度優(yōu)化、快速而準(zhǔn)確的ML 模型,你所需要的只是一個(gè)數(shù)據(jù)集。Neuton 模型可以在任何Nordic SoC運(yùn)行、Neuton 模型
    發(fā)表于 07-31 11:38

    邊緣AI實(shí)現(xiàn)的核心環(huán)節(jié):硬件選擇和模型部署

    邊緣AI的實(shí)現(xiàn)原理是將人工智能算法和模型部署到靠近數(shù)據(jù)源的邊緣設(shè)備上,使這些設(shè)備能夠在本地進(jìn)行數(shù)據(jù)處理、分析和決策,而無(wú)需將數(shù)據(jù)傳輸?shù)竭h(yuǎn)程的云端服務(wù)器。
    的頭像 發(fā)表于 06-19 12:19 ?825次閱讀
    <b class='flag-5'>邊緣</b>AI實(shí)現(xiàn)的核心環(huán)節(jié):硬件選擇和<b class='flag-5'>模型</b><b class='flag-5'>部署</b>

    邊緣計(jì)算中的機(jī)器學(xué)習(xí):基于 Linux 系統(tǒng)的實(shí)時(shí)推理模型部署與工業(yè)集成!

    你好,旅行者!歡迎來(lái)到Medium的這一角落。在本文中,我們將把一個(gè)機(jī)器學(xué)習(xí)模型(神經(jīng)網(wǎng)絡(luò))部署邊緣設(shè)備上,利用從ModbusTCP寄存器獲取的實(shí)時(shí)數(shù)據(jù)來(lái)預(yù)測(cè)一臺(tái)復(fù)古音頻放大器的當(dāng)前健康狀況。你將
    的頭像 發(fā)表于 06-11 17:22 ?608次閱讀
    <b class='flag-5'>邊緣</b><b class='flag-5'>計(jì)算</b>中的機(jī)器學(xué)習(xí):基于 Linux 系統(tǒng)的實(shí)時(shí)推理<b class='flag-5'>模型</b><b class='flag-5'>部署</b>與工業(yè)集成!

    邊緣AI實(shí)現(xiàn)的核心環(huán)節(jié):硬件選擇和模型部署

    電子發(fā)燒友網(wǎng)綜合報(bào)道 邊緣AI的實(shí)現(xiàn)原理是將人工智能算法和模型部署到靠近數(shù)據(jù)源的邊緣設(shè)備上,使這些設(shè)備能夠在本地進(jìn)行數(shù)據(jù)處理、分析和決策,而無(wú)需將數(shù)據(jù)傳輸?shù)竭h(yuǎn)程的云端服務(wù)器。
    發(fā)表于 05-26 07:09 ?1188次閱讀

    Deepseek海思SD3403邊緣計(jì)算AI產(chǎn)品系統(tǒng)

    海思SD3403邊緣計(jì)算AI框架,提供了一套開(kāi)放式AI訓(xùn)練產(chǎn)品工具包,解決客戶低成本AI系統(tǒng),針對(duì)差異化AI 應(yīng)用場(chǎng)景,自己采集樣本數(shù)據(jù),進(jìn)行AI特征標(biāo)定,AI模型訓(xùn)練,AI應(yīng)用部署
    發(fā)表于 04-28 11:05

    《RK3588核心板:AIoT邊緣計(jì)算的革命性引擎,能否解鎖智能物聯(lián)新范式?》

    ?在萬(wàn)物互聯(lián)的時(shí)代,邊緣計(jì)算正成為AIoT落地的核心驅(qū)動(dòng)力。 明遠(yuǎn)智睿基于瑞芯微RK3588芯片打造的高性能核心板, 憑借其八核異構(gòu)CPU架構(gòu)(4×Cortex-A76@2.4GHz + 4
    發(fā)表于 04-02 10:26

    【幸狐Omni3576邊緣計(jì)算套件試用體驗(yàn)】人臉識(shí)別

    Omni3576 邊緣計(jì)算套件實(shí)現(xiàn)人臉特征識(shí)別的項(xiàng)目設(shè)計(jì)和部署方案,包括算法介紹、推理測(cè)試、板端部署、程序運(yùn)行和效果展示等,并分析了結(jié)果和
    發(fā)表于 04-01 21:46

    AI SoC# 奕斯偉EIC7700 全球首款基于RISC-V架構(gòu)的邊緣計(jì)算SoC芯片

    EIC7700X是一款性能優(yōu)異的邊緣計(jì)算SoC芯片,搭載64位RISC-V處理器和自研神經(jīng)網(wǎng)絡(luò)計(jì)算單元,
    的頭像 發(fā)表于 03-28 14:23 ?2677次閱讀
    AI <b class='flag-5'>SoC</b># 奕斯偉EIC7700 全球首款基于RISC-V架構(gòu)的<b class='flag-5'>邊緣</b><b class='flag-5'>計(jì)算</b><b class='flag-5'>SoC</b><b class='flag-5'>芯片</b>

    【幸狐Omni3576邊緣計(jì)算套件試用體驗(yàn)】DeepSeek 部署及測(cè)試

    部署的相關(guān)流程,包括模型介紹、部署方案、RKLLM 庫(kù)、編譯和運(yùn)行、效果演示等。通過(guò)板端人工智能大模型
    發(fā)表于 03-21 19:31

    添越智創(chuàng)基于 RK3588 開(kāi)發(fā)板部署測(cè)試 DeepSeek 模型全攻略

    應(yīng)用領(lǐng)域展現(xiàn)出無(wú)可比擬的性能優(yōu)勢(shì)。 八核處理器 :具備強(qiáng)大的并行計(jì)算能力,無(wú)論是復(fù)雜的數(shù)據(jù)處理、高強(qiáng)度的模型運(yùn)算,還是系統(tǒng)資源的合理調(diào)度,都能輕松應(yīng)對(duì),確保開(kāi)發(fā)板在運(yùn)行各類 AI 程序時(shí)流暢穩(wěn)定,毫無(wú)卡
    發(fā)表于 02-14 17:42

    研華邊緣AI Box MIC-ATL3S部署Deepseek R1模型

    隨著深度求索(DeepSeek)大模型的發(fā)布引發(fā)行業(yè)熱議,研華科技基于昇騰Atlas平臺(tái)邊緣AI Box MIC-ATL3S正式發(fā)布與Deepseek R1模型部署流程。該平臺(tái)依托昇
    的頭像 發(fā)表于 02-14 16:08 ?2423次閱讀
    研華<b class='flag-5'>邊緣</b>AI Box MIC-ATL3S<b class='flag-5'>部署</b>Deepseek R1<b class='flag-5'>模型</b>

    AI模型部署邊緣設(shè)備的奇妙之旅:目標(biāo)檢測(cè)模型

    以及邊緣計(jì)算能力的增強(qiáng),越來(lái)越多的目標(biāo)檢測(cè)應(yīng)用開(kāi)始直接在靠近數(shù)據(jù)源的邊緣設(shè)備上運(yùn)行。這不僅減少了數(shù)據(jù)傳輸延遲,保護(hù)了用戶隱私,同時(shí)也減輕了云端服務(wù)器的壓力。然而,在
    發(fā)表于 12-19 14:33

    AI模型部署邊緣設(shè)備的奇妙之旅:如何實(shí)現(xiàn)手寫數(shù)字識(shí)別

    處理,而不必傳輸?shù)酵獠糠?wù)器,這有助于更好地保護(hù)用戶隱私和數(shù)據(jù)安全。 然而,邊緣計(jì)算也帶來(lái)了獨(dú)特的挑戰(zhàn),特別是在資源受限的嵌入式系統(tǒng)中部署復(fù)雜的AI模型時(shí)。為了確保神經(jīng)網(wǎng)絡(luò)
    發(fā)表于 12-06 17:20