نوآوری و پیشرفت تراشه های هوش مصنوعی داخلی: فرصت ها و چالش ها در عصر انتهای محوطه

پس از انفجار مدل های بزرگ هوش مصنوعی، محاسبات دیگر به ابر محدود نمی شوند؛ الگوریتم های هوشمندانه تر و هوشمندانه تر در حال حاضر به صورت محلی در دستگاه های لبه ای اجرا می شوند.دوربین های هوشمند شکل و رفتار انسان را تشخیص می دهند، ترمینال های داخل خودرو رانندگی را در زمان واقعی نظارت می کنند، دوربین های صنعتی نقص ها را به طور خودکار تشخیص می دهند و جاروبرقی های رباتیک اهداف را در حالت آفلاین شناسایی می کنند.و قوی ترین میدان نبرد جایگزین خانه، به فروشندگان SoC داخلی پنجره ای در پردازش چند رسانه ای و هوش مصنوعی می دهد.

به طور دقیق، بازار هوش مصنوعی لبه به بخش های ترمینال لبه و سرور لبه تقسیم می شود. سرورهای لبه بزرگ، گران قیمت و محاسبات بالا هستند و به پارک های هوشمند و گره های لبه کارخانه خدمت می کنند.ترمینال های لبه ای (که در این مقاله مورد توجه قرار می گیرند) دارای حجم جرم هستندآنها محیط را حس می کنند و فیلم / صدا را در محل پردازش می کنند، عملکردهای AI را ارائه می دهند و سخت افزار را تقویت می کنند.

کدام دستگاه ها به عنوان ترمینال های لبه ای محسوب می شوند؟ دوربین های هوشمند (IPC، زنگ درب هوشمند، دوربین های داشبورد) ، دوربین های بینایی صنعتی و ترمینال های QC، ماژول های داخل خودرو (AVM، DMS، DVR، کمک ADAS) ،کیوسک های خرده فروشی خود سرویس، دستگاه های خانه هوشمند (اسپیکرها، جاروبرقی ها، کنترل دستگاه ها) و گره های لبه شهر هوشمند باید پردازش را به صورت محلی اجرا کنند.

تراشه های هوش مصنوعی دو مسیر را دنبال می کنند: یک SoC با NPU ساخته شده برای هوش کامل کم هزینه و کم مصرف، یا یک شتاب دهنده هوش مصنوعی جداگانه که محاسبات را برای نتیجه گیری حرفه ای چند مدل و سنگین اضافه می کند.

SoC (سیستم روی تراشه) یکپارچه سازی CPU، GPU، AI، ویدئو، صوتی و وسایل محیطی در یک قالب است.

Rockchip RK3576 ، یک SoC AI کناری عمومی: CPU 8 هسته ای (4 × A72 + 4 × A53) ؛ 6-TOPS NPU (INT4/8/16 ، FP16) ؛ GPU Mali-G52؛ 8-K decode ، 4-K encode؛ چند MIPI-CSI برای چند دوربین ، چند صفحه نمایش (DSI),هدف ها تبلت های صنعتی، دوربین های هوش مصنوعی، DVR خودرو، دید روبات است.

HiSilicon Hi3403V100 AI-ISP (بهبودی تصویر + بهینه سازی مشترک AI) را ترکیب می کند. یک SoC pro-vision با quad A55 ، 10-TOPS NPU که به شدت با ISP ادغام شده است. ISP با مشخصات بالا در پس زمینه و کم نور برجسته است.ورودی و خروجی ویدئویی چندگانه 4K· بهره وری بالا برای شناسایی و ردیابی.

چگونگی تقسیم وظایف به طور کارآمد بین CPU، GPU، NPU و شتاب دهنده ی جداگانه ◄ پیش پردازش بر روی GPU/CPU، نتیجه گیری بر روی NPU/ شتاب دهنده، پس پردازش بر روی CPU ◄ چالش اصلی عملکرد است.از این رو شتاب دهنده های هوش مصنوعی متولد شدند.، اختصاص داده شده به استنتاج و به SoC اصلی از طریق PCIe متصل است. SoC برنامه ریزی سیستم، ویدیو، گرافیک، UI را مدیریت می کند؛ شتاب دهنده مدل ها را اجرا می کند و محاسبات هوش مصنوعی را تامین می کند.

Rockchip RK1820، یک NPU coprocessor برای هوش مصنوعی لبه با عملکرد بالا، به عنوان مغز دوم عمل می کند. 20-TOPS NPU، اجرای مدل مستقل، INT8/16/FP16؛جفت با RK3576/3588 از طریق PCIe برای نتیجه گیری بالاتر.

در هوش مصنوعی کناری، TOPS، هسته های CPU و گره های فرآیند اهمیت دارند، اما زنده ماندن به انتخاب مسیر درست بستگی دارد.

هدف راک چیپ سریع ترین چیپ نیست بلکه غنی ترین اکوسیستم است.
نردبان محاسبات کامل: RV1103/1106 برای دوربین های سبک؛ RV1126/1109 برای پیش فرض امنیتی؛ RK3576 برای ترمینال های متوسط / بالا؛ RK3588 برای لبه پرچمدار؛ RK3688 برای هسته محاسبات پیشرفته نسل بعدی.این ماتریس پایه ی جهانی برای تجهیزات خانگی از IPC با قدرت کم تا دروازه های صنعتی است.، عینک های AR، روبات ها، جعبه های آموزشی، DMS/CMS خودرو.
لبه تکنولوژی: چند رسانه ای متعادل + ISP + AI؛ کدک های قوی، ISP و زنجیره ابزار RKNN بالغ. استراتژی پوشش کامل صحنه است، نه یک نقطه پیشرفت.

نه برای مدل های بزرگ بلکه برای دستگاه های بزرگ اینترنت اشیا و مصرف کنندگان.
موقعیت: کم مصرف، حجم بالا، حساس به هزینه ها. بلندگوهای هوشمند (حمایت I2S / PDM / مایک غنی) ، دوربین های هوش مصنوعی لایت، کنترل دستگاه های کوچک، ترمینال های TTS / صوتی. V853/V831: SoC هوش مصنوعی فوق العاده سبک.سری R: کنترل MCU-SoC. همه برنده ها دنبال سناریوهای 10 میلیون واحد هستند، نه TOPS.

رهبر جهانی در جعبه های OTT و SoC های تلویزیون هوشمند
موقعیت: هاب رسانه های خانگی + دستگاه هوشمند مصرف کننده. هوش مصنوعی یک تقویت کننده است؛ نقاط قوت اصلی رمزگشایی ویدیو، HDR، همگام سازی A / V، اکوسیستم تلویزیون / OTT است. قوی در پروژکتورهای هوشمند، میله های کنفرانس،AIOهای سرگرمی خانگی.

تقریباً به طور انحصاری دوربین های نظارتی.
موقعیت: SoC اختصاص داده شده به امنیت. نقاط قوت: ISP قوی، فشرده سازی قوی، کنترل دقیق هزینه ها، هماهنگی نزدیک با اکوسیستم های Hikvision / Dahua. پرچمداران: FH8856 ، FH8852.فولهن عميقي به يه مسير نظارتی بزرگ مي گرده، در ثبات و هزینه برنده می شود.

مبتنی بر MIPS، پوشیدنی ها و خانه های هوشمند.
موقعیت: دستگاه های هوشمند با وزن پر، بسته های کوچک. برنامه ها: زنگ درب هوشمند، IPC سبک، ساعت های بچه ها، گره های لبه کوچک. ویژگی ها: کمترین قدرت، ادغام بالا، اثر کوچک.سری AISoC برای نتیجه گیری بینایی نور.

برای دو سال همه صحبت ها درباره TOPS3، 6، 12 بود، چون اگر اعداد بزرگتر به تراشه های بهتر معادل باشند. مهارت های اصلی هرگز TOPS خام نیستند؛ این "ماتریس رابط + تناسب سناریو" است.

در دوربین های امنیتی، دوربین های صنعتی، زنگ های درب هوشمند، DMS / ADAS خودرو، آنچه مهم است: پورت های دوربین کافی؟ (MIPI-CSI، DVP) ، چند جریان ویدیویی؟ کد گذاری زمان واقعی؟ (H.264/H.265/8K/4K)کیفیت تنظیم ISPدر صنعت DTU، دروازه هوشمند، ربات، سناریوهای انرژی، دستگاه های محیطی TOPS را مغلوب می کنند: دو GbE / 2.5G / RGMII / SGMII، RS232 / 485 / CAN / UART، Wi-Fi / BT، ماژول های 4G / 5G، چند USB / SPI / I2C.در پانل های کنترل هوشمند، نمایشگرهای اتومبیل، AR / VR، POS هوشمند، تغییر اولویت به پورت های نمایش (MIPI-DSI، HDMI، eDP) ، پشتیبانی از چند صفحه نمایش، عملکرد UI (GPU / گرافیک) ، با هوش مصنوعی به عنوان دستیار، نه ستاره.

کلمات کلیدی بازار خودرو: مقاومت در برابر شوک، نوسان ولتاژ، -40-85 °C، عمر eMMC، CSI چندگانه برای DMS/OMS/ADAS، تاخیر ویدیویی در سطح ms.

هوش مصنوعی کناری بهترین مسیر برای تراشه های خانگی است؛ فرصت از انباشت TOPS نیست بلکه از دانستن صحنه و گرفتن تقاضا است.و دستگاه های خانگی مرحله ای خواهد بود که تراشه های داخلی خود را ثابت می کنند..