Test porównawczy przetwarzania brzegowego 3TOPS | Pełna analiza serii Rockchip RV1126

Rockchip stworzył kompleksowe portfolio układów do przetwarzania wizualnego, obejmujące zakres od 0,5T do 6T, obejmujące wszystko, od podstawowych inteligentnych kamer po zaawansowane systemy wizji przemysłowej. Wyjątkowym elementem w tej ofercie jest seria RV1126, a konkretnie RV1126B i RV1126B-P. Te warianty są szeroko stosowane w inteligentnych systemach bezpieczeństwa (IPC, inteligentne dzwonki do drzwi, kamery samochodowe), wizji przemysłowej (kamery fabryczne, sprzęt inspekcyjny), inteligentnych zastosowaniach motoryzacyjnych i domowych, inteligentnych miastach i scenariuszach AI na brzegu. RV1126B, z mocą obliczeniową 3TOPS, dostosowaną architekturą AI-ISP, dynamicznym łączeniem obrazów, stabilizacją, zaawansowanym kodowaniem i zabezpieczeniami na poziomie sprzętowym, zapewnia wysokowydajne rozwiązania, które ulepszają urządzenia AIoT od zwykłego „widzenia” do prawdziwego „rozumienia”.

RV1126B-P to wariant RV1126B zoptymalizowany pod kątem kosztów i obudowy, zachowujący pełną moc obliczeniową rdzenia (CPU/GPU/VPU/NPU), jednocześnie redukując piny, usuwając USB 3.0 i przycinając interfejsy pomocnicze (CAM_CLK/SARADC) w celu obniżenia kosztów. Jest przeznaczony dla aplikacji o niskiej pamięci masowej i małej przepustowości, takich jak kamery samochodowe i urządzenia DMS. Kluczowe zalety to:

• Kompatybilność Pin-to-Pin: Bezpośredni zamiennik dla RV1126 bez konieczności przeprojektowywania sprzętu
• Ta sama wydajność rdzenia: Odpowiednik mocy obliczeniowej, ISP i możliwości AI jak RV1126B
• Płynne aktualizacje: Minimalne zmiany oprogramowania wymagane dla istniejących produktów opartych na RV1126 w celu osiągnięcia wydajności na poziomie RV1126B

To sprawia, że RV1126B-P jest idealnym ulepszeniem typu drop-in dla producentów, którzy chcą ulepszyć produkty przy minimalnych nakładach na badania i rozwój.

RV1126B, zbudowany na czterordzeniowej architekturze Cortex-A53 (1,5 GHz), integruje własny NPU Rockchip o mocy 3TOPS. Obsługuje kwantyzację W4A16/W8A16 o mieszanej precyzji i akcelerację zoptymalizowaną pod kątem Transformer, umożliwiając wydajne wykonywanie na urządzeniu dużych modeli i modeli multimodalnych z parametrami do 2B.

Do obrazowania posiada dedykowany silnik AI-ISP z technologią AI Remosaic do „adaptacyjnego obrazowania dzień-noc”, osiągając wyraźne obrazowanie w warunkach bardzo słabego oświetlenia (0,01Lux). Rozwiązuje to problemy z szumami w nocy i w połączeniu ze stabilizacją cyfrową 6-DOF i dynamicznym łączeniem obrazów z dwóch/czterech kamer zapewnia stabilny i szerokokątny obraz nawet w ruchu.

Na poziomie systemu, architektura niskiego poboru mocy RV1126B AOV3.0 redukuje pobór mocy w trybie czuwania do 1mW. Obsługuje całodobowe wybudzanie dźwiękiem anomalii (np. szczekanie, pękanie szkła, strzały), równoważąc oszczędność energii z powiadomieniami w czasie rzeczywistym. Zintegrowany silnik Super Encoding Engine redukuje przepływność o 50% bez utraty przejrzystości, obniżając koszty transmisji i przechowywania.

Dla bezpieczeństwa oferuje szyfrowanie SM2/SM3/SM4, izolację TrustZone i system zarządzania kluczami, zapewniając kompleksową ochronę od przechwytywania danych po wnioskowanie.

• Konfiguracja rdzenia: Czterordzeniowy ARM Cortex-A53, architektura 64-bitowa, obsługuje zestaw instrukcji ARM v8-A.

• Specyfikacja pamięci podręcznej: 32KB L1 I-Cache + 32KB L1 D-Cache na rdzeń, ze współdzieloną pamięcią podręczną L2 o pojemności 512KB.

• Rozszerzone funkcje: Zintegrowany Neon Advanced SIMD i FPU, obsługuje technologię TrustZone.

• Konfiguracja rdzenia: Czterordzeniowy ARM Cortex-A7, architektura 32-bitowa, obsługuje zestaw instrukcji ARM v7-A, ze zintegrowanym Neon Advanced SIMD i FPU.

• Specyfikacja pamięci podręcznej: 32KB L1 I-Cache + 32KB L1 D-Cache na rdzeń, ze współdzieloną ujednoliconą pamięcią podręczną L2 o pojemności 512KB.

• Moc obliczeniowa: 3,0 TOPs INT8 (obsługiwana optymalizacja rzadka), kompatybilna z operacjami INT4/INT8/INT16/FP16.
• Wsparcie dla frameworków: TensorFlow, Caffe, Tflite, Pytorch, Onnx NN, Android NN itp.

• Moc obliczeniowa i precyzja: 2,0 TOPs z operacjami hybrydowymi INT8/INT16, obsługującymi konwolucję liczb całkowitych 8/16-bitowych.
• Kompatybilność z frameworkami: TensorFlow, TF-lite, Pytorch, Caffe, ONNX, MXNet, Keras, Darknet itp., z obsługą interfejsu API OpenVX.

• Silnik graficzny 2D (RGA)
• Obsługiwane formaty danych:
  • Wejście: Formaty serii ARGB/RGB/YUV (w tym pakowanie TILE4X4)
  • Wyjście: ARGB/RGB/YUV420/422 i inne formaty 8-bitowe
• Główne funkcje:
  • Skalowanie: skalowanie niecałkowite od 1/16× do 16× (downsampling ze średnią/filtrowaniem dwuliniowym, upsampling z filtrowaniem dwusześciennym)
  • Obrót: 0/90/180/270 stopni z odbiciem lustrzanym
  • Dodatkowe: mieszanie alfa, wypełnianie kolorem, nakładka OSD
• Limity rozdzielczości:
  • Maks. wejście: 8192×8192
  • Maks. wyjście: 4096×4096

Zarówno RV1126, jak i RV1126B obsługują kodowanie i dekodowanie wideo H.265/H.264, umożliwiając wydajną kompresję, przechowywanie i transmisję wideo 4K UHD. RV1126B obsługuje w szczególności kodowanie wielostrumieniowe, z wbudowanym inteligentnym silnikiem kodowania dla kodowania ultra-HD z prędkością do 8 MP przy 45 FPS. Posiada również dynamiczną regulację przepływności, redukując przepływność nawet o 50% w porównaniu do tradycyjnego trybu CBR.

Zarówno RV1126B, jak i RV1126 oferują różnorodne interfejsy audio, pamięci masowej i peryferyjne oraz obsługują wysokowydajną zewnętrzną pamięć DRAM, aby zaspokoić podstawowe potrzeby multimedialne i rozbudowy peryferyjne.

RV1126B i RV1126 integrują moduły funkcjonalne na poziomie systemu, takie jak RTC, POR, RMI Ethernet PHY i kodeki audio. RV1126 obsługuje 12Kbit pamięci jednorazowo programowalnej (OTP) do unikalnej identyfikacji i bezpiecznego przechowywania. RV1126B wprowadza AI-ISP, który może współpracować z NPU, podczas gdy RV1126 nie obsługuje AI-ISP.

RV1126B i RV1126B-P obsługują dwukanałowy CANFD, co sprawia, że nadają się do zastosowań motoryzacyjnych i przemysłowych. RV1126B obsługuje USB 3.0, podczas gdy RV1126B-P i RV1126 obsługują tylko USB 2.0.

Seria RV1126B, wdrożona w wielu branżach, z mocą AI 3TOPS i architekturą AI-ISP, jest szeroko stosowana w IPC, inteligentnych dzwonkach do drzwi i kamerach AI PTZ. Jej wysoka integracja i niskie zużycie energii ulepszają nagrywanie wideo do inteligentnej analizy.