Een kosteneffectief beeldverwerkingsbord FWD-RK3588 met een 8-kern 64-bit CPU met een klokfrequentie tot 2,4 GHz

Dit product is een ingebouwde beeldverwerkingskaart die wordt aangedreven door de Rockchip RK3588-processor en hoofdzakelijk bestaat uit twee componenten: een kernverwerkingskaart (SoM) en een interface dragerkaart.De RK3588 is Rockchip's volgende generatie high-end processor.Het is een 8-kern 64-bits CPU met een primaire kloksnelheid van maximaal 2,4 GHz.het leveren van 6 TOPS aan rekenkracht en het ondersteunen van mainstream deep learning frameworks.

Het beeldverwerkingsbord bevat drie video-invoerinterfaces, waaronder twee MIPI CSI-interfaces en één BT.1120 digitale video-interface, waardoor multi-bron high-definition video-opname mogelijk is.Uitgerust met talrijke communicatieinterfaces aan boord, bereikt het paneel een stabiele en efficiënte video-gegevensoverdracht om te voldoen aan de veeleisende eisen van hoogwaardige ingebedde visie-systemen.Het product heeft de kerndriver aanpassing onder de Linux (Ubuntu RootFS) omgeving voltooid, waardoor gebruikers rechtstreeks kunnen doorgaan met de ontwikkeling van de applicatielaag.

Dit product heeft de aanpassing en verificatie voltooid van alle kerndrivers voor randapparatuur op basis van het Linux-systeem (standaard uitgerust met het Ubuntu-bestandsysteem).Gebruikers hoeven zich geen zorgen te maken over complexe low-level drivers en kunnen rechtstreeks applicatie-laagontwikkeling uitvoeren met behulp van standaard systeemoproepen.

• Core Processor Drivers:De power management, clock, interrupt en DMA-controllers van de RK3588 zijn aangepast, waardoor efficiënte planning van de CPU en NPU-verwerkingsvermogen wordt gewaarborgd.

• Video-invoerdrivers:

  • MIPI-driver:De MIPI CSI-2-camera-interface en beeldsensoren zijn aangepast en ondersteunen camera-beeldgegevensopname.

  • BT.1120 Bestuurder:De digitale videoreceiverchip is aangepast om video-gegevens te kunnen verzamelen via de BT.1120-interface.

• Netwerkinterface driver:Adaptieve Gigabit Ethernet, ondersteunt netwerkvideo stream (RTSP) streaming en afstandsbediening.

• Communicatieinterface-drivers:Gebruikers kunnen rechtstreeks controle en gegevensinteractie met externe apparaten bereiken door middel van bestandsoperaties of systeemoproepen.

Het bord integreert twee soorten video-invoerinterfaces om te voldoen aan de verbindingsvereisten van verschillende sensoren:

• MIPI digitale video-invoer:Biedt een standaard V4L2-interface. Gebruikers kunnen beeldframe-gegevens verkrijgen via standaard systeemoproepen zoalsopenenIctl.

• BT.1120 Digitale video-invoer:Biedt een unified video device interface naar de applicatielaag via het V4L2 framework, waardoor een unified software processing mogelijk is.

Integreert een tri-core architectuur NPU die hybride INT4/INT8/INT16/FP16-operaties ondersteunt, die eenvoudig complexe visuele taken zoals objectdetectie, classificatie en tracking verzorgt.Biedt de RKNN Runtime API, die verantwoordelijk is voor het laden van RKNN-modellen, het beheren van input/output en het uitvoeren van inferentieberekeningen op de NPU.

Om gebruikers te helpen snel aan de slag te gaan, geven we bijvoorbeeld het uitvoeren van algoritmen.we zijn niet verantwoordelijk voor de prestaties of de effectiviteit van de algoritmen zelf):

• Object detectie:Biedt een voorbeeld van de implementatie van YOLOv5, dat direct real-time objectdetectie kan uitvoeren op de vastgelegde videostream en outputbegrenzende vakken en categorieën.

• Object Tracking:Integreert relevante tracking-algoritme voorbeelden, waardoor gebruikers een gesloten lus controle op basis van miss afstand gegevens te bereiken.

• Integratie met videostreams:Het voorbeeldprogramma laat zien hoe beeldframes in de NPU worden ingevoerd voor inferentie,en de gevolgtrekkingen (zoals afmetingsvakken) op de uitgangsvideo overleggen via de OSD-functie (On-Screen Display), die een volledige gesloten kring van eind tot eind toepassingen vormt.