Raspberry Pi heeft zijn nieuwste AI-camera onthuld met geïntegreerde Sony IMX500-sensor om on-device machine learning mogelijk te maken voor vision-gebaseerde toepassingen, alles zonder dat er extra accelerators nodig zijn.
Raspberry Pi heeft zijn nieuwste cameramodule uitgebracht, de Raspberry Pi AI Camera, ontworpen om on-device machine learning mogelijkheden direct naar de gebruikers te brengen. De AI-camera is gebouwd rond de Sony IMX500 Intelligent Vision Sensor en integreert een 12,3-megapixel CMOS-sensor met een ingebouwde AI-accelerator. Dankzij dit ontwerp kan de camera inferentietaken uitvoeren, zoals objectdetectie en het inschatten van houding, terwijl er beeldmateriaal of video's worden opgenomen, waardoor de CPU van de Raspberry Pi minder wordt belast.
De Raspberry Pi AI Camera ontlast de hoofd-CPU.
Ik heb al een voorproefje laten zien van dit niet al te goed bewaarde geheim op Embedded World 2024 eerder dit jaar, en nu worden ze officieel verzonden.
Belangrijkste Specificaties van de Raspberry Pi AI Camera
De camera maakt gebruik van Sony's IMX500-sensor, die een 1/2,3-inch sensorformaat heeft met 1,55 μm pixels en een resolutie van 4056 × 3040 pixels. De camera ondersteunt zowel Bayer RAW10 als ISP-uitvoerformaten (YUV/RGB) en heeft ondersteuning voor het bijsnijden van interessegebieden (ROI). Voor beeldverwerking voert de camera tensormetadata uit, waardoor realtime data worden geleverd die AI-toepassingen kunnen gebruiken.
De Sony IMX500 1/2,3-inch sensor
De belangrijke specificaties van de Sony IMX500 1/2,3-inch sensor zijn:
Scherpstelbereik: 20 cm tot ∞, met handmatig instelbare scherpstelling
Framerate: 30 fps in 2 × 2 binned-modus bij een resolutie van 2028 × 1520; 10 fps bij een volledige resolutie van 4056 × 3040
Fysieke afmetingen: 25 × 24 × 11,9 mm3
Bedrijfstemperatuur: 0° C tot 50° C
De voetafdruk en montagelocaties van de Raspberry Pi AI Camera zijn identiek aan die van de Raspberry Pi Camera Module 3, maar hij is iets dieper om plaats te bieden aan de grotere sensor en optische componenten.
Software-integratie en AI-mogelijkheden
De integratie van de AI-camera met het software-ecosysteem van Raspberry Pi is uitgebreid. Tensor-metadata wordt van nature ondersteund door de libcamera- en Picamera2-bibliotheken, waardoor ontwikkelaars eenvoudig AI-functies in hun toepassingen kunnen implementeren. De camera werkt ook met de rpicam-apps softwaresuite, wat het gebruik van AI vereenvoudigt voor minder ervaren gebruikers.
De AI-camera wordt geïnstalleerd met een set softwarepakketten, inclusief firmware en modellen voor de IMX500-sensor. Eenmaal geconfigureerd kunnen gebruikers voorgeïnstalleerde demo's uitvoeren, zoals Mobilenet SSD voor objectdetectie of Posenet voor pose estimatie. Voor ontwikkelaars die hun eigen modellen willen trainen, biedt Raspberry Pi tools om modellen te converteren voor gebruik met de IMX500, waarbij zowel PyTorch- als TensorFlow-omgevingen worden ondersteund.
Toepassingen en gebruikssituaties
De AI-camera opent nieuwe mogelijkheden voor vision-gebaseerde AI-toepassingen, waaronder robotica, automatisering en beveiligingssystemen. De AI-verwerking op het apparaat vermindert de latentie en haalt de rekenlast weg bij de Raspberry Pi zelf, waardoor het een geschikte keuze is voor projecten die real-time inferenties vereisen. De camera zal naar verwachting beschikbaar blijven tot ten minste januari 2028.
De Raspberry Pi AI Camera, met zijn combinatie van hoge-resolutie beeldopname en inferencing aan boord, biedt een praktische oplossing voor gebruikers die machine-learning willen integreren in hun projecten zonder extra hardware accelerators nodig te hebben. De compatibiliteit met alle Raspberry Pi-modellen en de robuuste softwareondersteuning maken het een aantrekkelijke optie voor zowel beginners als gevorderde gebruikers die werken aan AI-gestuurde toepassingen.
Inschrijven
Schrijf u in voor tag alert e-mails over Raspberry Pi!
