เราเคยได้เขียนบทความเกี่ยวกับ Raspberry Pi ได้จัดแสดง Raspberry Pi Zero 2W พร้อมกล้อง Raspberry Pi AI Camera ที่ใช้เซนเซอร์ Sony IMX500 intelligent vision ในงาน Embedded World 2024 แต่ในขณะนั้นยังไม่มีวางจำหน่าย และตอนนี้กล้อง AI Camera ของ Raspberry Pi วางจำหน่ายแล้ว
และต่อมาได้มีการเปิดตัว Raspberry Pi AI Kit ที่ทรงพลังยิ่งขึ้น ซึ่งออกแบบมาสำหรับ Raspberry Pi 5 โดยมาพร้อมกับ Hailo-8L NPU 13 TOPS ที่เชื่อมต่อผ่าน PCIe, ส่วนกล้อง AI Camera ที่ใช้เซนเซอร์ Sony IMX500 และมีไมโครคอนโทรลเลอร์ Raspberry Pi RP2040 ช่วยจัดการ Neural Network และเฟิร์มแวร์ แม้จะมีประสิทธิภาพน้อยกว่า แต่ก็ยังสามารถทำงานหลายอย่างได้ เช่น การตรวจจับวัตถุและจำแนกร่างกาย และสามารถใช้งานได้กับ Raspberry Pi SBC ทุกรุ่นที่มีตัวเชื่อมต่อ MIPI CSI ในขณะที่ AI Kit สามารถใช้งานได้เฉพาะกับบอร์ด Pi 5 รุ่นล่าสุดเท่านั้น
สเปคของ Raspberry Pi AI Camera:
- เซนเซอร์ Sony IMX500 Intelligent Vision ความละเอียด 12 MP
- โหมดเซนเซอร์: 4056×3040 ที่ 10fps, 2028×1520 ที่ 30fps
- ขนาดเซลล์ 1.55 µm × 1.55 µm
- เลนส์มุมมองกว้าง 78 องศาพร้อมเลนส์ที่ปรับโฟกัสด้วยมือได้
- ไมโครคอนโทรลเลอร์ Raspberry Pi RP2040 ในตัวสำหรับจัดการ neural network และเฟิร์มแวร์
- หน่วยความจำแฟลช 16MB สำหรับแคชรุ่นล่าสุด
- สายแพ (flat cable) 20ซม.
Raspberry Pi RP2040 ใช้เพื่อถ่ายโอนเฟิร์มแวร์และโมเดล neural ไปยังเซนเซอร์ของ Sony ซึ่งทำหน้าที่หนักด้วยเซนเซอร์ภาพแบบ Bayer ที่คล้ายกับที่ใช้ใน Raspberry Pi Camera Module 3 ซึ่งจะป้อนภาพเข้าสู่ตัวประมวลผลภาพ Image Signal Processor (ISP) ในตัวเพื่อทำการประมวลผลพื้นฐาน ก่อนที่จะถูกส่งไปยัง AI accelerator บนกล้อง จากนั้นผลลัพธ์จะถูกส่งต่อไปยัง Raspberry Pi พร้อมกับข้อมูลภาพผ่านทาง CSI-2 camera bus
ด้านซอฟต์แวร์ กล้องนี้เข้ากันได้กับ official Raspberry Pi camera frameworks ได้แก่ Picamera2 และ rpicam-apps วิดีโอด้านล่างแสดงโมเดล neural network การตรวจจับวัตถุด้วย MobileNet SSD ที่ทำงานภายใต้ rpicam-apps โดยรันที่ประมาณ 30 FPS ที่ความละเอียด 1920×1080 การสาธิตนี้ทำบน Raspberry Pi 4 แต่มีข้อมูลว่า ประสิทธิภาพการประมวลผล inferencing จะเหมือนกันแม้จะใช้กับ Raspberry Pi Zero รุ่นที่มีสเปคต่ำ
มีเอกสารเพื่อจำลองการสาธิตด้วยตัวคุณเอง ผู้ใช้งานขั้นสูงมีเว็บไซต์ไซต์นักพัฒนา AITRIOS ของ Sony โดยมีรายละเอียดทางเทคนิคเพิ่มเติมเกี่ยวกับเซนเซอร์ IMX500 และเครื่องมือต่างๆ เช่น IMX500 Converter และ IMX500 Package ซึ่งจะมีประโยชน์สำหรับการรันเครือข่ายที่ผ่านการฝึกฝนเองบนกล้อง AI โดยใช้เฟรมเวิร์กเช่น TensorFlow หรือ PyTorch
ถ้าคุณมี Raspberry Pi 5 คุณจะต้องตัดสินใจว่าจะใช้ AI Kit (ไม่รวมกล้อง) หรือ AI camera ซึ่งทั้งสองมีราคาที่ใกล้เคียงกัน, AI Kit จะมีประสิทธิภาพมากกว่า แต่ถ้ายังไม่มีกล้อง Raspberry Pi, AI camera จะเป็นตัวเลือกที่ถูกกว่า นอกจากนี้กล้องยังมีประโยชน์ถ้าใช้อินเทอร์เฟส PCIe สำหรับ NVMe SSD หรืออุปกรณ์ PCIe อื่นๆ และไม่ต้องการเพิ่ม HAT พร้อมสวิตช์ PCIe เช่น HatBRICK! Commander สำหรับ Raspberry Pi รุ่นอื่นๆ, AI camera จะเป็นตัวเลือกที่ดีที่สุด และสำหรับในประเทศไทยสามารถซื้อได้ที่ Cyrton Marketplace ราคา 2,990฿ แต่ขณะนี้สินค้าหมดสต็อก
เราจะได้รับตัวอย่าง Raspberry Pi AI Camera เพื่อมารีวิวในเร็วๆ นี้ สามารถอ่านรายละเอียดเพิ่มเติมได้ในประกาศและหน้าผลิตภัณฑ์
แปลจากบทความภาษาอังกฤษ : Raspberry Pi AI Camera with Sony IMX500 AI sensor and RP2040 MCU launched for $70
บรรณาธิการข่าวและบทความภาษาไทย CNX Software ได้มีความสนใจในด้านเทคโนโลยี โดยเฉพาะ Smart Home และ IoT