HUSKYLENS 2 – LLM และกล้อง AI vision ที่ใช้ชิป Kendryte K230 พร้อม AI accelerator 6 TOPS 

DFRobot HUSKYLENS 2 เป็น LLM และกล้อง AI vision ที่ใช้ชิป Kendryte K230 dual-core RISC-V  พร้อม AI accelerator 6 TOPS  โดยออกแบบมาให้ใช้งานง่ายสำหรับเมกเกอร์ ครูผู้สอน ทีมแข่งขัน และผู้ที่สนใจด้าน AI เป็นรุ่นอัปเกรดจาก HUSKYLENS กล้อง AI รุ่นแรกที่เปิดตัวในปี 2019 ซึ่งใช้ชิป Kendryte K210

ตัวกล้องมาพร้อมกับหน่วยความจำ LPDDR4 ขนาด 1GB, eMMC flash 8GB, ช่องใส่ microSD card slot, , เซนเซอร์กล้องความละเอียด 2MP, ขั้วต่อขยายแบบ Gravity 4 พิน และพอร์ต USB-C สำหรับจ่ายไฟและเชื่อมต่อโปรแกรม นอกจากนี้ HUSKYLENS 2 ยังมาพร้อมโมเดล AI สำเร็จรูปกว่า 20 แบบ เช่น การติดตามวัตถุ การจดจำมือ และการแบ่งส่วนวัตถุ (instance segmentation) โดยผู้ใช้ยังสามารถฝึกและนำโมเดล AI ของตนเองมาใช้งานได้ผ่านฟีเจอร์ self-learning classifier อีกด้วย

Huskylens 2 6 TOPS Edge AI camera

สเปคของ HUSLYLENSE 2 :

  • SoC – Kendryte K230
    • CPU
      • โปรเซสเซอร์ RISC-V แบบ 64 บิต ความเร็ว 1.6GHz รองรับ RVV 1.0
      • โปรเซสเซอร์ RISC-V แบบ 64 บิต ความเร็ว 800MHz
    • AI Accelerator – รองรับสูงสุด 6 TOPS
    • DPU – ใช้เทคโนโลยี 3D structured light สำหรับคำนวณความลึก ความละเอียดสูงสุด 1280×800 @ 30fps
    • VPU – รองรับการเข้ารหัส/ถอดรหัสวิดีโอ H.264/H.265/JPEG/MJPEG ได้สูงสุดถึง 4Kp40/4Kp20
  • หน่วยความจำระบบ – LPDDR4 1GB
  • ที่เก็บข้อมูล
    • eMMC ขนาด 8GB
    • ช่องใส่การ์ด microSD
  • จอแสดงผล – หน้าจอสัมผัส IPS ขนาด 2.4 นิ้ว ความละเอียด 640×480 พิกเซล
  • กล้อง – เซนเซอร์ภาพ GC2093 ความละเอียด 2MP (ขนาด 1/2.9″) เลนส์สามารถเปลี่ยนได้ และมีตัวเลือกเลนส์ไมโครสโคปเสริม
  • เสียง – ไมโครโฟนแบบซิลิกอนชนิดคาปาซิทีฟ และลำโพงขนาด 1W
  • การเชื่อมต่อเครือข่าย – รองรับโมดูล WiFi 6 ความถี่ 2.4GHz แบบเสียบเสริม
  • พอร์ต USB – พอร์ต USB 2.0 Type-C
  • การขยาย – ขั้วต่อ Gravity 4 พิน (I2C หรือ UART)
  • อื่น ๆ
    • ปุ่มฟังก์ชัน
    • 2x ไฟ LED
    • 1x ไฟ RGB LED
  • แหล่งจ่ายไฟ  – 3.3V ถึง 5V
  • การใช้พลังงาน – 1.5 ถึง 3 วัตต์
  • ขนาด – 70 x 58 x 19 มิลลิเมตร

Huskylens 2 Grove USB C connectors

ขั้วต่อ Gravity 4 พิน ที่รองรับการสื่อสารแบบ UART และ I2C พร้อมตัวอย่างโค้ด DFRobot ระบุว่า HUSKYLENS 2 สามารถใช้งานร่วมกับ Arduino, BBC micro:bit, ESP32, Raspberry Pi, UNIHIKER, และอุปกรณ์อื่น ๆ ได้อย่างสมบูรณ์ เหมาะสำหรับงานหุ่นยนต์, ระบบอัตโนมัติ และการเรียนรู้ด้าน STEM

ในด้านซอฟต์แวร์ นอกจากโมเดล AI ที่ติดตั้งมาแล้วกว่า 20 แบบ ฟังก์ชัน Model Context Protocol (MCP) ยังช่วยให้ HUSKYLENS 2 เชื่อมต่อการจดจำภาพในเครื่องเข้ากับโมเดลภาษาขนาดใหญ่ (LLM) ได้ ตัวอย่างเช่น กล้องสามารถประมวลผลภาพอาหารกลางวันของคุณ แล้วให้ข้อมูลโภชนาการพร้อมคำแนะนำด้านโภชนาการเฉพาะบุคคลได้ ผู้ใช้ยังสามารถฝึกโมเดลวิชัน AI ของตนเองด้วย YOLO และส่งวิดีโอแบบเรียลไทม์ผ่านพอร์ต USB-C หรือโมดูล WiFi เสริมได้อีกด้วย โดยสามารถดูรายละเอียดและขั้นตอนการเริ่มต้นใช้งานเพิ่มเติมได้จาก wiki ของ DFRobot 

Kendryte K230 Edge AI camera 20 preloaded models
โมเดล AI ที่ติดตั้งมาให้ล่วงหน้า 20 แบบ
Face recognition with person name
การจดจำใบหน้าพร้อมชื่อบุคคล

นี่ไม่ใช่อุปกรณ์ตัวแรกที่ใช้ชิป Kendryte K230 เพราะก่อนหน้านี้ได้มีการเปิดตัว CanMV-K230 บอร์ดพัฒนา Edge AI ในเดือนตุลาคม 2023 และ Banana Pi BPI-CanMV-K230D-Zero ในปี 2024 มาแล้ว แต่ HUSKYLENS 2 ถือเป็นอุปกรณ์ที่สมบูรณ์พร้อมใช้งานมากกว่า และน่าจะใช้งานได้ง่ายกว่า เนื่องจากทางบริษัทได้พัฒนาด้านซอฟต์แวร์มาอย่างครบถ้วน

วิธีที่ดีที่สุดในการทำความเข้าใจความสามารถของกล้อง HUSKYLENS 2 Edge AI คือการชมวิดีโอสั้นที่แสดงฟีเจอร์หลักพร้อมตัวอย่างการทำงานหลายแบบ ซึ่งจะเห็นศักยภาพของอุปกรณ์ได้ชัดเจน

กล้อง HUSKYLENS 2 LLM และ AI Vision วางจำหน่ายแล้วบนเว็บไซต์ DFRobot ในราคา  $74.90 (~2,400฿) ส่วนร้านค้า Amazon ของบริษัท store ยังไม่มีการเพิ่มรุ่นใหม่นี้ในรายการสินค้าในขณะนี้

แปลจากบทความภาษาอังกฤษ : HUSKYLENS 2 – A 6 TOPS LLM and AI vision camera with self-learning capabilities

Subscribe
Notify of
guest
0 Comments
Oldest
Newest Most Voted
Inline Feedbacks
View all comments
โฆษณา