ESP32-S3 เป็นโปรเซสเซอร์ wireless ตัวแรกของ Espressif ที่มีคำสั่ง AI และไลบรารี ESP-DL สำหรับ ESP-IDF ช่วยให้คุณใช้ประโยชน์จากคำสั่ง AI เหล่านั้นได้อย่างง่ายดายโดยใช้บอร์ด เช่น ESP32-S3-DevKitC-1
ไลบรารี ESP-DL มี API สำหรับการอนุมาน Neural Network (NN) การประมวลผลภาพ การดำเนินการทางคณิตศาสตร์ และโมเดลการเรียนรู้เชิงลึกที่ใช้ประโยชน์จากคำสั่ง AI ของ ESP32-S3 อย่างเต็มที่ด้วยโมเดลการจดจำใบหน้า 16 บิตที่ทำงานเร็วขึ้น 6.25 ในขณะที่โมเดล 8 บิตนั้นเร็วกว่า 2.5 เท่าโดยไม่เร่งความเร็ว
ไลบรารี ESP-DL สามารถใช้เป็นส่วนประกอบของโปรเจ็กต์ได้ ตัวอย่างเช่น สามารถใช้เป็นโมดูลย่อยของเฟรมเวิร์คคอมพิวเตอร์วิทัศน์ของ ESP-WHO โดยเพียงแค่คัดลอกไปยัง esp-who/components/ directory
Model Zoo มีโมเดลที่ได้รับการฝึกฝนล่วงหน้าหลายแบบสำหรับการตรวจจับและจดจำใบหน้า (มนุษย์) และการตรวจจับใบหน้าของแมว โดยมีการพัฒนามากขึ้นรวมถึงการตรวจจับสีและการตรวจจับท่าทางมือ
Espressif Systems ยังมีเครื่องมือสำหรับใช้แบบจำลองของคุณเอง และเครื่องมือแบบแผนที่ช่วยให้คุณใช้แบบจำลองที่พัฒนาขึ้นสำหรับ TensorFlow, PyTorch, MXNetm และอื่นๆ
อาจมีประสิทธิภาพที่สูงขึ้นในอนาคต นอกเหนือจากการเร่งความเร็วด้วยคำสั่ง SIMD แล้ว ESP-DL จะได้รับการพัฒนาเพิ่มเติมด้วยการโหลดอัตโนมัติ/พรีโหลด รวมถึงการสนับสนุนเอ็นจิ้น DMA เพื่อจัดการข้อมูลได้เร็วขึ้น
คุณจะได้รับคำรหัสตัวอย่างและเอกสาร บน Github ส่วนที่ยุ่งยากคือการได้รับ ESP32-S3 เนื่องจากตอนนี้คุณต้องขอตัวอย่างโดยตรงจากระบบ Espressif โมดูล ESP32-S3 และบอร์ดพัฒนามีกำหนดวางจำหน่ายก่อนสิ้นปีนี้
แปลจากบทความภาษาอังกฤษ : Leverage ESP32-S3 AI capabilities with the ESP-DL library
บรรณาธิการข่าวและบทความภาษาไทย CNX Software ได้มีความสนใจในด้านเทคโนโลยี โดยเฉพาะ Smart Home และ IoT