เทคโนโลยี Arm neural จะเพิ่ม Neural/AI accelerators เข้าไปใน GPU ของ Arm ที่จะเปิดตัวในปี 2026 และหลังจากนั้น เพื่อช่วยลดภาระงานของ GPU ได้มากถึง 50% สำหรับเกมบนมือถือและแอปพลิเคชันที่ใช้กราฟิกขั้นสูง
แอปพลิเคชันแรกมีชื่อว่า Arm Neural Super Sampling (NSS) ซึ่งเป็นการประยุกต์ใช้ AI Super Resolution สำหรับเกม โดยแทนที่จะอัปสเกลวิดีโอ AI accelerator จะทำการอัปสเกลกราฟิก เพื่อลดการใช้แบนด์วิดท์และเพิ่มอัตราเฟรมเรต (หรือช่วยลดการใช้พลังงาน) โดยไม่กระทบต่อคุณภาพของการเรนเดอร์ ชมวิดีโอตัวอย่างด้านล่าง ซึ่งเป็นภาพที่ GPU เรนเดอร์ที่ความละเอียด 540p แล้วใช้เทคโนโลยี Arm Neural อัปสเกลเป็น 1080p โดยไม่มีข้อบกพร่องที่เห็นได้ชัด
ตัวอัปสเกลจะทำให้เกิดความหน่วงเล็กน้อย แต่เพียงประมาณ 4 มิลลิวินาทีต่อเฟรมในสภาวะประสิทธิภาพต่อเนื่อง ตามที่อธิบายไว้ใน technical blog เกี่ยวกับการเปิดตัว Arm Neural และ NSS:
เราสมมติว่าเป้าหมายการเร่งด้วย Neural สามารถทำได้ถึง 10 TOP/s ต่อวัตต์ ที่ความถี่สัญญาณนาฬิกาของ GPU ที่คงที่
เราตั้งเป้า ≤4 มิลลิวินาทีสำหรับการอัปสเกลต่อเฟรมในสภาวะประสิทธิภาพต่อเนื่อง โดยขั้นตอน Shader ก่อนและหลังการประมวลผลด้วย AI inference ใช้เวลาประมาณ 1.4 มิลลิวินาทีบน GPU ความถี่ต่ำ ภายใต้งบเวลานี้ NSS ต้องใช้ไม่เกินประมาณ 27 GOPs เครือข่ายการคาดการณ์พารามิเตอร์ของเราใช้ประมาณ 10 GOPs ซึ่งอยู่ในช่วงที่กำหนดได้อย่างสบาย แม้ในกรณีที่ตัวเร่ง Neural accelerator มีประสิทธิภาพเพียง 40%
ข้อมูลการจำลองในระยะแรกแสดงให้เห็นว่า NSS ใช้เวลาประมาณ 75% ของระยะเวลาทำงานของ Arm ASR ในการอัปสเกล 1.5× (โหมดสมดุล) และคาดว่าจะมีประสิทธิภาพดีกว่า Arm ASR ในการอัปสเกล 2× (โหมดสมดุล) โดยการเพิ่มประสิทธิภาพมาจากการแทนที่เฮอริสติกส์ที่ซับซ้อนด้วยกระบวนการ inference ที่เรียบง่ายขึ้น
ASR หมายถึงเทคโนโลยี “Arm Accuracy Super Resolution (ASR)” ที่เปิดตัวเมื่อปีที่แล้ว
แม้ฮาร์ดแวร์ GPU ที่ใช้ Arm Neural จะยังต้องรออีกประมาณหนึ่งปีจึงจะพร้อมใช้งาน แต่ผู้พัฒนาก็สามารถเริ่มทำงานกับเทคโนโลยีนี้ได้แล้ว เนื่องจากบริษัทได้เปิดตัวชุดพัฒนา Neural Graphics ที่ออกแบบมาเพื่อผสานการเรนเดอร์ด้วย AI เข้ากับเวิร์กโฟลว์ที่มีอยู่ ชุดพัฒนานี้ประกอบด้วย
- ปลั๊กอินสำหรับ Unreal Engine
- การจำลอง Vulkan บนพีซี
- เครื่องมือโปรไฟล์ที่อัปเดตแล้ว
- โมเดลแบบเปิดทั้งหมดที่มีให้ผ่าน GitHub และ GitHub
- ส่วนขยาย Arm ML สำหรับ Vulkan – แนะนำ “Graph Pipeline” ที่ออกแบบมาโดยเฉพาะสำหรับการประมวลผลด้วย neural network
ชุดพัฒนานี้ได้รับการสนับสนุนผ่านพันธมิตร ซึ่งรวมถึง Enduring Games, Epic Games (Unreal Engine), NetEase Games, Sumo Digital, Tencent Games และ Traverse Research คุณสามารถค้นหาทรัพยากรทั้งหมดสำหรับเริ่มต้นได้ที่หน้าสำหรับนักพัฒนา
แปลจากบทความภาษาอังกฤษ : Arm neural technology to add AI acceleration to Arm GPUs, enable “Neural Super Sampling” for lower bandwidth/higher FPS
บรรณาธิการข่าวและบทความภาษาไทย CNX Software ได้มีความสนใจในด้านเทคโนโลยี โดยเฉพาะ Smart Home และ IoT