กูเกิลโชว์ AI ตัดฉากหลังใน Google Meet รันบนเบราว์เซอร์แต่ยังทำเฟรมเรตเกิน 30fps

กูเกิลรายงานถึงโมเดลปัญญาประดิษฐ์เบื้องหลังฟีเจอร์เบลอฉากหลังหรือเปลี่ยนภาพฉากหลังใน Google Meet ที่ใช้ปัญญาประดิษฐ์จับภาพว่าตรงไหนเป็นเบื้องหน้าและตรงไหนเป็นฉากหลัง

โมเดลที่ใช้ตั้งต้นเป็น MobileNetV3-small สร้าง encoder รับภาพ และโมเดลขนาดเท่ากันแต่กลับข้างสร้างเอาท์พุต โดยรวมมีพารามิเตอร์เพียง 193,000 พารามิเตอร์เท่านั้น แต่ละพารามิเตอร์ใช้ข้อมูลแบบ float16 ทำให้ขนาดโมเดลรวมไม่ถึง 400KB

ตัวปัญญาประดิษฐ์มีหน้าที่แยกฉากหลังออกมาเท่านนั้น จากนั้นต้องใช้ฟิลเตอร์เบลอขอบภาพเพื่อให้ใบหน้าคนในวิดีโอกลมกลืนกับฉากหลังที่เป็นภาพวางลงไป หรือหากผู้ใช้เลือกเบลอฉากหลังก็ต้องนำภาพฉากหลัง

โมเดลปัญญาประดิษฐ์ที่ใช้ตัดฉากหลังจริงๆ แล้วมีสองความละเอียด คือ 256×144 และ 160×27 เพื่อให้กระบวนการประมวลผลภาพทั้งหมดยังสามารถประชุมวิดีโอที่เฟรมเรต 30 เฟรมต่อวินาทีได้ กูเกิลแสดงให้เห็นว่าแม้แต่ Chromebook รุ่นราคาถูกเช่น Acer Chromebook 11 ที่ใช้ซีพียู Intel N3060 ก็ยังประมวลผลภาพทั้งหมดได้ภายใน 30ms หรือเฟรมเรต 33fps

ที่มา – Google AI Blog

No Description

Topics: 
Googlle
Artificial Intelligence