Apple ได้แบ่งปันข้อมูลเชิงลึกเกี่ยวกับวิธีการใช้ Secure Enclaves เพื่อปกป้องข้อมูลกล้องและไมโครโฟนใน HomeView, iPhone 18 Pro และผลิตภัณฑ์อื่น ๆ
ฟีเจอร์อย่าง Siri Recap และ Live Rewind ช่วยบันทึกเสียงบรรยากาศเพื่อสรุปการสนทนา หรือคำบรรยายช่วง 15 วินาทีสุดท้ายของผู้พูด
สำหรับ iPhone 18 Pro/iPhone Duo นั้น ตัวเครื่องจะทำการประมวลผลภาพขั้นต่ำอย่างต่อเนื่องเพื่อตรวจจับว่ามีบุคคลอยู่ในระยะการมองเห็นหรือไม่
HomeView จะส่งสตรีมเฟรมภาพไปยัง camera enclave ซึ่งทำงานร่วมกับ person recognition enclave ที่มีโมเดลจดจำใบหน้าและเสียง รวมถึงฐานข้อมูลตัวตน เพื่อให้คะแนนความเชื่อมั่นในการจับคู่
ระบบปฏิบัติการจะได้รับเพียงตัวระบุบุคคล ตำแหน่ง และระดับความเชื่อมั่น แต่ไม่ได้รับเสียงหรือวิดีโอต้นฉบับ ซึ่งข้อมูลเหล่านี้จะถูกนำไปใช้กระตุ้นฟีเจอร์ส่วนบุคคล เช่น ปฏิทินและข้อความ โดยข้อมูลเซ็นเซอร์ดิบจะถูกทิ้งไป
Apple ระบุว่าการสร้างสภาพแวดล้อมการประมวลผลแบบแยกส่วนเพื่อรองรับการตรวจจับสภาพแวดล้อมนั้นเป็น “ความท้าทายทางวิศวกรรมที่จริงจัง” และการแยกหน่วยความจำสำหรับ Secure Enclaves นั้นเป็นเรื่องยากเช่นกัน
ศัพท์ที่ควรรู้
- Secure Exclaves – เป็นสภาพแวดล้อมการประมวลผลที่แยกออกมาเพื่อรักษาความปลอดภัยของข้อมูลสำคัญ เช่น ข้อมูลกล้องและไมโครโฟน
- Siri Recap – ฟีเจอร์ที่บันทึกเสียงบรรยากาศเพื่อช่วยในการสรุปการสนทนา
- Live Rewind – ฟีเจอร์ที่สามารถบันทึกเสียงในช่วง 15 วินาทีสุดท้ายของผู้พูดได้
- Passive minimal visual processing – การประมวลผลภาพขั้นต่ำที่ทำงานอยู่ตลอดเวลาเพื่อตรวจจับการมีอยู่ของบุคคล โดยไม่จำเป็นต้องบันทึกอย่างเต็มรูปแบบ
ที่มา: MacRumors