Apple เริ่มทดสอบฟีเจอร์ Audio Intelligence ให้กับนักพัฒนาใน iOS 27.3 Beta เพื่อทดสอบความสามารถด้าน AI บน Apple Watch Series 12 ทั้งการย้อนฟังเสียงพูดสั้น ๆ และการสรุปบทสนทนาประจำวัน
Apple เริ่มทดสอบฟีเจอร์ AI Audio Intelligence บน Apple Watch Series 12 และ Ultra 4
เทคโนโลยี Audio Intelligence ที่ขับเคลื่อนด้วย AI สำหรับ Apple Watch ได้เริ่มเปิดให้ทดสอบเวอร์ชัน Beta แล้ว โดยเริ่มแรกสำหรับนักพัฒนาในการอัปเดต iOS 27.3 หลังจากเปิดตัวครั้งแรกในงานแถลงข่าวฮาร์ดแวร์ Surprise and Shine เมื่อเดือน ก.ย. ที่ผ่านมา เทคโนโลยีนี้ประกอบด้วยฟีเจอร์ AI 4 รายการที่ผู้ใช้เลือกเปิดใช้งานได้เอง ซึ่งช่วยให้ผู้สวมใส่ Apple Watch Series 12 สามารถตรวจจับเสียงสำคัญ ระบุเพลง ติดตามบทสนทนาที่ฟังไม่ทัน และจดบันทึก

ฟีเจอร์การจดจำเสียงจะช่วยให้ผู้ใช้ที่หูหนวกและมีปัญหาทางการได้ยินสามารถระบุเสียงสำคัญ เช่น เสียงไซเรน เสียงเตือนภัย หรือเสียงกริ่งประตูได้จากนาฬิกา ขณะที่ฟีเจอร์จดจำเพลงจะเชื่อมต่อไปยังแอป Shazam ของ Apple เพื่อตรวจจับเพลงที่เล่นอยู่ในพื้นหลัง พร้อมทั้งระบุชื่อเพลงและชื่อศิลปิน

Live Rewind ย้อนดูข้อความเสียงพูดย้อนหลัง 15 วินาที
อย่างไรก็ตาม ฟีเจอร์ที่อาจนำไปสู่ประเด็นถกเถียงมากกว่าคือฟีเจอร์ที่รับฟังบทสนทนาของมนุษย์อย่าง Live Rewind และ Siri Recaps
จากกระแสต่อต้านอุปกรณ์บันทึกข้อมูล AI ก่อนหน้านี้ เช่น แว่นตา AI ของ Meta และอุปกรณ์สวมใส่ AI อื่น ๆ ทาง Apple จึงพยายามสร้างพื้นที่ที่ฟีเจอร์เหล่านี้สามารถสร้างประโยชน์ให้กับเจ้าของ Apple Watch ได้ ขณะเดียวกันก็ยังเคารพความเป็นส่วนตัวของคนรอบข้าง

แนวคิดของ Live Rewind คือการเปิดโอกาสให้คุณย้อนเวลากลับไปดูสิ่งที่ใครบางคนเพิ่งพูดไปในกรณีที่คุณฟังไม่ทัน ตัวอย่างเช่น หากมีคนกำลังบอกเส้นทางหรืออ่านรายการเมนูพิเศษขนาดยาวในร้านอาหาร คุณสามารถกด Digital Crown บน Apple Watch สองครั้งเพื่อดูสิ่งที่พูดไปในช่วง 15 วินาทีล่าสุดในรูปแบบข้อความสั้น ๆ บนหน้าปัดนาฬิกา คุณสามารถดูข้อความนี้แล้วปล่อยทิ้งไว้โดยไม่ทำอะไร ซึ่งข้อความจะหายไปอย่างถาวร หรือจะบันทึกลงในแอป Siri แบบแยกเดี่ยวที่มาพร้อมกับ iOS 27 เพื่อเปิดดูภายหลังได้เช่นกัน ซึ่งอาจมีประโยชน์หากคุณกำลังพยายามจำชื่อคนหรือจดโน้ตสั้น ๆ จากการนำเสนองานที่รวดเร็ว

Apple ระบุว่าผู้ใช้จะสามารถแตะตัวเลือก Ask Siri ที่ปรากฏใต้ข้อความสั้น ๆ ได้ด้วย หากมีคำถามเกี่ยวกับสิ่งที่พูดไป เช่น คำศัพท์ทางเทคนิคที่ไม่เข้าใจ หรือตัวเลือกซอสที่บริกรพูดถึงแต่คุณไม่คุ้นเคย รวมถึงหัวข้ออื่น ๆ
เมื่อคุณกด Digital Crown สองครั้ง จะมีเสียงเตือนดังขึ้นและมีภาพเคลื่อนไหวแสดงบนหน้าปัดนาฬิกา ซึ่งมีไว้เพื่อส่งสัญญาณให้คนรอบข้างทราบผ่านทั้งท่าทางการใช้งาน เสียง และภาพที่แสดงว่าคุณได้บันทึกสิ่งที่พูดไปแล้ว
ข้อความสั้น ๆ เหล่านี้จะถูกลบออกโดยอัตโนมัติหลังจากผ่านไป 30 วินาทีหากคุณไม่ได้บันทึกเก็บไว้
Siri Recaps สรุปสาระสำคัญของบทสนทนาโดยไม่เก็บไฟล์เสียงดิบ

อีกหนึ่งตัวเลือกคือ Siri Recaps ซึ่งนำเทคโนโลยีการฟังบรรยากาศโดยรอบนี้ไปสู่อีกระดับ ด้วยการช่วยให้เจ้าของ Apple Watch สามารถจดบันทึกประเด็นสำคัญจากการสนทนาของพวกเขาได้
สิ่งที่สำคัญคือ Apple ระบุว่าจะไม่มีการระบุตัวตนของผู้พูด ไม่มีการบันทึกไฟล์เสียงดิบ และไม่มีการถอดเทปคำต่อคำ แต่ฟีเจอร์นี้จะสรุปบทสนทนาออกมาเป็นประโยคสั้น ๆ และหัวข้อย่อยเพื่อชี้ประเด็นสำคัญ ตัวอย่างเช่น ขึ้นอยู่กับหัวข้อสนทนา หัวข้อย่อยอาจรวมถึงข้อมูลอย่างวันสำคัญหรือกำหนดส่งงาน ข้อมูลราคาหรือแผนการผ่อนชำระ และข้อมูลเชิงข้อเท็จจริงอื่น ๆ
Apple แนะนำว่าฟีเจอร์นี้สามารถนำไปใช้ในสถานการณ์ต่าง ๆ เช่น การประชุมงาน การประชุมระหว่างผู้ปกครองกับครู การฝึกซ้อมส่วนบุคคล หรือสถานที่อื่น ๆ ที่คุณอาจต้องจำว่ามีงานอะไรที่ต้องทำหรือมีอะไรที่ถูกพูดถึงไปบ้าง โดยพื้นฐานแล้ว ฟีเจอร์นี้ได้รับการออกแบบมาเพื่อเลียนแบบความสามารถในการจดโน้ตของผู้ใช้ โดยไม่ใส่เรื่องอารมณ์หรือน้ำเสียงลงไป
ความสามารถนี้อาจเป็นประโยชน์อย่างยิ่งในเวลาที่คุณไม่สามารถเขียนโน้ตด้วยตนเองได้ ไม่ว่าจะเพราะมือไม่ว่างหรือกำลังตั้งสมาธิอยู่กับสิ่งที่กำลังถูกพูดถึงในเวลานั้น ทั้งนี้ฟีเจอร์สรุปบทสนทนาจะไม่บันทึกเสียงสนทนาเมื่อคุณกำลังฟังเพลงผ่านหูฟังหรือกำลังใช้งานฟังก์ชันตัดเสียงรบกวน
ระบบการจัดการโน้ต และการตั้งเวลาทำงานเพื่อความปลอดภัย
เมื่อสิ้นสุดวัน ระบบจะแจ้งเตือนให้คุณตรวจสอบ Siri Recaps ที่บันทึกไว้หากเปิดใช้งานฟีเจอร์นี้อยู่ จากนั้นคุณสามารถเลือกได้ว่าต้องการจัดเก็บรายการใดบ้าง โน้ตเหล่านี้สามารถบันทึกลงในแอป Notes หรือส่งออกไปยังแอป Journal หากเป็นเรื่องส่วนตัว แต่ถ้าคุณไม่ได้ดำเนินการใด ๆ รายการสรุปจะถูกลบทิ้งเองภายใน 7 วัน
การแจ้งเตือนให้ตรวจสอบ Siri Recaps ที่คุณบันทึกไว้จะปรากฏขึ้นเมื่อคุณปลดล็อก Apple Watch ในช่วงเช้าเช่นกัน
ผู้ใช้สามารถเลือกเปิดใช้งาน Siri Recaps ได้ด้วยตนเอง หรือจะกำหนดตารางเวลาไว้ก็ได้ เช่น ตั้งให้สรุปบทสนทนาเฉพาะช่วงเวลาทำงาน หรือกำหนดให้ไม่ทำงานในเวลากลางคืน แม้จะตั้งให้ทำงานตามตารางเวลาไว้ คุณก็ยังสามารถปิดฟีเจอร์สรุปบทสนทนาได้ทุกเมื่อจาก Control Center
Apple ชี้แจงว่า Siri Recaps ได้รับการออกแบบมาให้ตัดข้อมูลที่มีความละเอียดอ่อนออกไป เช่น ข้อมูลระบุตัวตนที่ออกโดยหน่วยงานรัฐ ข้อมูลทางการเงินและการยืนยันตัวตน ข้อมูลระบุตัวตนส่วนบุคคลบางประเภท รวมถึงข้อความใด ๆ ที่ส่อถึงการทำร้ายตัวเอง
เบื้องหลังการประมวลผลผ่านชิป S11 และ Private Cloud Compute

ฟีเจอร์ Audio Intelligence สำหรับ Apple Watch Series 12 และ Apple Watch Ultra 4 ทำงานโดยอาศัยการผสมผสานระหว่างฮาร์ดแวร์ ซอฟต์แวร์ และบริการของ Apple ซึ่งประกอบด้วยชิป S11 ไมโครโฟนในตัว โมเดล Apple Intelligence ที่ทำงานบน iPhone และระบบ Private Cloud Compute ของ Apple
หน่วยประมวลผลที่ทำงานตลอดเวลาประกอบด้วยพื้นที่ Secure Enclave ซึ่งเป็นพื้นที่หน่วยความจำที่ได้รับการปกป้องด้วยฮาร์ดแวร์ และส่วนอื่นของระบบปฏิบัติการไม่สามารถเข้าถึงได้ โดยมีหน่วยความจำพักข้อมูลเสียงเฉพาะคอยประมวลผลเสียงดิบ สิ่งนี้ช่วยให้เสียงได้รับการประมวลผลโดยไม่มีใครสามารถเข้าถึงได้จริง ๆ รวมถึงตัว Apple เอง ข้อมูลเสียงจะเข้าถึงได้เฉพาะ iPhone ที่จับคู่อยู่เท่านั้นผ่านกลไกการจับคู่ที่ปลอดภัยระหว่างตัวเครื่องกับนาฬิกา
ในกระบวนการทำงาน โมเดล AI ขนาดเล็กบนชิป S11 ใน Apple Watch จะตรวจจับว่ามีการสนทนาเกิดขึ้นและผู้สวมใส่มีส่วนร่วมในการสนทนานั้นหรือไม่ จากนั้นจะส่งข้อมูลไปยัง Secure Enclave บน iPhone การประมวลผลบนเครื่อง iPhone จะเปลี่ยนเสียงให้เป็นข้อความฉบับย่อ ซึ่งหมายถึงข้อความของบทสนทนาที่ถูกตัดคำฟุ่มเฟือยออกไป จากนั้นข้อความฉบับย่อนี้จะถูกเข้ารหัสและส่งต่อไปยัง Private Cloud Compute (PCC) ของ Apple เพื่อสร้างบทสรุปของการสนทนาแล้วส่งกลับมายังโทรศัพท์ (บทสรุปและข้อมูลสรุปที่ใช้สร้างจะถูกลบออกจาก PCC ทันทีหลังจากนั้น)
บทสรุปที่คุณสามารถเข้าถึงได้บน iPhone จะมีเพียงคุณเท่านั้นที่เข้าถึงได้ ไม่ใช่ Apple และข้อมูลจะได้รับการเข้ารหัสเมื่อซิงค์ระหว่างอุปกรณ์ Apple หลายเครื่องของคุณ
เช่นเดียวกัน Apple Watch จะส่งผ่านข้อมูลเสียงไปยัง iPhone เพื่อทำการประมวลผลสำหรับสร้างข้อความสั้นย้อนหลัง 15 วินาทีของฟีเจอร์ Live Rewind
Apple ยืนยันว่าฟีเจอร์เหล่านี้จะไม่ส่งผลกระทบต่ออายุการใช้งานแบตเตอรี่ของนาฬิกาหรือโทรศัพท์ของคุณ โดยฟีเจอร์ทั้งหมดจะเปิดให้ทดสอบใน Public Beta ในภายหลัง ก่อนที่จะเปิดให้ใช้งานทั่วไปสำหรับทุกคน
ที่มา: techcrunch
