Siri เก่งกว่าแต่ยังไม่ฉลาดกว่าเด็กป.5

Isku Day Aaladdayada Si Loo Ciribtiro Dhibaatooyinka

Siri ทำได้ไม่ดีนักกับการทดสอบความฉลาดของ Wechsler แต่ผู้ช่วยดิจิทัลที่ได้รับการปรับปรุงใหม่มีเทคนิคบางอย่างอยู่ในมือของเธอ

เรื่องนี้เป็นส่วนหนึ่งของกลุ่มเรื่องที่เรียกว่า ถอดรหัส

เปิดเผยและอธิบายว่าโลกดิจิทัลของเรากำลังเปลี่ยนแปลงไปอย่างไร และเปลี่ยนแปลงเราอย่างไร

ออกไปให้พ้นทาง: Siri ผู้ช่วยดิจิทัลของ Apple ไม่ได้ฉลาดเป็นพิเศษ อย่างน้อยก็ไม่ใช่ในความหมายทั่วไปและแน่นอนว่าไม่มีที่ไหนที่ฉลาดเท่ากับเด็ก 10 ขวบโดยเฉลี่ยของคุณ

และถึงกระนั้น Apple ก็อวดว่า Siri เวอร์ชั่นนี้ซึ่งเป็นหัวใจสำคัญของระบบปฏิบัติการมือถือ iOS 9 ล่าสุดนั้นอัดแน่นไปด้วย สติปัญญามากขึ้นตลอด — แน่นอน บริษัทอ้างว่าความเร็วและความแม่นยำดีขึ้น 40 เปอร์เซ็นต์ แต่ฉลาดกว่าอะไรกันแน่?

เราตัดสินใจค้นหาโดยนำ IQ ที่ปรับปรุงแล้วของ Siri ไปทดสอบ จัดการการทดสอบความรู้มาตรฐานที่เราพบทางออนไลน์ ผลลัพธ์? Siri มีความสามารถที่ปฏิเสธไม่ได้ แต่เธอก็ยังไม่คู่ควรกับเด็ก

เราเริ่มต้นด้วยเกณฑ์ต่ำที่ยอมรับได้: แบบทดสอบที่ได้รับแรงบันดาลใจจากรายการทีวีเกม คุณฉลาดกว่าเกรดห้าหรือไม่? สิริตอบกลับอย่างรวดเร็วและตรงไปยังหนึ่งในห้าคำถามที่โพสต์: ดาวเคราะห์ดวงใดอยู่ใกล้ดวงอาทิตย์ที่สุด? คำตอบคือดาวพุธ

ในช่วงเวลาที่เหลือ Siri ทำในสิ่งที่เด็กในโรงเรียนทำเมื่อเขาหรือเธอไม่ทราบคำตอบของคำถามเกี่ยวกับ การพูด ความยาวของวาระของสมาชิกสภาผู้แทนราษฎรหรือจำนวนด้านของรูปหกเหลี่ยม: เธอค้นเว็บ โดยการเปรียบเทียบ Google Now สามารถให้คำตอบที่ถูกต้องสำหรับคำถามสามข้อจากห้าข้อที่โพสต์

แอปเปิ้ล

ระดับความฉลาดทางสติปัญญาสำหรับผู้ใหญ่ของ Wechsler ที่ล้ำหน้ายิ่งขึ้นได้พิสูจน์ให้เห็นถึงความท้าทายมากกว่าสำหรับ Siri ผู้ซึ่งไม่ชอบการคิดเชิงนามธรรม ยกตัวอย่างเช่น คำตอบสำหรับคำถามคณิตศาสตร์นี้: จอห์น ซึ่งอายุ 12 ปี มีอายุมากกว่าน้องชายของเขาถึงสามเท่า จอห์นจะอายุเท่าไหร่เมื่อเขาแก่เป็นสองเท่าของพี่ชายของเขา? คำตอบที่เป็นไปได้: 15, 16, 18, 20 หรือ 21?

แอปเปิ้ล

เห็นได้ชัดว่าเราไม่ได้รับการทดสอบเหล่านี้ ผู้เชี่ยวชาญด้านการเรียนรู้ของเครื่อง Indraneel Mukherjee จาก เครื่องจุดไฟลิฟต์ อธิบายว่าผู้ช่วยเสมือนในปัจจุบันไม่ได้ใกล้เคียงกับความฉลาดของมนุษย์เลย เทคโนโลยียังไม่มี แต่ Siri และผู้ช่วยเสมือนอื่นๆ ได้รับการออกแบบมาเพื่อวัตถุประสงค์ที่มีประโยชน์มากขึ้น: เพื่อลดเวลาที่ผู้ใช้อุปกรณ์เคลื่อนที่ใช้ในการทำงานประจำวัน เช่น การค้นหาเส้นทางที่เร็วที่สุดไปยังสนามบินหรือปั๊มน้ำมันที่ใกล้ที่สุด

Mukherjee ผู้ซึ่งทำงานเป็นส่วนหนึ่งของทีมปัญญาประดิษฐ์ของ Google กล่าวว่าผู้ใช้รายหนึ่งสามารถวัดการเปลี่ยนแปลงเชิงปริมาณในอัลกอริธึมได้ยาก ในเชิงคุณภาพคุณสามารถระบุได้ว่าคำแนะนำร้านอาหารปรับปรุงหรือไม่? มันรู้โดยอัตโนมัติหรือไม่ว่าฉันต้องขึ้นเครื่องและการจราจรติดขัด? … หากคุณสัมผัสได้ถึงความแตกต่าง นั่นหมายถึงการปรับปรุงครั้งใหญ่

อย่างไรก็ตาม เราค้นหาวิธีหาจำนวนที่อ้างว่า Apple อ้างว่ามีการปรับปรุง 40 เปอร์เซ็นต์

ปีที่แล้ว Stone Temple Consulting ที่ปรึกษาด้าน SEO และบริษัทการตลาดดิจิทัล แข่งขันกับ Siri, Google Now และ Cortana ของ Microsoft ใน เกร็ดความรู้ เพื่อดูว่าข้อใดสามารถตอบคำถาม 3,000 คำถามได้ถูกต้องที่สุด Google Now ทุบ Siri

ที่ Re/code's ตามคำสั่ง Stone Temple ทำให้ Siri กลับมานั่งที่ร้อนแรงเป็นเวลา 12 ชั่วโมงในสัปดาห์นี้เพื่อดูว่าผู้ช่วยดิจิทัลที่มีกล้ามเนื้อมากขึ้นของ Apple จะทำงานอย่างไรไม่ใช่กับ Google แต่ต่อต้านตัวเอง บริษัทใช้คำถาม 475 ข้อจากการสำรวจครั้งแรกเพื่อประเมินคำตอบของ Siri คำถามคือชุดที่ Google Now ตอบกลับอย่างแม่นยำในปี 2014 แต่ด้วยผลลัพธ์ที่หลากหลายจาก Siri แบบเก่า ใหม่ Siri สามารถทำได้ดีกว่า?

Eric Enge ประธานเจ้าหน้าที่บริหารของ Stone Temple กล่าวว่าคำถามนี้คล้ายกับคำถามที่ผู้ใช้อาจโพสต์ รวมถึงคำถามเกี่ยวกับวิธีใช้ (ฉันจะทาอายไลเนอร์ได้อย่างไร ฉันจะสมัครสินเชื่อบ้านได้อย่างไร) คำขอเปรียบเทียบ (เปรียบเทียบดาวพฤหัสบดีกับดาวอังคาร) หรือพวกที่ทดสอบความรู้เล็กๆ น้อยๆ (มนุษย์จะวิ่งได้เร็วแค่ไหน ดวงอาทิตย์อายุเท่าไหร่?) คำถามถูกออกแบบมาเพื่อกระตุ้นการตอบสนองโดยตรง

Stone Temple ประเมินคำตอบของ Siri ในสองวิธี: ไม่ว่าเธอจะเสนอคำตอบที่สมบูรณ์หรือไม่ นั่นคือการตอบคำถามโดยตรง แทนที่จะแสดงผลการค้นหาเว็บ จากนั้นจึงตรวจสอบความถูกต้อง ใหม่ Siri ดีขึ้นทั้งสองมาตรการ

ปีที่แล้ว Siri ตอบคำถามประมาณหนึ่งในสามที่ถาม โดยตอบถูกร้อยละ 81 ของทั้งหมด ใหม่ Siri ที่ปรับปรุงแล้วสามารถตอบคำถามที่โพสต์ได้มากขึ้น - 41 เปอร์เซ็นต์ - มีความแม่นยำมากขึ้นที่ 92 เปอร์เซ็นต์ กล่าวอีกนัยหนึ่ง ความแม่นยำของ Siri ในการตอบคำถามชุดเดียวกันจำนวน 475 ข้อดีขึ้น 32 เปอร์เซ็นต์

ที่ปรึกษาวัดหิน

ในการทดสอบของเรา ผู้ช่วยมือถือของ Apple เก่งในการตอบคำถามที่ใช้งานได้จริง เช่น: คะแนนของเกม Angels เมื่อคืนนี้เป็นอย่างไร หรือฉันควรนำร่มไปทำงานวันนี้? หรือหาร้านซูชิดีๆ ในบริเวณใกล้เคียง นอกจากนี้ เธอยังทำหน้าที่แปลงสกุลเงินได้ทันที บอกเวลาในสถานที่ห่างไกลและคาดการณ์เมื่อดวงอาทิตย์จะตกดิน

Savvier Siri ยังแสดงกลอุบายบางอย่างที่เธอไม่สามารถทำได้ในสมัยก่อน เมื่อถูกขอให้ดึงรูปภาพจากการไปเที่ยวฮ่องกงในฤดูใบไม้ผลิ เธอแสดงทุกภาพที่ฉันถ่ายทันที โดยเริ่มจากสะพานที่พาฉันไปยังเกาะจากจีนแผ่นดินใหญ่ Old Siri พบภาพฮ่องกงจากเว็บ

บอก Siri ให้เล่นเพลงอันดับ 1 แล้วเธอก็เปิดตัว What Do You Mean ของ Justin Bieber ทันที — แล้วถามว่าอยากฟังมากกว่านี้ไหม (โอ้ ไม่นะ)

ขณะนี้ผู้ช่วยนำเสนอข้อมูลการขนส่งสาธารณะ ซึ่งเธอแสดงในแผนที่ของ Apple ควบคู่ไปกับเส้นทางการขับขี่และการเดิน สิ่งนี้จะเป็นประโยชน์สำหรับทุกคนที่อาศัยอยู่ในเมืองอื่นที่ไม่ใช่ลอสแองเจลิส ซึ่งการไป Getty Center จากออเรนจ์เคาน์ตี้โดยรถไฟหรือรถประจำทางนั้นไม่ใช่ทางเลือก

มีการปรับปรุงบางอย่างใน Siri ที่เราไม่ได้ประเมิน เช่น ความสามารถของเธอในการเข้าใจภาษาและภาษาถิ่นมากขึ้น

สิริยังพบคำตอบใหม่สำหรับคำถามสำคัญในชีวิต ถามผู้ช่วยเก่าเกี่ยวกับความหมายของชีวิต แล้วเธอก็จะพูดเล่น ฉันพบว่ามันแปลกที่คุณจะถามสิ่งนี้เกี่ยวกับวัตถุที่ไม่มีชีวิต

เวอร์ชันใหม่และที่ได้รับการปรับปรุงมีคำแนะนำที่เป็นรูปธรรมซึ่งดูเหมือนจะเป็นส่วนเสริมของบุคลิกที่ดีของ CEO Tim Cook

พยายามทำดีกับผู้คน หลีกเลี่ยงการกินไขมัน อ่านหนังสือดีๆ สักเล่ม เดินเข้าไปแล้วพยายามอยู่ร่วมกันอย่างสันติและกลมกลืนกับผู้คนจากทุกชาติและทุกลัทธิ

รายงานเพิ่มเติมโดย Mark Bergen

บทความนี้เดิมปรากฏบน Recode.net