หลังจากผ่านไปหลายเดือนของการทดสอบผู้ตรวจสอบของรัฐบาลกลางที่สนใจในการประเมินประโยชน์ในแอพพลิเคชั่นความมั่นคงแห่งชาติกล่าวว่าซอฟต์แวร์การจดจำใบหน้าได้รับการปรับปรุงให้ดีขึ้น 20 ปีในช่วงห้าปีที่ผ่านมา
อย่างน้อยนั่นคือผลการรายงานล่าสุดของการทดสอบผู้ขายการจดจำใบหน้าล่าสุด (FRVT) ที่ดำเนินการในช่วงปีที่ผ่านมาโดยสถาบันมาตรฐานและเทคโนโลยีแห่งชาติ (NIST) เพื่อพิจารณาว่าอัลกอริทึมใดทำงานได้ดีที่สุดในการตรวจสอบบุคคลตัวตนโดยการตรวจสอบใบหน้าของเขาหรือเธอ
Jonathon Phillips วิศวกรไฟฟ้าที่กำกับการทดสอบที่ NIST อธิบายถึงLiveScienceFRVT ที่คล้ายกันที่ดำเนินการในปี 2545 แสดงให้เห็นว่าอัลกอริทึมที่ดีที่สุดไม่สามารถทำการเปรียบเทียบที่ถูกต้อง 20 เปอร์เซ็นต์ของเวลา แต่อัตราการปฏิเสธที่ผิดพลาดในการทดสอบล่าสุดเพียง 1 เปอร์เซ็นต์
อย่างน้อยเขาก็เตือนว่าเป็นผลลัพธ์ของผู้เข้าแข่งขันที่ดีที่สุด - บางกลุ่มที่เข้ามามีผลลัพธ์ที่ดีกว่าปี 2545 ผู้เข้าแข่งขันให้อัลกอริธึม Windows หรือ Linux ซึ่งทั้งหมด NIST วิ่งบนคอมพิวเตอร์เครื่องเดียวกันโดยใช้ฐานข้อมูลขนาดใหญ่ที่จัดทำโดยรัฐบาลโดยใช้พิกเซล สิ่งเหล่านี้รวมถึง 36,000 รูปภาพที่จัดทำโดยกระทรวงการต่างประเทศสหรัฐฯที่นำคนที่สมัครขอวีซ่าที่ไม่ใช่ผู้อพยพที่สถานกงสุลสหรัฐในเม็กซิโก
อัลกอริทึมบางส่วนใช้เวลาหลายร้อยชั่วโมงในการค้นหาการแข่งขันในฐานข้อมูล แต่ฟิลลิปส์ระบุว่าความเร็วน้อยกว่าปัญหาในโลกแห่งความเป็นจริงแอปพลิเคชันความปลอดภัยทางชีวภาพ- แทนที่จะเปรียบเทียบทุกใบหน้าในฐานข้อมูลกับใบหน้าอื่น ๆ การตรวจสอบความปลอดภัยมักจะเกี่ยวข้องกับการเปรียบเทียบเพียงครั้งเดียว - เป็นคนที่ยืนอยู่หน้ากล้องบอกว่าเขาเป็นมิสเตอร์สมิ ธ คนเดียวกับนายสมิ ธ ที่มีรูปถ่ายอยู่ในคอมพิวเตอร์หรือไม่?
“ เราป้อนข้อมูลอัลกอริทึมจำนวนมากเพื่อให้ได้คำตอบที่มีความหมายทางสถิติ” เขากล่าว “ เป้าหมายของเราคือการส่งเสริมการปรับปรุงเทคโนโลยีและให้ตัวเลขผู้มีอำนาจตัดสินใจที่จะให้พวกเขาประเมินการศึกษาเทคโนโลยีเอง”
ด้วยแสงแบบสุ่มในแต่ละใบหน้า (ตรงข้ามกับแสงสตูดิโอที่ควบคุมอย่างแน่นหนา) อัตราการปฏิเสธเพิ่มขึ้นเป็นประมาณ 12 เปอร์เซ็นต์สำหรับอัลกอริทึมที่ดีที่สุดเขาสังเกตเห็นแม้ว่ามันจะดีกว่าผลลัพธ์ปี 2002 มากเมื่ออัตราการปฏิเสธคือ 20 เปอร์เซ็นต์
ผลลัพธ์โดยรวมที่ดีที่สุดคือฟิลลิปส์กล่าวโดย Neven Vision (นับตั้งแต่ได้มาจาก Google Inc. ), Viisage Technology (นับตั้งแต่ได้มาจาก L-1 Identity Solutions ของ Stamford, CT) และระบบ Cognitec ของประเทศเยอรมนี มหาวิทยาลัยฮูสตันและจีนมหาวิทยาลัย Tsinghua ก็ทำได้ดีเช่นกันเขากล่าวเสริม
ฟิลลิปส์ตั้งข้อสังเกตว่าภาพทั้งหมดเป็น“ หน้าผากเต็มรูปแบบ” ซึ่งหมายความว่าพวกเขาถูกถ่ายด้วยคนที่หันหน้าเข้าหากล้อง ไม่มีการทดสอบด้วยมุมกล้องแบบสุ่ม แต่เขาสังเกตเห็นว่าระบบรักษาความปลอดภัยไบโอเมตริกซ์ต้องการให้บุคคลเผชิญหน้ากับกล้องต่อไป มุมกล้องที่ไม่สามารถควบคุมได้อาจเป็นเรื่องของ FRVT ในอนาคต แต่ขณะนี้ไม่มีกำหนด