Sony เปิดตัวเซ็นเซอร์ภาพตัวแรกที่รวมโปรเซสเซอร์ AI

มีชื่อว่า IMX500 และเป็นเซ็นเซอร์ภาพตัวแรกจากแผนกอิเล็กทรอนิกส์ของ Sony นั่นคือ Sony Semiconductors Solutions อย่าหลงกลกับคำนำหน้าคลาสสิกสำหรับเซ็นเซอร์ Sony ซึ่งก็คือ "IMX"
ไม่ว่าจะเป็นเซ็นเซอร์แบบ “เปลือย” (IMX500) หรือที่มีองค์ประกอบเชื่อมต่อทั้งหมด (IMX501) เซ็นเซอร์ชนิดนี้ก็เป็นเซ็นเซอร์สายพันธุ์ใหม่อย่างแท้จริง ไม่ใช่เพื่อสิ่งที่เขาเห็น แต่เพื่อสิ่งที่เขารู้

“มันไม่เกี่ยวกับภาพที่สวยงามอีกต่อไป แต่มันเกี่ยวกับข้อมูล”อธิบายสไลด์การนำเสนอต่อสื่อมวลชนภายใต้มาตรการคว่ำบาตร จากมุมมองของภาพ จริงๆ แล้วเซ็นเซอร์ขนาดเล็กในรูปแบบ 1/2.3 นิ้ว 12 Mpix นั้นไม่มีอะไรพิเศษ เราพบรูปแบบและคำจำกัดความของภาพประเภทนี้ในสมาร์ทโฟนมานานหลายปี
สิ่งที่ผิดปกติก็คือ IMX 500 เป็นเซ็นเซอร์รับภาพตัวแรกของโลกที่รวม "สมอง" ของตัวเองเข้าด้วยกัน แม่นยำยิ่งขึ้น นอกเหนือจากโปรเซสเซอร์ประมวลผลภาพ (ISP) แล้ว IMX500/501 ยังรวม DSP และหน่วยความจำเพื่อดำเนินการคำนวณ "AI" ทั้งหมดโดยทั่วไปที่ดำเนินการโดยชิปภายนอก

เห็นได้ชัดว่าแทนที่จะส่งภาพนิ่งหรือภาพเคลื่อนไหวที่จับไปยังหน่วยความจำภายนอกเพื่อให้ข้อมูลได้รับการประมวลผลโดยชิปภายนอกหนึ่งตัว (หรือมากกว่า!) ตัวเซ็นเซอร์จะรับรู้การคำนวณและส่งข้อมูลที่สำคัญเท่านั้น

-ข้อดีของการบูรณาการนี้มีมากมาย» Antonio Avitabile กรรมการผู้จัดการของ Sony Semiconductor Solutions Europe อธิบาย -สิ่งแรกคือชิปไม่ต้องการคลาวด์(หรือแหล่งคำนวณภายนอกอื่น หมายเหตุบรรณาธิการ)เพื่อประมวลผลข้อมูล หากเราต้องการทำให้เครื่องจักรมีความชาญฉลาด เราต้องลดการพึ่งพาคลาวด์เพื่อลดเวลาแฝงในการวิเคราะห์รูปภาพ-

พลังงานน้อยลง ความเป็นส่วนตัวมากขึ้น

ด้วยการผสานรวมการคำนวณ (การประมวลผล) เข้ากับเซนเซอร์ Sony จึงเปิดประตูสู่การคำนวณแบบเรียลไทม์ การคำนวณซึ่งมีตั้งแต่การวัดความหนาแน่นของประชากรในพื้นที่ ไปจนถึงการวิเคราะห์ลักษณะและความลึกของการเคลื่อนไหว เป็นต้น เซ็นเซอร์มีพลังการประมวลผลและหน่วยความจำของตัวเอง โปรแกรมเมอร์สามารถโหลดแบบจำลองการวิเคราะห์ลงในส่วนประกอบได้โดยตรง (การอนุมาน ฯลฯ)

ความเร็วของการดำเนินการขึ้นอยู่กับความซับซ้อนของการคำนวณที่ร้องขออย่างเห็นได้ชัด

-ฉันไม่สามารถให้รายละเอียดมากเกินไปเกี่ยวกับจำนวนการดำเนินการต่อวินาทีได้ แต่ IMX500 มีมากกว่า 1 อันดับแรก» ตกลงระบุอันโตนิโอ อาวิตาบิเล

การประมวลผลข้อมูลแบบผสานรวมนี้ยังมีข้อดีตรงที่ใช้พลังงานน้อยลง (การไหลของข้อมูลน้อยลง โปรเซสเซอร์ที่ปรับให้เหมาะกับการคำนวณ AI) และยังเคารพความเป็นส่วนตัวมากขึ้นอีกด้วย
ไม่จำเป็นต้องเผยแพร่ภาพของผู้คนให้เป็นภาพที่ชัดเจน (หรือลำธาร) ที่สามารถเบี่ยงเบนหรือละเมิดลิขสิทธิ์ได้อีกต่อไป เป็นส่วนหนึ่งของระบบการนับลูกค้า การวิเคราะห์พฤติกรรม ฯลฯ เฉพาะข้อมูลที่ตีความเท่านั้นที่จะถูกส่งไปยังระบบ ไม่ใช่ใบหน้า

ทดลองวิ่งก่อนเผยแพร่เทคโนโลยี

-ตลาดเป้าหมายแรกของเราคือการค้าปลีก(la vente, ed.) », Antonio Avitabile อธิบาย

“การค้าปลีก” ในความหมายกว้าง ๆ ตั้งแต่การวิเคราะห์ความเคลื่อนไหวในร้านค้าไปจนถึงพฤติกรรมขั้นสุดท้ายของผู้บริโภค แต่ในการนำเสนอของ Sony เรายังค้นพบการใช้งานในอุตสาหกรรมอื่นๆ เช่น การอ่านบาร์โค้ด การตรวจจับอันตราย (การล้มของมนุษย์) เป็นต้น ไม่มีอะไรเกี่ยวข้องกับการถ่ายภาพในขณะนี้

แต่นั่นสามารถเปลี่ยนแปลงได้ เมื่อถามโดย 01net.com เกี่ยวกับการมาถึงของชิป AI ภายในเซ็นเซอร์ภาพ โดยเฉพาะอย่างยิ่งในสมาร์ทโฟนในฐานะโมดูลภาพที่รองรับเซ็นเซอร์หลัก Antonio Avitabile เห็นด้วย:

-เป็นเซ็นเซอร์ชนิดแรกและเป้าหมายมีความเป็นมืออาชีพ แต่แนวคิดก็คือการพัฒนาเทคโนโลยีให้เป็นเซ็นเซอร์อัจฉริยะหลากหลายประเภท เราสร้างและตรวจสอบธุรกิจก่อน แต่ใช่ เราสามารถจินตนาการถึงการใช้คอมพิวเตอร์แบบผสมผสานในด้านการถ่ายภาพบนสมาร์ทโฟนได้โดยสิ้นเชิง» เขาสรุป

🔴 เพื่อไม่พลาดข่าวสาร 01net ติดตามเราได้ที่Google ข่าวสารetวอทส์แอพพ์-