“Nice Research Center” ซึ่งเปิดในปี 2014 ตั้งอยู่ในสวนเทคโนโลยี Sophia-Antipolis อันเงียบสงบในเมืองมูแกงส์ โดยเป็นหน่วยงานของ Huawei ที่พัฒนาโปรเซสเซอร์ภาพภายในองค์กร ชิปที่เป็นต้นกำเนิดความสำเร็จในการถ่ายภาพของบริษัทบนสมาร์ทโฟน
-ขอโทษนะ แต่ในรูปถ่ายที่คุณถ่ายที่ออฟฟิศของฉัน เป็นไปได้ไหมที่จะเบลอภาพ?» ขอความกรุณานักวิจัยที่มารับเราก่อนออกเดินทาง ชายคนนี้เป็นส่วนหนึ่งของทีมที่ Nice Research Center หรือ NRC ซึ่งเป็นศูนย์ R&D ของ Huawei ซึ่งตั้งอยู่ใน Mougins ใกล้กับ Sophia-Antipolis ตารางที่เขาอ้างถึงที่คุณเห็นด้านล่างเบลอตามคำขอของเขา จริงๆ แล้วเขียนว่าอะไร? เราไม่รู้จริงๆ เลย นอกจากตัวอักษร ตัวเลข ลูกศร สี่เหลี่ยม ฯลฯ
กล่าวโดยย่อคืออักษรอียิปต์โบราณทางวิทยาศาสตร์ เพราะเราไม่ผิดที่ใช้คำว่า “นักวิจัย” ที่นี่ บริเวณชายขอบของทะเลเมดิเตอร์เรเนียน กลุ่มชาวจีนและอันดับสองของโลกในด้านการลงทุนด้านการวิจัยและพัฒนา ตามหลังตัวอักษร (Google) ได้จัดตั้งศูนย์การพัฒนาและการวิจัยสำหรับโปรเซสเซอร์ภาพ (ISP) ของสมาร์ทโฟนมาตั้งแต่ปี 2014 หนึ่งในหัวใจสำคัญของความสำเร็จของเขาในด้านการถ่ายภาพ
ใช่ ตลอดหลายปีที่ผ่านมา เราได้เฝ้าดู Huawei ปีนขึ้นไปเพื่อครองการถ่ายภาพด้วยสมาร์ทโฟนในที่สุด เราก็พลาดข้อมูลสำคัญไปอย่างหนึ่ง: สมองในการประมวลผลภาพของ Huawei นั้นเป็นสิ่งมหัศจรรย์ผลิตในประเทศฝรั่งเศส-
การผจญภัยเริ่มต้นด้วย P9
© เอเดรียน แบรนโก / 01net.com
การผจญภัยเกิดจากการพบปะและดราม่า(เล็ก) : “ฉันเป็นสถาปนิกของ ISP ของชิป OMAP ของ Texas Instrument ซึ่งมีสำนักงานใหญ่ใน Villeneuve-Loubet» อธิบาย Stephen Busch ผู้อำนวยการ NRC ในระหว่างการต้อนรับของเรา“แล้ว TI ก็ตัดสินใจปิดศูนย์ในปี 2555 และฉันได้รับการติดต่อจากผู้อำนวยการศูนย์วิจัยในอิสราเอลซึ่งขอให้ฉันตั้งทีม”- เกมแห่งการเชื่อมต่อและคำแนะนำในสภาพแวดล้อมแบบมืออาชีพที่ค่อนข้างเล็ก ซึ่งชื่อเสียงในด้านคุณภาพของงานมีความสำคัญมากกว่าสิ่งอื่นใด
การเลือกทำเลที่ตั้งชัดเจนสำหรับชาวเยอรมันวัย 46 ปีที่อาศัยอยู่ในฝรั่งเศสตั้งแต่ปี 1994: “ฉันเคยทำงานสายนี้กับ Texas Instrument แล้ว และมีคนเก่งๆ มากมายในสายนี้ ดังนั้นแม้ว่า Huawei จะมีข้อสงสัยตั้งแต่เริ่มต้นเกี่ยวกับการติดตั้งในฝรั่งเศส แต่พวกเขาก็ให้โอกาสฉันในปี 2013- ในตอนแรกเขารับสมัครเก้าคน ทีมที่มีวัตถุประสงค์ระยะกลางและระยะยาว
สำหรับระยะกลาง ยังคงเป็นคำถามของการพัฒนา ISP ที่สมบูรณ์สำหรับเทอร์มินัลที่จะเปิดตัวในปี 2559 ในระยะยาว สำหรับสำนักงานใหญ่ของ Huawei ยังคงเป็นคำถามของการเป็น "ผู้เขาเป็นราชาแห่งกล้องตั้งแต่เริ่มต้น- ISP ได้รับการพัฒนาในสองปี ซึ่งจะต้องเพิ่มหนึ่งปีของการบูรณาการเข้ากับ SoC ที่เหลือคุณก็รู้ดีว่า ISP นี้จะถูกรวมเข้ากับเทอร์มินัลเครื่องแรกที่ผลิตร่วมกับ Leica นั่นคือ P9 ซึ่งจะเป็นเทอร์มินัลเครื่องแรกในประวัติศาสตร์ที่ใช้เซ็นเซอร์ขาวดำรองเพื่อปรับปรุงคุณภาพของภาพของเซ็นเซอร์หลัก
ความสำเร็จนี้ช่วยให้ Stephen ได้รับความไว้วางใจจากสำนักงานใหญ่ ซึ่งทำให้เขาสามารถขยายทีมให้เข้าถึงผู้คนได้ถึง 30 คนในปัจจุบัน และนับ ISP หลายรุ่นและความสำเร็จเช่น P30 Pro (2019), P40 Pro+ (2020) และ Mate 40 Pro (2021) เทอร์มินัลที่ติดอันดับหนึ่งใน 10 สมาร์ทโฟนภาพถ่ายที่ดีที่สุดของเราในขณะนั้น เป็นการยุติการครอบงำของ Samsung และ Apple ในสาขานี้ ความก้าวหน้าอันน่าตื่นตาซึ่งขึ้นอยู่กับการปรับปรุง ISP, เซ็นเซอร์ และออพติกในด้านหนึ่ง แต่ยังต้องขอบคุณการเพิ่มพลังของหน่วยการคำนวณต่างๆ ของ SoC อีกด้วย องค์ประกอบที่ ISP สามารถไว้วางใจในการทำงานได้
การเพิ่มขึ้นของ SoCs… และ AI
ผลงานของนักวิจัยไม่เป็นเส้นตรง บางครั้งพวกเขาต้องเก็บงานไว้หลายปีก่อนจึงจะสามารถใช้งานได้ ไม่ว่าจะเป็นการปรับปรุงพาร์ติชั่นซอฟต์แวร์/ฮาร์ดแวร์ของ ISP หรือการรอความช่วยเหลือจากภายนอก องค์ประกอบสองประการมีความสำคัญต่อการปรับปรุงคุณภาพของภาพ: พลังที่เพิ่มขึ้นอย่างต่อเนื่องขององค์ประกอบต่างๆ ของชิป – CPU, GPU แต่โดยเฉพาะอย่างยิ่ง NPU – ในด้านหนึ่ง การลดขนาดของวงจรซึ่งทำให้องค์ประกอบเหล่านี้ทำให้ ISP มีความซับซ้อน ในทางกลับกัน
-เราไม่ได้ทำงานในไซโล แต่ด้วยความร่วมมือกับทีมอื่นๆ ที่พัฒนาองค์ประกอบอื่นๆ ของชิป(หมายเหตุบรรณาธิการ: โดยเฉพาะ CPU, GPU, NPU)- และเราต้องตัดสินใจเลือกเกี่ยวกับสิ่งที่เราดำเนินการใน ISP สิ่งที่จะถูกประมวลผลภายนอกด้วยการแลกเปลี่ยนข้อมูลและการเข้าถึงหน่วยความจำที่แตกต่างกัน- การระเบิดของการทำงานเกี่ยวกับ AI และตัวประมวลผลประสาท (หน่วยประมวลผลประสาท, NPU) ทำให้ผู้เล่นในอุตสาหกรรมทุกคนได้รับประโยชน์จากพันธมิตรในอุดมคติสำหรับ ISP
หากความก้าวหน้ามีมากในช่วงทศวรรษที่ผ่านมา ความก้าวหน้าก็ยากขึ้นเรื่อยๆ ในการบรรลุผลสำเร็จ และการต่อสู้ก็ใกล้เข้ามามากขึ้น -คุณภาพของภาพที่เพิ่มมากขึ้นจะไม่เพิ่มขึ้นอย่างมากเหมือนในอดีตอีกต่อไป ขณะนี้เรากำลังทำงานให้มากที่สุดเท่าที่จะเป็นไปได้เกี่ยวกับประสิทธิภาพการใช้พลังงานของอัลกอริธึม» Stephen Busch อธิบาย -หนึ่งในประเด็นหลักที่ต้องปรับปรุงคือการพัฒนาอัลกอริธึมที่เกิดจากการฝึกอบรม AI แต่เนื่องจากงบประมาณการระบายความร้อนของระบบที่สมบูรณ์(หมายเหตุบรรณาธิการ: สมาร์ทโฟนในลักษณะที่ปรากฏ)ซึ่งต้องไม่เกิน 4 W เราต้องหาสมดุลระหว่างอัลกอริธึม AI ที่มีประสิทธิภาพสูงแต่กินไฟมากกับอัลกอริธึมที่มีประสิทธิภาพมากขึ้น-
การปรับปรุงคุณภาพของภาพของเซ็นเซอร์สมาร์ทโฟน "ขนาดเล็ก" ของเราอย่างต่อเนื่องถือเป็นงานระดับสูงมาก ซึ่งต้องใช้จิตใจ (ดีมาก) จำนวนมาก
วิจัยกองทุนเพื่อค้นหาผู้มีความสามารถและวางแผนสำหรับอนาคต
กสทช. มีความรับผิดชอบระยะกลางและระยะยาว -ในช่วงเริ่มต้นของกิจกรรม เราอยู่ในโหมดการผลิต เราจำเป็นต้องพัฒนา ISP ของเราเองอย่างรวดเร็ว หากเราทำงานนี้ต่อไปอย่างชัดเจน ตอนนี้เราอยู่ในโหมดการวิจัยมากขึ้น ตอนนี้เรามองเห็นอนาคตข้างหน้าในอีกห้าปีข้างหน้า เนื่องจากในระดับที่อุตสาหกรรมก้าวไปถึงแล้ว อัลกอริธึมและเทคโนโลยีต้องใช้เวลาในการเติบโต-
หัวเว่ยใช้ประโยชน์จากศูนย์วิจัยหลายแห่งทั่วโลก โดยให้ทุนสนับสนุนโครงการมากมายเพื่อปูทางสู่อนาคต -เช่นเดียวกับผู้เล่นในอุตสาหกรรมอื่นๆ เราให้เงินสนับสนุนหลังเอกสาร ทุนการศึกษา CIFRE โครงการห้องปฏิบัติการ ฯลฯ เพื่อทำงานในหัวข้อการวิจัยประยุกต์หรือพื้นฐาน» นายบุชกล่าวต่อ -และเช่นเดียวกับในอุตสาหกรรม เราอนุญาตให้นักวิจัยของเราเผยแพร่ผลงานทั้งหมดหรือบางส่วนของพวกเขา-
เห็นได้ชัดว่าองค์ประกอบบางอย่างถูกเก็บเป็นความลับหรือถูกแปลงเป็นสิทธิบัตร แต่การวิจัยส่วนสำคัญของ Huawei พบว่าตัวเองถูกเผยแพร่สู่โดเมนของมหาวิทยาลัยของรัฐ
-มันเป็นเกมแห่งการเชื่อมโยงระหว่างธุรกิจและวัฒนธรรมของมหาวิทยาลัย แน่นอนว่าเราเปิดเผยตัวเองเพียงเล็กน้อย แต่ด้วยวิธีนี้เรามีส่วนร่วมในระบบนิเวศที่เราพบพรสวรรค์และหัวข้อการวิจัยอื่นๆ และนั่นทำให้เรามีความน่าสนใจ: นักศึกษา นักวิจัยรุ่นเยาว์ หรือนักวิจัยที่มีประสบการณ์จำเป็นต้องเผยแพร่เพื่อพัฒนาอาชีพของตน-
Huawei ก็เหมือนกับผู้เล่นในอุตสาหกรรมส่วนใหญ่ ที่ต้องการการดำเนินการนี้อยู่แล้ว:“การประมวลผลภาพที่เราต้องการไม่ได้รับการสอนในโรงเรียน และภาคเซมิคอนดักเตอร์ยังไม่เป็นที่นิยมในช่วงไม่กี่ปีที่ผ่านมา หากสิ่งนี้เริ่มมีการเปลี่ยนแปลง ภาคเซมิคอนดักเตอร์จะประสบปัญหาในการสรรหาบุคลากรในปีต่อๆ ไปเขาคาดการณ์
งานวิจัยพื้นฐานไม่มากก็น้อยของ Huawei ช่วยให้สามารถคาดการณ์ได้ -ในสาขาของเรา เราพยายามที่จะมีวิสัยทัศน์ห้าปีเกี่ยวกับ ISP“ ยินดีต้อนรับคุณบุช ในด้านอื่นๆ Huawei ก้าวไปไกลกว่านั้น ของเธอเซ็นเตอร์ ลากรองจ์* การวิจัยทางคณิตศาสตร์พื้นฐานที่เปิดในเดือนตุลาคม 2020 ในปารีสเป็นข้อพิสูจน์เรื่องนี้ ศูนย์แห่งนี้เป็นประธานโดย Pierre-Louis Lions ศาสตราจารย์ที่ Collège de France และผู้ชนะเลิศ Fields ในปี 1994 ได้เสริมความแข็งแกร่งให้กับฝรั่งเศสในสาขาคณิตศาสตร์ด้วยทีมนักคณิตศาสตร์ 30 คนรวมถึง 10 แห่งที่มีชื่อเสียงระดับนานาชาติ», แถลงข่าวของบริษัท. และสิ่งนี้โดยไม่มีคำมั่นสัญญาใด ๆ ที่จะค้นหาการประยุกต์ใช้โดยตรงกับงานของนักวิจัย
-ศูนย์วิจัยคณิตศาสตร์และคอมพิวเตอร์ลากรองจ์
การทำงานของห่วงโซ่ภาพระดับสากล
การออกแบบเชิงตรรกะของฮาร์ดแวร์ของ ISP เป็นผลิตภัณฑ์ส่วนใหญ่ของทีมฝรั่งเศส แต่การบูรณาการเข้ากับ SoC การสร้างแผนจากแผนภาพ RTL รูทีนการประมวลผลสัญญาณรบกวนดิจิทัล อัลกอริธึมหลังการประมวลผล ฯลฯ เป็นหัวข้อที่ครอบคลุมในที่อื่น ไม่ว่าจะอยู่ในลอนดอน ตัมเปเร มิวนิก ปักกิ่ง เซินเจิ้น เซี่ยงไฮ้ หรือหางโจว“Huawei ได้เปิดศูนย์วิจัยที่มีความสามารถ”นายบุชอธิบาย
-มหาวิทยาลัยตัมเปเรในประเทศฟินแลนด์เป็นที่รู้จักกันดีในด้านการวิจัยเกี่ยวกับการประมวลผลสัญญาณรบกวนดิจิทัล เป็นต้น- และเรากำลังพูดถึง ISP ที่นี่เท่านั้น การทำงานเกี่ยวกับรูปภาพนั้นต้องใช้ทรัพยากรมากขึ้น ดังนั้นเราจึงได้พบกับ Sei Kyojiro ผู้อำนวยการศูนย์วิจัย Huawei Tokyo Research Center เขาและทีมของเขาเป็นสมาชิกของหน่วยงานญี่ปุ่นที่พัฒนาโมดูลกล้องสำหรับ P20 Pro และ P30 Pro!
NRC ของ Huawei เป็นหน่วยงานในฝรั่งเศสที่บริษัทจีนเป็นเจ้าของ ซึ่งมีชาวเยอรมันเป็นหัวหน้า เขาเป็นผู้นำทีมจำนวน 30 คนจาก 14 ประเทศ หากศูนย์ฝรั่งเศสเป็นที่มาของ”ความฉลาดทางการถ่ายภาพ» มันเป็นเพียงหนึ่งในหลาย ๆ ฟันเฟืองที่จำเป็นสำหรับการพัฒนาส่วนภาพถ่าย / วิดีโอของเครื่องเล่นในโลกของสมาร์ทโฟน หากคุณเพิ่มนักวิจัยภายนอก Huawei ที่ทำงานเกี่ยวกับเซ็นเซอร์ (Sony, Samsung, OnSemi), ออพติก (Sunny Optical ฯลฯ), แอคชูเอเตอร์, ระบบป้องกันภาพสั่นไหว, อัลกอริธึม, วิศวกรซอฟต์แวร์ ฯลฯ คุณจะวัดความซับซ้อนของห่วงโซ่เทคโนโลยี . เมื่อคุณถ่ายภาพยามค่ำคืนที่สวยงาม ต้องขอบคุณผลงานของนักวิจัยและวิศวกรนับพันคน!
อนาคตของฝรั่งเศสที่ดูเหมือนจะไม่ถูกคุกคาม
Huawei เผชิญกับ “ไฟ” จากโดนัลด์ ทรัมป์ อดีตประธานาธิบดีอเมริกันรายนี้กีดกันบริษัทไม่ให้เข้าถึงดินแดนของอเมริกา และขับไล่บริษัทออกจากโรงงานของ TSMC และ Samsung แต่เหนือสิ่งอื่นใด เขาได้เพิกถอนการอนุมัติบริการของ Google ซึ่งเป็นผลกระทบอย่างหนักที่ทำให้ชาวจีนต้องพัฒนาระบบปฏิบัติการมือถือของเขาเองโดยใช้ Harmony OS ซึ่งเป็นฐาน Android แบบโอเพ่นซอร์ส แต่ถึงกระนั้นก็ดี การไม่มีบริการของ Google และ Play Store ทำให้ยากต่อการใช้งานสำหรับผู้ชมชาวตะวันตก เมื่อถามถึงหัวข้อเหล่านี้เยี่ยมมากและซอฟต์แวร์ คู่สนทนาของ Huawei หลายคนที่เราพูดคุยด้วย (ตามหลักเหตุผล) ปฏิเสธที่จะแสดงความคิดเห็น
ในส่วนของ ISP และกล้อง ก็คือตอนนี้« ธุรกิจตามปกติ »: แผนการพัฒนาไม่เปลี่ยนแปลง มีโรดแมป และ Huawei ก็สามารถเปิดตัวสมาร์ทโฟนต่อไปได้ จริงๆ แล้ว Huawei มีสต็อกชิป 5 นาโนเมตรสำหรับตลาดเอเชีย และเพื่อการส่งออก ขณะนี้รัฐบาล Biden อนุญาตให้บริษัทซื้อชิปจาก Qualcomm สิ่งที่ช่วยบริษัทไว้ได้อย่างเห็นได้ชัดคือขนาดของตลาดในประเทศ แม้ว่าบริษัทจะเปลี่ยนจากอันดับ 1 มาเป็นอันดับ 6 ในประเทศจีน แต่ประชากร 1.4 พันล้านคนในอาณาจักรกลางก็ให้โอกาสในการพัฒนาผลิตภัณฑ์ต่อไป
สำหรับการกลับมาสู่ธุรกิจของ Huawei นอกเหนือจากข่าวลือการหารือเกี่ยวกับการเรียกคืนใบอนุญาตของ Google แล้ว ในด้านโรงหล่อก็อาจมีการเปลี่ยนแปลงเช่นกัน นี่เป็นสิ่งสำคัญสำหรับบริษัทในการปรับใช้ ISP ของตนเองต่อไป ความคืบหน้าสำคัญล่าสุดของผู้ก่อตั้ง SMIC ทำให้นักวิเคราะห์เชื่อว่า TSMC หรือ Samsung จะเปิดสายการผลิตอีกครั้งในไม่ช้า แทนที่จะเปิดโรงงานอีกครั้งและสร้างรายได้ แทนที่จะปล่อยให้คนหลายพันล้านหลุดลอยไปในโรงหล่อของจีน
หากดาวสองดวงนี้สอดคล้องกัน สิ่งหนึ่งที่แน่นอนก็คือ: Huawei ไม่หยุดความพยายามในการพัฒนา และจะพร้อมที่จะฉายแสงอีกครั้งในภาพถ่าย ต้องขอบคุณโปรเซสเซอร์ภาพที่ผลิตในฝรั่งเศสบางส่วน
หมายเหตุเกี่ยวกับภาพถ่าย: เพื่อเคารพลักษณะที่เป็นความลับขององค์ประกอบการวิจัยบางอย่าง ระบบการตั้งชื่อภายใน หรือองค์ประกอบใดๆ ที่เชื่อมโยงกับความลับทางอุตสาหกรรม เราได้เบลอตารางและหน้าจอในภาพถ่ายตามคำขอของ Huawei
🔴 เพื่อไม่พลาดข่าวสาร 01net ติดตามเราได้ที่Google ข่าวสารetวอทส์แอพพ์-
