ไขปริศนาการเดิมพันของ Meta เกี่ยวกับอาวุธปัญญาประดิษฐ์ใหม่: ชิปที่พัฒนาเองสองตัว + ซูเปอร์คอมพิวเตอร์

ต้นฉบับ: เทคโนโลยี Tencent

ในช่วงไม่กี่ปีที่ผ่านมา Meta ซึ่งเป็นบริษัทแม่ของ Facebook ได้ลงทุนอย่างมากใน Metaverse และได้ทำงานอย่างต่อเนื่องในการพัฒนาฮาร์ดแวร์และซอฟต์แวร์ที่เกี่ยวข้อง บางทีก็ละเลยแนวโน้มล่าสุดในด้านปัญญาประดิษฐ์เพื่อจุดประสงค์นี้ แต่เมื่อปัญญาประดิษฐ์กำเนิดระเบิดขึ้น Meta ดูเหมือนจะปรับทิศทางบริษัทใหม่และเริ่มใช้ความพยายามในด้านปัญญาประดิษฐ์ เมื่อวันพฤหัสบดีตามเวลาท้องถิ่นในสหรัฐอเมริกา Meta ได้เปิดตัวชิปที่พัฒนาเองสองตัวสำหรับปัญญาประดิษฐ์ และเปิดเผยความคืบหน้าล่าสุดในซูเปอร์คอมพิวเตอร์ปัญญาประดิษฐ์

ที่งานเสมือนจริงเมื่อวันพฤหัสบดี Meta ได้สาธิตโครงสร้างพื้นฐานภายในที่พัฒนาขึ้นสำหรับปริมาณงาน AI รวมถึงการสนับสนุนการเรียกใช้ generative AI ซึ่งเป็นเทคโนโลยีใหม่ที่บริษัทได้รวมเข้ากับเครื่องมือการออกแบบและสร้างโฆษณาที่เพิ่งเปิดตัว นี่เป็นความพยายามของ Meta เพื่อแสดงความแข็งแกร่ง ก่อนหน้านี้ บริษัทได้นำระบบฮาร์ดแวร์ที่เป็นมิตรกับ AI มาใช้อย่างเชื่องช้า ซึ่งบั่นทอนความสามารถในการก้าวให้ทันคู่แข่งอย่าง Google และ Microsoft

"การสร้างความสามารถด้านฮาร์ดแวร์ของเราเองทำให้เราสามารถควบคุมทุกเลเยอร์ของสแตกได้ตั้งแต่การออกแบบศูนย์ข้อมูลไปจนถึงเฟรมเวิร์กการฝึกอบรม" Alexis Bjorling รองประธานฝ่ายโครงสร้างพื้นฐานของ Meta กล่าว "การผสานรวมในแนวดิ่งระดับนี้จำเป็นต่อการขับเคลื่อนการวิจัย AI ไปข้างหน้า"

ในช่วงทศวรรษที่ผ่านมา Meta ได้ใช้เวลาหลายพันล้านในการสรรหานักวิทยาศาสตร์ด้านข้อมูลชั้นนำและสร้างปัญญาประดิษฐ์ประเภทใหม่ ซึ่งรวมถึงปัญญาประดิษฐ์ที่ขับเคลื่อนเครื่องมือค้นหา ตัวกรองการจัดการ และคำแนะนำโฆษณาในแอปและบริการต่างๆ อัจฉริยะ แต่บริษัทประสบปัญหาในการเปลี่ยนนวัตกรรมการวิจัย AI ที่มีความทะเยอทะยานให้เป็นผลิตภัณฑ์ โดยเฉพาะอย่างยิ่งเมื่อเป็นเรื่องของ AI กำเนิด

จนถึงปี 2565 Meta จะเรียกใช้ปริมาณงาน AI โดยใช้ CPU และชิปแบบกำหนดเองที่ออกแบบมาเพื่อเร่งอัลกอริทึม AI แต่ Meta ได้ยกเลิกชิปแบบกำหนดเองที่มีแผนจะเปิดตัวในปี 2022 เนื่องจากจะต้องมีการออกแบบใหม่ครั้งใหญ่ของศูนย์ข้อมูลหลายแห่ง และสั่งซื้อ GPU Nvidia มูลค่าหลายพันล้านดอลลาร์แทน

ชิปเร่งความเร็ว AI

เพื่อพลิกสถานการณ์ Meta วางแผนที่จะเริ่มพัฒนาชิปภายในที่มีความทะเยอทะยานมากขึ้น ซึ่งจะเปิดตัวในปี 2568 ชิปนี้สามารถใช้เพื่อฝึกโมเดลปัญญาประดิษฐ์และรองรับการใช้งาน

Meta เรียกชิปตัวใหม่นี้ว่า Meta Training and Inference Accelerator หรือเรียกสั้นๆ ว่า MTIA และจัดหมวดหมู่เป็น "ตระกูลชิป" สำหรับเร่งความเร็วการฝึกอบรม AI และเวิร์กโหลดการอนุมาน "การอนุมาน" หมายถึงการรันโมเดลที่ผ่านการฝึกอบรม MTIA เป็นวงจรรวมเฉพาะแอปพลิเคชัน (ASIC) ซึ่งเป็นชิปที่รวมวงจรต่างๆ ไว้บนแผงวงจรเดียว ทำให้สามารถตั้งโปรแกรมให้ทำงานหนึ่งอย่างขึ้นไปพร้อมกันได้

รูปที่ 1: ชิป AI ที่ปรับแต่งสำหรับปริมาณงาน AI

Bjorling กล่าวต่อว่า: "เพื่อให้ได้ประสิทธิภาพและประสิทธิภาพที่ดีขึ้นในปริมาณงานที่สำคัญของเรา เราต้องการโซลูชันแบบกำหนดเองที่ออกแบบร่วมกับรุ่น ชุดซอฟต์แวร์ และฮาร์ดแวร์ระบบ เพื่อมอบประสบการณ์ที่ดียิ่งขึ้น"

ชิปปัญญาประดิษฐ์แบบกำหนดเองกำลังกลายเป็นวัตถุดิบหลักของบริษัทเทคโนโลยีขนาดใหญ่มากขึ้นเรื่อยๆ Google ได้พัฒนาโปรเซสเซอร์ TPU (Tensor Processing Unit) สำหรับฝึกอบรมระบบปัญญาประดิษฐ์ขนาดใหญ่ เช่น PaLM-2 และ Imagen Amazon ให้บริการชิปที่เป็นกรรมสิทธิ์แก่ลูกค้า AWS สำหรับการฝึกอบรม (Trainium) และการอนุมาน (Inferentia) มีรายงานว่า Microsoft กำลังทำงานร่วมกับ AMD ในชิปปัญญาประดิษฐ์ที่เรียกว่า "Athena"

Meta กล่าวว่าบริษัทได้พัฒนา MTIA รุ่นแรก (MTIA v1) ในปี 2020 และผลิตโดยใช้กระบวนการ 7 นาโนเมตร สามารถขยายหน่วยความจำจาก 128 MB เป็น 128 GB และในเกณฑ์มาตรฐานที่ออกแบบโดย Meta นั้น Meta อ้างว่า MTIA สามารถจัดการโมเดล AI ที่ "ซับซ้อนต่ำ" และ "ซับซ้อนปานกลาง" ได้อย่างมีประสิทธิภาพมากกว่า GPU

Meta กล่าวว่ายังมีงานอีกมากที่ต้องทำในส่วนของหน่วยความจำชิปและระบบเครือข่าย ซึ่งทั้งสองอย่างนี้ยังคงเป็นปัญหาคอขวดเนื่องจากโมเดล AI มีขนาดเพิ่มขึ้นและจำเป็นต้องกระจายเวิร์กโหลดไปยังชิปหลายตัว บังเอิญ Meta เพิ่งได้รับทีมเทคโนโลยีเครือข่ายปัญญาประดิษฐ์ในออสโลของ British chip unicorn Graphcore ตามที่เป็นอยู่ MTIA มุ่งเน้นที่การอนุมานอย่างเข้มงวด ไม่ใช่การฝึกอบรม ที่ "ภาระงานคำแนะนำ" สำหรับกลุ่มแอปพลิเคชัน Meta

แต่ Meta ย้ำว่าการปรับปรุง MTIA ได้ปรับปรุงประสิทธิภาพของบริษัท "อย่างมีนัยสำคัญ" เมื่อเรียกใช้ปริมาณงานคำแนะนำ ทำให้ Meta สามารถเรียกใช้ปริมาณงาน AI ที่ "ปรับปรุงมากขึ้น" และ "ล้ำสมัย" ได้

เอไอ ซูเปอร์คอมพิวเตอร์

บางทีวันหนึ่งในอนาคต Meta จะส่งมอบปริมาณงาน AI ส่วนใหญ่ให้กับ MTIA แต่สำหรับตอนนี้ โซเชียลเน็ตเวิร์กยักษ์ใหญ่กำลังพึ่งพา Research SuperCluster ซึ่งเป็นซูเปอร์คอมพิวเตอร์ที่เน้นการวิจัย

Research SuperCluster จะเปิดตัวในเดือนมกราคม 2565 ซึ่งประกอบโดย Penguin Computing, Nvidia และ Pure Storage และได้ดำเนินการก่อสร้างระยะที่สองเสร็จสิ้นแล้ว ตอนนี้ Research SuperCluster มีระบบ Nvidia DGX A100 ทั้งหมด 2,000 ระบบ พร้อมด้วย GPU Nvidia A100 จำนวน 16,000 ตัว Meta กล่าว

เหตุใด Meta จึงสร้างซูเปอร์คอมพิวเตอร์ภายในองค์กร ประการแรก มีแรงกดดันจากยักษ์ใหญ่ด้านเทคโนโลยีรายอื่น เมื่อไม่กี่ปีที่ผ่านมา Microsoft ได้โฆษณาซูเปอร์คอมพิวเตอร์ปัญญาประดิษฐ์ที่พัฒนาร่วมกับ OpenAI และเพิ่งกล่าวว่าจะร่วมมือกับ Nvidia เพื่อสร้างซูเปอร์คอมพิวเตอร์ปัญญาประดิษฐ์ใหม่บนคลาวด์ Azure ในขณะเดียวกัน Google ยังได้กล่าวถึงซูเปอร์คอมพิวเตอร์ปัญญาประดิษฐ์ของตนเอง ซึ่งมี GPU Nvidia H100 ถึง 26,000 ตัว ซึ่งแซงหน้าซูเปอร์คอมพิวเตอร์ของ Meta อย่างมาก

รูปที่ 2: ซูเปอร์คอมพิวเตอร์ของ Meta สำหรับการวิจัยปัญญาประดิษฐ์

แต่ Meta กล่าวว่านอกเหนือจากการติดตามเพื่อนคนอื่นๆ แล้ว Research SuperCluster ยังช่วยให้นักวิจัยสามารถใช้ตัวอย่างในโลกแห่งความเป็นจริงจากระบบของ Meta เพื่อฝึกโมเดลได้ สิ่งนี้แตกต่างจากโครงสร้างพื้นฐาน AI ก่อนหน้านี้ของบริษัท ซึ่งสามารถใช้ประโยชน์จากชุดข้อมูลโอเพ่นซอร์สและที่เปิดเผยต่อสาธารณะเท่านั้น

โฆษกของ Meta กล่าวว่า "ซูเปอร์คอมพิวเตอร์ Research SuperCluster AI ใช้เพื่อพัฒนาการวิจัย AI ในหลายด้าน รวมถึง AI กำเนิด ซึ่งจริง ๆ แล้วมีความเกี่ยวข้องอย่างใกล้ชิดกับผลผลิตของการวิจัย AI การจัดหาโครงสร้างพื้นฐานที่ล้ำสมัยเพื่อให้พวกเขาสามารถ พัฒนาโมเดลและมอบแพลตฟอร์มการฝึกอบรมเพื่อพัฒนา AI ให้ก้าวหน้า"

ที่จุดสูงสุด Research SuperCluster สามารถบรรลุพลังการประมวลผล 5 exaflops ซึ่ง Meta อ้างว่าเป็นหนึ่งในคอมพิวเตอร์ที่เร็วที่สุดในโลก Meta กล่าวว่าใช้ Research SuperCluster เพื่อฝึก LLaMA ซึ่งเป็นโมเดลภาษาขนาดใหญ่ เมื่อต้นปีที่ผ่านมา Meta เปิดโอกาสให้นักวิจัยเข้าถึงแบบจำลองภาษาขนาดใหญ่แบบ "การเผยแพร่แบบปิด" โมเดล LLaMA ที่ใหญ่ที่สุดได้รับการฝึกอบรมบน 2048 A100 GPUs และใช้เวลา 21 วัน Meta กล่าว

"Research SuperCluster จะช่วยให้นักวิจัย AI ของ Meta สร้างโมเดล AI ใหม่และดียิ่งขึ้นซึ่งสามารถเรียนรู้จากตัวอย่างนับล้านล้านและทำงานในหลายร้อยภาษาที่แตกต่างกันได้อย่างราบรื่น" โฆษกของ Meta กล่าว วิเคราะห์ข้อความ รูปภาพ และวิดีโอ พัฒนาความเป็นจริงเสริมใหม่ เครื่องมือ และอื่นๆ"

โปรแกรมแปลงไฟล์วิดีโอ

นอกเหนือจาก MTIA แล้ว Meta กำลังพัฒนาชิปอีกตัวเพื่อจัดการกับปริมาณงานคอมพิวเตอร์บางประเภท เรียกว่า Meta Scalable Video Processor หรือเรียกสั้น ๆ ว่า MSVP ชิปนี้เป็นโซลูชันวงจรรวมเฉพาะแอปพลิเคชัน (ASIC) ตัวแรกของ Meta ที่พัฒนาขึ้นภายในองค์กรและออกแบบมาโดยเฉพาะเพื่อรองรับความต้องการในการประมวลผลของวิดีโอตามต้องการและการสตรีม

อย่างที่บางคนอาจจำได้ Meta เริ่มสร้างชิปวิดีโอฝั่งเซิร์ฟเวอร์แบบกำหนดเองเมื่อหลายปีก่อน และในปี 2019 ได้ประกาศ ASIC สำหรับการแปลงรหัสวิดีโอและการอนุมาน MSVP เป็นหนึ่งในผลลัพธ์ของความพยายามเหล่านี้ และเป็นผลมาจากการแข่งขันใหม่ในพื้นที่การสตรีม

“บน Facebook เพียงอย่างเดียว ผู้คนใช้เวลา 50% ในการดูวิดีโอ เราต้องให้บริการอุปกรณ์ต่างๆ ทั่วโลก (เช่น อุปกรณ์พกพา แล็ปท็อป ทีวี ฯลฯ) ตัวอย่างเช่น วิดีโอที่อัปโหลดไปยัง Facebook หรือ Instagram จะถูกแปลงเป็นหลาย บิตสตรีมที่มีรูปแบบการเข้ารหัส ความละเอียด และคุณภาพที่แตกต่างกัน MSVP สามารถตั้งโปรแกรมและปรับขนาดได้ และสามารถกำหนดค่าให้รองรับการแปลงรหัสคุณภาพสูงที่จำเป็นสำหรับ VOD ได้อย่างมีประสิทธิภาพ ตลอดจนมีเวลาแฝงต่ำและเวลาประมวลผลเร็วขึ้นซึ่งจำเป็นสำหรับการถ่ายทอดสด"

รูปที่ 3: ซิลิกอนที่กำหนดเองของ Meta ได้รับการออกแบบมาเพื่อเร่งปริมาณงานวิดีโอ เช่น การสตรีมและการแปลงรหัส

Meta กล่าวว่า แผนของบริษัทคือการลดภาระงานการประมวลผลวิดีโอส่วนใหญ่ที่ "เสถียรและเติบโตเต็มที่" ไปยัง MSVP โดยใช้ซอฟต์แวร์เข้ารหัสวิดีโอเฉพาะสำหรับปริมาณงานที่ต้องการการปรับแต่งเฉพาะและปรับปรุงคุณภาพ "อย่างมาก" Meta ยังกล่าวด้วยว่างานของ MSVP ยังคงปรับปรุงคุณภาพวิดีโอด้วยวิธีการประมวลผลล่วงหน้า เช่น การลดสัญญาณรบกวนอัจฉริยะและการปรับปรุงภาพ และวิธีการหลังการประมวลผล เช่น การลบสิ่งประดิษฐ์และความละเอียดขั้นสูง

Reddy และ Chen Yunqing กล่าวว่า "ในอนาคต MSVP จะช่วยให้เราสามารถรองรับกรณีการใช้งานและข้อกำหนดที่สำคัญที่สุดของ Meta ได้มากขึ้น รวมถึงวิดีโอสั้น ทำให้สามารถส่งมอบปัญญาประดิษฐ์เชิงสร้างสรรค์ AR/VR และเนื้อหาเสมือนจริงอื่นๆ ได้อย่างมีประสิทธิภาพ" Reddy และ Chen Yunqing กล่าว

เอไอ โฟกัส

หากมีหัวข้อทั่วไปหนึ่งในการประกาศเกี่ยวกับฮาร์ดแวร์ล่าสุด แสดงว่า Meta กำลังพยายามอย่างมากที่จะเร่งความเร็วของการพัฒนา AI โดยเฉพาะอย่างยิ่งเมื่อเป็นเรื่องของ AI กำเนิด

ในเดือนกุมภาพันธ์ของปีนี้ Mark Zuckerberg CEO ของ Meta กล่าวว่าได้ทำให้การปรับปรุงพลังการประมวลผล AI ของ Meta มีความสำคัญสูงสุด โดยประกาศการจัดตั้งทีม AI เชิงสร้างสรรค์ระดับบนสุด ซึ่งในคำพูดของเขา จะช่วยให้บริษัทมีการพัฒนา "เทอร์โบชาร์จ". Andrew Bosworth CTO ของ Meta ยังกล่าวเมื่อเร็วๆ นี้ว่า AI เชิงกำเนิดเป็นพื้นที่ที่เขาและ Zuckerberg ใช้เวลามากที่สุด Yang Likun หัวหน้านักวิทยาศาสตร์ของ Meta กล่าวว่าบริษัทวางแผนที่จะใช้เครื่องมือปัญญาประดิษฐ์เชิงสร้างสรรค์เพื่อสร้างวัตถุในความจริงเสมือน

ในเดือนเมษายน Zuckerberg กล่าวในการเรียกรายได้ไตรมาสแรกของ Meta ว่า "เรากำลังสำรวจประสบการณ์การแชทใน WhatsApp และ Messenger เครื่องมือสร้างภาพสำหรับโพสต์และโฆษณาบน Facebook และ Instagram และวิดีโอเมื่อเวลาผ่านไป และประสบการณ์หลายรูปแบบ ฉันหวังว่าสิ่งเหล่านี้ เครื่องมือจะมีคุณค่าสำหรับทุกคนตั้งแต่คนทั่วไปจนถึงผู้สร้างไปจนถึงธุรกิจ ตัวอย่างเช่น ฉันคาดการณ์ว่าเมื่อเราได้รับประสบการณ์นี้แล้วจะมีผู้คนจำนวนมากที่สนใจข้อมูลทางธุรกิจ สนใจตัวแทน AI ในการจัดส่งและการสนับสนุนลูกค้าเมื่อเวลาผ่านไป สิ่งนี้จะขยายไปถึงงานของเราในโลกเสมือนจริง ซึ่งจะทำให้ผู้คนสร้างอวาตาร์ วัตถุ โลก และรวมโค้ดทั้งหมดเข้าด้วยกันได้ง่ายขึ้น"

ในบางแง่ Meta รู้สึกถึงแรงกดดันที่เพิ่มขึ้นจากนักลงทุนที่กังวลว่าบริษัทไม่เคลื่อนไหวเร็วพอที่จะจับตลาดที่มีศักยภาพขนาดใหญ่สำหรับปัญญาประดิษฐ์เชิงกำเนิด ปัจจุบันบริษัทไม่มีผลิตภัณฑ์ที่สามารถแข่งขันกับแชทบอทอย่าง Bard, Bing หรือ ChatGPT ยังไม่มีความคืบหน้ามากนักในการสร้างภาพซึ่งเป็นอีกประเด็นสำคัญของการเติบโตอย่างรวดเร็ว

หากการคาดการณ์เหล่านี้ถูกต้อง ขนาดตลาดทั้งหมดที่สามารถระบุตำแหน่งได้สำหรับซอฟต์แวร์ generative AI อาจสูงถึง 150 พันล้านดอลลาร์ ธนาคารเพื่อการลงทุนของสหรัฐ Goldman Sachs คาดการณ์ว่าสิ่งนี้จะเพิ่ม GDP ขึ้น 7%

แม้ว่าการคาดการณ์บางอย่างจะเป็นจริง แต่ก็สามารถชดเชยเงินลงทุนหลายพันล้านใน Metaverse ในชุดหูฟังความจริงเสริม ซอฟต์แวร์การประชุม และเทคโนโลยี Metaverse เช่น Horizon Worlds Reality Labs แผนกความเป็นจริงเสริมของ Meta รายงานผลขาดทุนสุทธิ 4 พันล้านดอลลาร์ในไตรมาสที่แล้ว และคาดว่าผลขาดทุนจากการดำเนินงานจะยังคงเพิ่มขึ้นตลอดปี 2566

ดูต้นฉบับ
  • รางวัล
  • แสดงความคิดเห็น
  • แชร์
แสดงความคิดเห็น
ไม่มีความคิดเห็น
  • หัวข้อถ่ายทอดสด