รายงานข่าว เทคโนโลยี
มิถุนายน 05, 2023

LLaMa ด้วยพารามิเตอร์ 7 พันล้านพารามิเตอร์บรรลุการอนุมานที่รวดเร็วปานสายฟ้าบนชิป Apple M2 Max

ในบทสรุป

LLaMa โมเดลทำงานที่ 40 โทเค็นต่อวินาทีบนชิป M2 Max สาธิตการใช้งาน CPU 0% จุดประกายจินตนาการของผู้ที่ชื่นชอบ AI และผู้ใช้

โมเดล AI สามารถปรับให้เหมาะกับความต้องการเฉพาะบุคคลและเรียกใช้บนอุปกรณ์ส่วนตัวได้ ให้ความช่วยเหลือส่วนบุคคลและปรับปรุงงานประจำ

ความสำเร็จที่ก้าวล้ำในด้าน AI ได้รับการเปิดเผยในฐานะ LLaMa ด้วยพารามิเตอร์อันน่าทึ่งถึง 7 พันล้านพารามิเตอร์ ตอนนี้ทำงานด้วยความเร็วที่น่าประทับใจที่ 40 โทเค็นต่อวินาทีบน MacBook ที่ติดตั้งชิป M2 Max อันล้ำสมัย ความสำเร็จที่น่าทึ่งนี้เกิดขึ้นได้จากการอัปเดต GIT repository ล่าสุดโดย เกรกานอฟซึ่งประสบความสำเร็จในการใช้การอนุมานแบบจำลองบน โลหะ GPUซึ่งเป็นตัวเร่งพิเศษที่พบในชิปล่าสุดของ Apple

LLaMa ด้วยพารามิเตอร์ 7 พันล้านพารามิเตอร์บรรลุการอนุมานที่รวดเร็วปานสายฟ้าบนชิป Apple M2 Max
เครดิต: Metaverse Post (mpost.io)
แนะนำ: Guanaco กลายเป็นโอเพ่นซอร์สที่มีศักยภาพ ChatGPT คู่แข่ง

การใช้การอนุมานแบบจำลองบน Metal GPU ให้ผลลัพธ์ที่ไม่ธรรมดา การใช้ฮาร์ดแวร์พิเศษนี้ทำให้ LLaMa โมเดลนี้แสดงให้เห็นถึงการใช้งาน CPU 0% อย่างน่าประหลาดใจ โดยควบคุมพลังการประมวลผลของแกนโลหะทั้ง 38 แกนได้อย่างมีประสิทธิภาพ ความสำเร็จนี้ไม่เพียงแต่แสดงให้เห็นถึงความสามารถของโมเดล แต่ยังเน้นย้ำถึงทักษะและความเชี่ยวชาญอันยอดเยี่ยมของ Greganov ในฐานะวิศวกรที่โดดเด่น

ผลกระทบของการพัฒนานี้มีขอบเขตกว้างขวาง โดยจุดประกายจินตนาการของผู้ที่ชื่นชอบ AI และผู้ใช้ ด้วยความเป็นส่วนตัว LLaMa โมเดลที่ทำงานในพื้นที่ งานประจำสามารถจัดการได้อย่างง่ายดายโดยบุคคล นำไปสู่ยุคใหม่ของ การทำให้เป็นโมดูล. แนวคิดหมุนรอบก โมเดลขนาดใหญ่ได้รับการฝึกฝน จากส่วนกลางซึ่งผู้ใช้แต่ละรายจะปรับแต่งและปรับแต่งตามข้อมูลส่วนตัวของตน ส่งผลให้ผู้ช่วย AI เป็นส่วนตัวและมีประสิทธิภาพสูง

วิสัยทัศน์ของการมีความเป็นส่วนตัว LLaMa รูปแบบการช่วยเหลือบุคคลในชีวิตประจำวันมีศักยภาพมหาศาล ด้วยการแปลโมเดลบนอุปกรณ์ส่วนบุคคล ผู้ใช้จะได้รับประโยชน์จาก AI อันทรงพลังในขณะเดียวกัน รักษาการควบคุมข้อมูลของพวกเขา. การแปลเป็นภาษาท้องถิ่นนี้ยังช่วยให้มั่นใจได้ถึงเวลาในการตอบสนองที่รวดเร็ว ทำให้สามารถโต้ตอบกับผู้ช่วย AI ได้อย่างรวดเร็วและราบรื่น

การผสมผสานระหว่างโมเดลขนาดใหญ่และการอนุมานอย่างมีประสิทธิภาพบนฮาร์ดแวร์พิเศษช่วยปูทางสำหรับอนาคตที่ AI จะกลายเป็นส่วนสำคัญของชีวิตผู้คน ให้ความช่วยเหลือส่วนบุคคลและปรับปรุงงานประจำ

ความก้าวหน้าเช่นนี้ทำให้เราเข้าใกล้การตระหนักถึงโลกที่โมเดล AI สามารถปรับแต่งให้เหมาะกับความต้องการของแต่ละบุคคลและทำงานบนอุปกรณ์ส่วนตัวได้ โดยผู้ใช้แต่ละคนมีความสามารถในการปรับแต่งและเพิ่มประสิทธิภาพของตนเอง LLaMa แบบจำลองที่อิงตามข้อมูลเฉพาะ ศักยภาพสำหรับประสิทธิภาพและประสิทธิผลที่ขับเคลื่อนด้วย AI นั้นไร้ขีดจำกัด

ความสำเร็จที่เห็นได้ใน LLaMa ประสิทธิภาพของโมเดลบนชิป Apple M2 Max เป็นข้อพิสูจน์ถึง ความก้าวหน้าอย่างรวดเร็ว กำลังทำในการวิจัยและพัฒนา AI ด้วยวิศวกรที่ทุ่มเทเช่น Greganov ผลักดันขอบเขตของสิ่งที่เป็นไปได้ อนาคตถือเป็นคำมั่นสัญญาว่าจะเป็นส่วนตัว มีประสิทธิภาพ และดำเนินการในท้องถิ่น โมเดล AI ที่จะเปลี่ยนแปลงวิธีการ เรามีปฏิสัมพันธ์กับเทคโนโลยี

อ่านเพิ่มเติมเกี่ยวกับ AI:

ข้อจำกัดความรับผิดชอบ

สอดคล้องกับ แนวทางโครงการที่เชื่อถือได้โปรดทราบว่าข้อมูลที่ให้ไว้ในหน้านี้ไม่ได้มีจุดมุ่งหมายและไม่ควรตีความว่าเป็นคำแนะนำทางกฎหมาย ภาษี การลงทุน การเงิน หรือรูปแบบอื่นใด สิ่งสำคัญคือต้องลงทุนเฉพาะในสิ่งที่คุณสามารถที่จะสูญเสียได้ และขอคำแนะนำทางการเงินที่เป็นอิสระหากคุณมีข้อสงสัยใดๆ สำหรับข้อมูลเพิ่มเติม เราขอแนะนำให้อ้างอิงข้อกำหนดและเงื่อนไขตลอดจนหน้าช่วยเหลือและสนับสนุนที่ผู้ออกหรือผู้ลงโฆษณาให้ไว้ MetaversePost มุ่งมั่นที่จะรายงานที่ถูกต้องและเป็นกลาง แต่สภาวะตลาดอาจมีการเปลี่ยนแปลงได้โดยไม่ต้องแจ้งให้ทราบล่วงหน้า

เกี่ยวกับผู้เขียน

Damir เป็นหัวหน้าทีม ผู้จัดการผลิตภัณฑ์ และบรรณาธิการที่ Metaverse Postซึ่งครอบคลุมหัวข้อต่างๆ เช่น AI/ML, AGI, LLMs, Metaverse และ Web3- สาขาที่เกี่ยวข้อง บทความของเขาดึงดูดผู้ชมจำนวนมากกว่าล้านคนทุกเดือน ดูเหมือนว่าเขาจะเป็นผู้เชี่ยวชาญที่มีประสบการณ์ 10 ปีในด้าน SEO และการตลาดดิจิทัล Damir ได้รับการกล่าวถึงใน Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto และสิ่งพิมพ์อื่น ๆ เขาเดินทางไปมาระหว่างสหรัฐอาหรับเอมิเรตส์ ตุรกี รัสเซีย และ CIS ในฐานะคนเร่ร่อนทางดิจิทัล Damir สำเร็จการศึกษาระดับปริญญาตรีสาขาฟิสิกส์ ซึ่งเขาเชื่อว่าทำให้เขามีทักษะการคิดเชิงวิพากษ์ที่จำเป็นต่อการประสบความสำเร็จในภูมิทัศน์ที่เปลี่ยนแปลงตลอดเวลาของอินเทอร์เน็ต 

บทความอื่น ๆ
ดาเมียร์ ยาลอฟ
ดาเมียร์ ยาลอฟ

Damir เป็นหัวหน้าทีม ผู้จัดการผลิตภัณฑ์ และบรรณาธิการที่ Metaverse Postซึ่งครอบคลุมหัวข้อต่างๆ เช่น AI/ML, AGI, LLMs, Metaverse และ Web3- สาขาที่เกี่ยวข้อง บทความของเขาดึงดูดผู้ชมจำนวนมากกว่าล้านคนทุกเดือน ดูเหมือนว่าเขาจะเป็นผู้เชี่ยวชาญที่มีประสบการณ์ 10 ปีในด้าน SEO และการตลาดดิจิทัล Damir ได้รับการกล่าวถึงใน Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto และสิ่งพิมพ์อื่น ๆ เขาเดินทางไปมาระหว่างสหรัฐอาหรับเอมิเรตส์ ตุรกี รัสเซีย และ CIS ในฐานะคนเร่ร่อนทางดิจิทัล Damir สำเร็จการศึกษาระดับปริญญาตรีสาขาฟิสิกส์ ซึ่งเขาเชื่อว่าทำให้เขามีทักษะการคิดเชิงวิพากษ์ที่จำเป็นต่อการประสบความสำเร็จในภูมิทัศน์ที่เปลี่ยนแปลงตลอดเวลาของอินเทอร์เน็ต 

Hot Stories
เข้าร่วมจดหมายข่าวของเรา
ข่าวล่าสุด

ความอยากอาหารของสถาบันเติบโตขึ้นสู่ Bitcoin ETFs ท่ามกลางความผันผวน

การเปิดเผยผ่านการยื่นเอกสาร 13F เผยให้เห็นนักลงทุนสถาบันที่มีชื่อเสียงกำลังเล่น Bitcoin ETFs ซึ่งตอกย้ำถึงการยอมรับที่เพิ่มขึ้นของ ...

รู้เพิ่มเติม

วันพิพากษามาถึง: ชะตากรรมของ CZ แขวนอยู่ในสมดุลขณะที่ศาลสหรัฐฯ พิจารณาคำร้องของ DOJ

ฉางเผิง จ้าว เตรียมเผชิญโทษจำคุกในศาลสหรัฐฯ ในเมืองซีแอตเทิลวันนี้

รู้เพิ่มเติม
เข้าร่วมชุมชนเทคโนโลยีที่เป็นนวัตกรรมของเรา
อ่านเพิ่มเติม
อ่านเพิ่มเติม
Injective ผนึกกำลัง AltLayer เพื่อนำการรักษาความปลอดภัยกลับมาสู่ inEVM
บัญชีธุรกิจ รายงานข่าว เทคโนโลยี
Injective ผนึกกำลัง AltLayer เพื่อนำการรักษาความปลอดภัยกลับมาสู่ inEVM
May 3, 2024
Masa ร่วมมือกับ Teller เพื่อแนะนำกลุ่มการให้ยืมของ MASA ซึ่งช่วยให้สามารถกู้ยืม USDC บนฐานได้
ตลาด รายงานข่าว เทคโนโลยี
Masa ร่วมมือกับ Teller เพื่อแนะนำกลุ่มการให้ยืมของ MASA ซึ่งช่วยให้สามารถกู้ยืม USDC บนฐานได้
May 3, 2024
Velodrome เปิดตัวเวอร์ชัน Superchain Beta ในอีกไม่กี่สัปดาห์ข้างหน้าและขยายข้ามบล็อคเชน OP Stack Layer 2
ตลาด รายงานข่าว เทคโนโลยี
Velodrome เปิดตัวเวอร์ชัน Superchain Beta ในอีกไม่กี่สัปดาห์ข้างหน้าและขยายข้ามบล็อคเชน OP Stack Layer 2
May 3, 2024
CARV ประกาศความร่วมมือกับ Aethir เพื่อกระจายอำนาจชั้นข้อมูลและแจกจ่ายรางวัล
บัญชีธุรกิจ รายงานข่าว เทคโนโลยี
CARV ประกาศความร่วมมือกับ Aethir เพื่อกระจายอำนาจชั้นข้อมูลและแจกจ่ายรางวัล
May 3, 2024
CRYPTOMERIA LABS PTE. บจก.