Google oznámil první samozdokonalující se model AI Promptbreeder, který se vyvíjí miliardkrát rychleji než lidé
Vývojáři DeepMind společnosti Google představili „Promptbreeder (PB): sebereferenční sebezdokonalování prostřednictvím zrychlené evoluce.Tento průkopnický vývoj slibuje nový přístup ke zlepšení schopností velkých jazykových modelů (LLM) využitím síly zrychlené evoluce.
PODOBNÉ ČLÁNKY: ChatGPT Injekce aneb jak získat nejlepší možnou odezvu od robota |
Jádrem této inovace je zjištění, že inteligence velkého jazykového modelu je úzce svázána s kvalitou textových podnětů, které přijímá. V podstatě platí, že čím chytřejší jsou podněty, tím inteligentnější a přesnější jsou reakce modelu. V důsledku toho je kritickým úkolem vytvořit optimální strategie nápovědy pro efektivní vedení těchto modelů.
Konvenční pobídkové strategie, jako je myšlenkový řetězec nebo přístupy plánování a rozhodování, nepopiratelně zlepšily uvažovací schopnosti LLM. Tyto strategie, často ručně vymyšlené, však mohou zaostávat za optimálním výkonem.
Promptbreeder je řešení, které využívá evoluční mechanismus k opakovanému zpřesňování strategií nápověd. To, co odlišuje PB, je jeho pozoruhodná schopnost vylepšovat s každou novou generací nejen nápovědu, ale také vlastní schopnosti zdokonalování nápověd.
Zde je návod, jak evoluční schéma Promptbreeder funguje:
- Pod vedením LLM generuje Promptbreeder populaci evolučních jednotek, z nichž každá obsahuje dva „nápovědy k řešení“ a jednu „nápovědu k mutaci“.
- Binární turnajový genetický algoritmus je pak použit k vyhodnocení zdatnosti těchto mutantů na základě tréninkové sady a identifikuje ty, kteří mají lepší výkon.
- Tento cyklický proces se neustále vrací ke kroku 1, což nakonec vede k vývoji generací „nápověd-řešení“.
Během několika generací využívá Promptbreeder pět různých tříd mutačních operátorů k mutaci jak „nápověd k řešení“, tak „nápovědi k mutaci“. Brilantnost tohoto schématu spočívá ve skutečnosti, že tyto mutující „nápovědy-řešení“ se postupně stávají inteligentnějšími. „Nápovědy k mutaci“ jsou zde stěžejní a poskytují pokyny, jak mutovat, aby se zlepšily „nápovědy k řešení“.
Promptbreeder je v podstatě sebezdokonalující se sebereferenční systém, který funguje v oblasti přirozeného jazyka. Zásadní je, že nevyžaduje žádné složité dolaďování neuronové sítě. Místo toho vytváří přizpůsobené rady pečlivě optimalizované pro konkrétní aplikace.
Počáteční experimenty přinesly slibné výsledky. Promptbreeder překonal všechny ostatní současné nápovědní metody v matematických, logických úlohách se zdravým rozumem a jazykové klasifikaci, včetně identifikace nenávistných projevů.
Při pohledu do budoucna prochází Promptbreeder přísným testováním své životaschopnosti při vytváření celého myšlenkového procesu. To zahrnuje prozkoumání strategie N-hint, kde jsou rady podmíněně aplikovány, čímž se připravuje cesta pro vývoj předprogramů pro politiky LLM zapojené do sporných sokratovských dialogů.
Promptbreeder má stále omezení ve srovnání s expanzivní povahou lidských myšlenkových procesů. Topologie nápovědy zůstává pevná a Promptbreeder primárně přizpůsobuje obsah nápovědy, nikoli samotný algoritmus nápovědy. Lidské myšlení zahrnuje mnohostranné aspekty mimo jazyk, včetně intonace, obrazů a multimodálního systému, který Promptbreeder ještě nemá.
Přečtěte si další související témata:
Odmítnutí odpovědnosti
V souladu s Pokyny k projektu Trust, prosím vezměte na vědomí, že informace uvedené na této stránce nejsou určeny a neměly by být vykládány jako právní, daňové, investiční, finanční nebo jakékoli jiné formy poradenství. Je důležité investovat jen to, co si můžete dovolit ztratit, a v případě pochybností vyhledat nezávislé finanční poradenství. Pro další informace doporučujeme nahlédnout do smluvních podmínek a také na stránky nápovědy a podpory poskytnuté vydavatelem nebo inzerentem. MetaversePost se zavázala poskytovat přesné a nezaujaté zprávy, ale podmínky na trhu se mohou bez upozornění změnit.
O autorovi
Damir je vedoucí týmu, produktový manažer a editor ve společnosti Metaverse Post, pokrývající témata jako AI/ML, AGI, LLM, Metaverse a Web3- související obory. Jeho články přitahují každý měsíc masivní publikum čítající více než milion uživatelů. Jeví se jako odborník s 10 lety zkušeností v oblasti SEO a digitálního marketingu. Damir byl zmíněn v Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto a další publikace. Jako digitální nomád cestuje mezi SAE, Tureckem, Ruskem a SNS. Damir získal bakalářský titul z fyziky, o kterém se domnívá, že mu dal dovednosti kritického myšlení potřebné k úspěchu v neustále se měnícím prostředí internetu.
Další článkyDamir je vedoucí týmu, produktový manažer a editor ve společnosti Metaverse Post, pokrývající témata jako AI/ML, AGI, LLM, Metaverse a Web3- související obory. Jeho články přitahují každý měsíc masivní publikum čítající více než milion uživatelů. Jeví se jako odborník s 10 lety zkušeností v oblasti SEO a digitálního marketingu. Damir byl zmíněn v Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto a další publikace. Jako digitální nomád cestuje mezi SAE, Tureckem, Ruskem a SNS. Damir získal bakalářský titul z fyziky, o kterém se domnívá, že mu dal dovednosti kritického myšlení potřebné k úspěchu v neustále se měnícím prostředí internetu.