Max Planck Instituut: GPT-3 Meting van cognitieve vermogens levert verbazingwekkende resultaten op
In het kort
AI bevindt zich al op zijn minst op het niveau van mensen bij het nemen van beslissingen.
Het Duitse Max Planck Instituut voor Biologische Cybernetica besloot dit te testen en voerde een onderzoek uit om de cognitieve vermogens van mensen en GPT-3.
De onderzoekers besloten dit te controleren door canonieke psychologische tests op mensen te gebruiken om hun vaardigheden op het gebied van besluitvorming, het zoeken naar informatie en oorzaak-gevolgrelaties te testen.
Nog opvallender is het feit dat dit vermogen van de AI niet alleen op het niveau van mensen zit, maar ook dezelfde fouten maakt die mensen gewoon zijn.
De besluitvormingsvaardigheden van AI zijn al vergelijkbaar met die van mensen, zo blijkt uit het resultaat van de GPT-3 meting van cognitieve vaardigheden uitgevoerd bij het Max Planck Instituut.
Liefhebbers en sceptici van grote taalmodellen houden van GPT-3 blijven heftig betogen over de vraag of de doorbraak van de ChatGPT bot, die gebruikt GPT-3 technologie, bewijzen dat de bot net zo intelligent is als mensen. Het debat is echter zinloos: The defibegrip van de term "intelligentie" is dubbelzinnig. Iedereen beschouwt intelligentie als iets anders, en het bereik van definities is enorm:
- Vanuit defistelling van Linda Gottfredson: "Intelligentie is een integraal mentaal vermogen dat het vermogen omvat om samen te vatten, te plannen, problemen op te lossen, abstract te denken, complexe ideeën te begrijpen en snel te leren van ervaring."
- Ondertussen, volgens Edward Boring, "is intelligentie wat een intelligentietest meet."
De situatie wordt gecompliceerd door het feit dat er, wat je ook zegt, geen duidelijke reden is voor de opkomst van grote taalmodellen van intelligentie die vergelijkbaar zijn met die van een mens. Het enige dat tenslotte bestaat GPT-3 (En ChatGPT) kan doen, is behendig het volgende woord voorspellen op basis van enorme statistieken van woordreeksvoorbeelden in door mensen geschreven teksten.
Deze vaardigheid alleen maakt het echter mogelijk ChatGPT verrassende creativiteit: Naast het beantwoorden van elke gestelde vraag, is het ook in staat om verhalen, wetenschappelijke artikelen, scripties en zelfs code te schrijven (wat genoeg is om enkele examens halen op menselijk niveau).
Maar is dit reden genoeg om de opkomst van AI te bespreken (gebaseerd op GPT-3 en ChatGPT) met intelligentie vergelijkbaar met menselijke intelligentie?
Laten we, om deze vraag te beantwoorden, aan die van Gregory Treverton denken defimening dat "intelligentie uiteindelijk het vertellen van verhalen is" (dit defiuitleg verklaart waarom intelligentie en rede in het Engels door hetzelfde woord worden omvat).
De logica hier is deze:
- Intelligentie, in welke vorm dan ook defined, is bedoeld voor complexe besluitvorming bij niet-triviale taken.
- Bij het nemen van dergelijke beslissingen speelt naast formeel denken ook narratief denken een grote rol; in de jurisprudentie bijvoorbeeld, wanneer jurybeslissingen worden genomen, speelt niet formeel denken, maar het verhaal een doorslaggevende rol in de manier waarop zij bewijs beoordelen en oordeelsbeslissingen nemen.
- Dus waarom niet ChatGPT's uitstekend ontwikkelde verhalende en formele denken de basis vormen voor het ontstaan van mensachtige intelligentie?
Het Duitse Max Planck Instituut voor Biologische Cybernetica besloot dit te testen en voerde een onderzoek uit om de cognitieve vermogens van mensen en GPT-3. De onderzoekers besloten dit te controleren door canonieke psychologische tests op mensen te gebruiken om hun vaardigheden op het gebied van besluitvorming, het zoeken naar informatie en oorzaak-gevolgrelaties te testen.
De resultaten van de studie, gepubliceerd in het tijdschrift Proceedings of the National Academy of Sciences, zijn verbluffend:
- AI lost het probleem op van het nemen van de juiste beslissing op basis van beschrijvingen even goed als of beter dan mensen.
- Nog opvallender is het feit dat dit vermogen van de AI niet alleen op het niveau van mensen zit, maar ook dezelfde fouten maakt die mensen gewoon zijn.
Bovendien werd het vermogen om de juiste beslissingen te nemen getest in taken beschreven door vignetten: een korte beschrijving van mensen en/of situaties waarop mensen hun ideeën, waarden, sociale normen of hun eigen indrukken prijsgeven. Het lijkt erop dat niets van het bovenstaande kan bestaan in AI. Dit weerhoudt AI er echter niet van om dezelfde beslissingen te nemen als mensen.
In de andere twee cognitieve vaardigheden schiet AI tekort bij mensen.
- Bij het zoeken naar informatie, GPT-3 vertoont geen tekenen van gericht onderzoek.
- Bij oorzaak-gevolgproblemen GPT-3 is op het niveau van een klein kind, maar dat is voor nu.
De auteurs zijn van mening dat AI, om mensen met deze twee vaardigheden in te halen, alleen actieve communicatie met ons en met de rest van de wereld mist, maar dat dit snel voorbij zal gaan. Miljoenen communiceren immers al met ChatGPT.
Lees meer over ChatGPT en AI:
Disclaimer
In lijn met de Richtlijnen voor vertrouwensprojectenHoud er rekening mee dat de informatie op deze pagina niet bedoeld is en niet mag worden geïnterpreteerd als juridisch, fiscaal, beleggings-, financieel of enige andere vorm van advies. Het is belangrijk om alleen te beleggen wat u zich kunt veroorloven te verliezen en onafhankelijk financieel advies in te winnen als u twijfels heeft. Voor meer informatie raden wij u aan de algemene voorwaarden en de hulp- en ondersteuningspagina's van de uitgever of adverteerder te raadplegen. MetaversePost streeft naar nauwkeurige, onpartijdige berichtgeving, maar de marktomstandigheden kunnen zonder voorafgaande kennisgeving worden gewijzigd.
Over de auteur
Damir is de teamleider, productmanager en redacteur bij Metaverse Post, met onderwerpen als AI/ML, AGI, LLM's, Metaverse en Web3-gerelateerde velden. Zijn artikelen trekken maandelijks een enorm publiek van meer dan een miljoen gebruikers. Hij blijkt een expert te zijn met 10 jaar ervaring in SEO en digitale marketing. Damir is genoemd in Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto en andere publicaties. Hij reist als digitale nomade tussen de VAE, Turkije, Rusland en het GOS. Damir behaalde een bachelordiploma in natuurkunde, wat hem volgens hem de kritische denkvaardigheden heeft gegeven die nodig zijn om succesvol te zijn in het steeds veranderende landschap van internet.
Meer artikelen
Damir is de teamleider, productmanager en redacteur bij Metaverse Post, met onderwerpen als AI/ML, AGI, LLM's, Metaverse en Web3-gerelateerde velden. Zijn artikelen trekken maandelijks een enorm publiek van meer dan een miljoen gebruikers. Hij blijkt een expert te zijn met 10 jaar ervaring in SEO en digitale marketing. Damir is genoemd in Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto en andere publicaties. Hij reist als digitale nomade tussen de VAE, Turkije, Rusland en het GOS. Damir behaalde een bachelordiploma in natuurkunde, wat hem volgens hem de kritische denkvaardigheden heeft gegeven die nodig zijn om succesvol te zijn in het steeds veranderende landschap van internet.
