Google introduceerde een AI-model voor het illustreren van nieuwsartikelen
In het kort
Google kondigt nieuw AI-model aan voor het produceren van hoogwaardige visuele samenvattingen van nieuwsartikelen
Google heeft aangekondigd een nieuw kunstmatige-intelligentiemodel (AI) dat automatisch "coherente en vloeiende" visuele samenvattingen van nieuwsartikelen kan genereren. De technologiegigant zegt dat het model kan helpen om informatie toegankelijker te maken voor gebruikers het genereren van “Hoogwaardige” visuele samenvattingen van lange stukken tekst.
Het model is gebaseerd op een deep learning-algoritme dat bekend staat als een transformator, dat is ontworpen om de context van een zin te "begrijpen" en vervolgens een illustratie te genereren die de belangrijke informatie uit de originele tekst behoudt.
Google voert de veel moeilijkere taak uit om de algehele context van de volledige tekst te begrijpen, in tegenstelling tot de momenteel populaire tekst-naar-afbeelding systemen, die gebaseerd zijn op een "frontale" weergave van het "wat ik zie, ik teken over"-principe. Bovendien wordt de keuze van afbeeldingen gemaakt om een "beeld als geheel" te creëren in plaats van individuele uitspraken en zinnen (zoals praktisch iedereen nu doet). Met andere woorden, afbeeldingen worden gekozen voor het hele artikel, rekening houdend met contexten en betekenissen.
Google zegt dat het model samenvattingen kan genereren van meerdere zinnen uit een nieuwsartikel en dat is ook zo getraind op een grote dataset NewsStories, dat bijna 31 miljoen artikelen, 22 miljoen foto's en 1 miljoen video's bevat, verstopt in de struiken.
In dit project gaan we een geheel nieuwe uitdaging aan: het maken van visuele samenvattingen, dit zijn langere teksten vergezeld van een verzameling afbeeldingen. Door twee MIL-subtaken (Multiple Instance Learning) te beheersen, is het doel om de semantische overeenkomst tussen elk artikel en de invoerfoto's te maximaliseren.
De eerste stap is om de afbeelding af te stemmen op het volledige artikel nadat het is vertaald in de juiste representaties met behulp van zowel de taal als de afbeeldingsencoders.
De tweede stap omvat het opdelen van een tekstartikel in afzonderlijke zinnen en het coderen van elke zin in een andere weergave. Het doel is om de onderlinge informatievoorziening te optimaliseren, defiin termen van kansverdelingen, tussen beeld- en tekstreeksen. Hierdoor werd de grootste precisie verkregen.
Concluderend, deze studie levert een verscheidenheid aan bijdragen, van toepassingen zoals geautomatiseerde verhalende illustratie tot de uitdagende taak om een verhaal en een verzameling illustraties te matchen. Het bedrijf zegt de model ook kan worden toegepast op andere talen en dat het bezig is de dataset uit te breiden met artikelen van andere sites.
Lees meer gerelateerde artikelen:
Disclaimer
In lijn met de Richtlijnen voor vertrouwensprojectenHoud er rekening mee dat de informatie op deze pagina niet bedoeld is en niet mag worden geïnterpreteerd als juridisch, fiscaal, beleggings-, financieel of enige andere vorm van advies. Het is belangrijk om alleen te beleggen wat u zich kunt veroorloven te verliezen en onafhankelijk financieel advies in te winnen als u twijfels heeft. Voor meer informatie raden wij u aan de algemene voorwaarden en de hulp- en ondersteuningspagina's van de uitgever of adverteerder te raadplegen. MetaversePost streeft naar nauwkeurige, onpartijdige berichtgeving, maar de marktomstandigheden kunnen zonder voorafgaande kennisgeving worden gewijzigd.
Over de auteur
Damir is de teamleider, productmanager en redacteur bij Metaverse Post, met onderwerpen als AI/ML, AGI, LLM's, Metaverse en Web3-gerelateerde velden. Zijn artikelen trekken maandelijks een enorm publiek van meer dan een miljoen gebruikers. Hij blijkt een expert te zijn met 10 jaar ervaring in SEO en digitale marketing. Damir is genoemd in Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto en andere publicaties. Hij reist als digitale nomade tussen de VAE, Turkije, Rusland en het GOS. Damir behaalde een bachelordiploma in natuurkunde, wat hem volgens hem de kritische denkvaardigheden heeft gegeven die nodig zijn om succesvol te zijn in het steeds veranderende landschap van internet.
Meer artikelen
Damir is de teamleider, productmanager en redacteur bij Metaverse Post, met onderwerpen als AI/ML, AGI, LLM's, Metaverse en Web3-gerelateerde velden. Zijn artikelen trekken maandelijks een enorm publiek van meer dan een miljoen gebruikers. Hij blijkt een expert te zijn met 10 jaar ervaring in SEO en digitale marketing. Damir is genoemd in Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto en andere publicaties. Hij reist als digitale nomade tussen de VAE, Turkije, Rusland en het GOS. Damir behaalde een bachelordiploma in natuurkunde, wat hem volgens hem de kritische denkvaardigheden heeft gegeven die nodig zijn om succesvol te zijn in het steeds veranderende landschap van internet.
