Ugrás a kezdőoldalra Ugrás a tartalomhoz Ugrás a menüre

Az AI-nak jobb a szókincse, mint az embernek

2024. szeptember 12. 8:57 // Forrás: ELTE
A mesterséges intelligencia alapú szoftverek verbális intelligenciáját vizsgálták az ELTE PPK-n. A kutatás nyomán kiderült, hogy szóismeretükben a gépek még a doktori fokozattal rendelkező anyanyelvi beszélőket is maguk mögé utasítják.

A nagy nyelvi modellek (large language models) olyan mesterségesintelligencia-típusok, amelyek képesek ember alkotta szövegekhez hasonló tartalmak létrehozására. Ezek a modellek – például a népszerű ChatGPT – forradalmi változást hoztak az AI világában, és mára már képesek igen élethűen utánozni az emberi képességeket.

A szakembereket régóta foglalkoztatja, mennyire intelligensek a gépek az emberekhez képest. A klasszikus összehasonlító tesztek (mint például a Turing-teszt) azonban nem képesek differenciálni az emberi teljesítményben: csak azt lehet mérni velük, hogy a gépek mennyire képesek utánozni az emberi kogníció univerzális aspektusait, például a kommunikációs készséget. Ezzel szemben az emberi intelligencia vizsgálata épp az egyéni különbségekre fókuszál – maga az IQ is egy olyan relatív mutató, amely a teljesítményünket másokéhoz viszonyítja.

Egyes kutatók szerint az AI intelligenciáját úgy lehet a legjobban mérni, ha a modellekkel embereknek tervezett pszichometriai teszteket végeztetünk el. Ennek fényében Kovács Kristóf, az ELTE PPK tudományos főmunkatársa, a Kognitív Képességek Kutatócsoport vezetője és a tesztező platformokkal foglalkozó Klein Balázs vizsgálatukban két mesterséges intelligencia alkalmazás (ChatGPT és Bing) verbális intelligenciáját hasonlították össze több mint 9000 emberével.

Ehhez egy számítógépes adaptív szókincstesztet használtak, ahol kilenc felsorolt szó közül mindig azt a kettőt kellett kiválasztani, amelyek jelentésben a legközelebb álltak egymáshoz. Az adaptív tesztelés során egy algoritmus választja ki az elemeket egy kérdésbankból úgy, hogy a nehézségi szint mindig közel legyen az alany képességeihez. Ezáltal pontosabb eredményt kaphatunk, mint egy fix kérdésekből álló teszt esetén.

A teszten mindkét nyelvi modell magas teljesítményt nyújtott: 20-ból 19 embernél – azaz az emberek 95%-ánál – jobb eredményt értek el, és jobban teljesítettek a doktori fokozattal rendelkező anyanyelvi beszélőknél is. Ha ezek a gépek emberek lennének, kiemelkedő tehetségnek számítanának – hívják fel a figyelmet a szerzők, akik szerint valószínűsíthető, hogy az AI alkalmazásoknak a közeljövőben az emberek 100%-ánál jobb szókincsük lesz.

A gépek kiemelkedő teljesítményük ellenére azonban vétettek néhány hibát is. Az ismétlődő kérdések 42%-ánál eltérő válaszokat adtak az egyes alkalmakkor – ilyen embereknél nem történik. Emellett esetenként „hallucinációik” is voltak: olyan szavakkal válaszoltak, amelyek nem szerepeltek a megadott opciók között. (Ez akkor is megtörtént, ha korábban már megválaszolták helyesen az adott kérdést, tehát nem arról volt szó, hogy nem tudták a megoldást.) Ezek a hibák azonban nem a szoftverek hiányosságaira utalnak, hanem sokkal inkább arra mutatnak rá, hogy az embereknek szánt pszichometriai teszteknek a mesterséges intelligencia esetében vannak korlátai.

Az eredményeket olvasva felmerülhet a kérdés, hogy miként különböztethetjük meg a mesterséges intelligencia által generált tartalmakat és az ember által írt szövegeket, ha már a gépek is ilyen magas verbális teljesítményre képesek. A kutatók azt tanácsolják, ne a túl felszínes, hanem épp a túl szofisztikált kommunikáció esetén fogjunk gyanút – hiszen könnyen előfordulhat, hogy egy AI szoftver színesebb szókincsből dolgozik, mint mi.

vehir.hu
további cikkek
Bemutatjuk Vikit, a Vehir-TikTok legújabb digitális arcát! VehírTikTok Bemutatjuk Vikit, a Vehir-TikTok legújabb digitális arcát! Örömmel jelentjük be, hogy a Vehir TikTok csatornáján mostantól egy igazán különleges kolléga veszi át a hírek és érdekességek bemutatását: Viki, a mesterséges intelligencia által generált, digitális híradósunk! Viki nemcsak modern, de innovatív módon hozza el nektek a legfrissebb információkat Veszprémből. Szeretnénk, ha ti is részesei lennétek ennek a technológiai újításnak, hiszen Veszprém és a jövő kéz a kézben járnak. 2024. szeptember 23. 14:41 Alfa generáció és mesterséges intelligencia: út a jövő oktatásához oktatás Alfa generáció és mesterséges intelligencia: út a jövő oktatásához A Veszprémi Szakképzési Centrum Jendrassik-Venesz Technikuma adott otthont a "Jövőformálók: Alfa generáció a Mesterséges Intelligencia világában" című konferenciának szombaton. 2024. szeptember 14. 22:39 A technológia is az ember műve, ettől még nem tűnik el az analóg világ A technológia is az ember műve, ettől még nem tűnik el az analóg világ Can Togaynak nyílt kiállítása a Dubniczay-palotában szombat este, Rettentő gondolatok boltja címmel. A mesterséges intelligencia által generált képek készítési módja Can szerint rendkívül megosztja az embereket, pedig benne van minden, amit az ember tud. Vagyis, a technológia is az ember műve. A kiállítás, melyet Somlai-Fischer Ádám nyitott meg, október hatodikáig látogatható. 2024. szeptember 8. 11:21 Mesterséges intelligenciával alkotott műsorvezető mutatkozott be a magyar köztévén mesterséges intelligencia Mesterséges intelligenciával alkotott műsorvezető mutatkozott be a magyar köztévén  A mesterséges intelligencia segítségével megalkotott műsorvezető mutatkozott be a Duna tudományos-ismeretterjesztő műsorában, a Deltában 2024. április 16. 21:19

A következő oldal tartalma a kiskorúakra káros lehet.

Ha korlátozná a korhatáros tartalmak elérését gépén, használjon szűrőprogramot!

Az oldal tartalma az Mttv. által rögzített besorolás szerint V. vagy VI. kategóriába tartozik.