Najnovší výskum americkej Marylandskej univerzity v Baltimore a spoločnosti Microsoft odhalil prekvapivé zistenia: poľština sa ukázala ako najefektívnejší jazyk pre zadávanie príkazov umelej inteligencii.
V teste 26 jazykov získala poľština prvé miesto, pred francúzštinou a taliančinou, pričom angličtina skončila až šiesta. Informuje o tom TASR.
Benchmark OneRuler: dlhé texty ako skúška schopností
Výskum bol súčasťou benchmarku OneRuler, ktorý hodnotí schopnosť veľkých jazykových modelov (LLM) spracovávať dlhé textové vstupy, pričom testované úlohy zahŕňali vyhľadávanie a agregáciu informácií. Kontexty sa pohybovali od 8 000 do 128 000 tokenov, čo simulovalo prácu s rozsiahlymi dokumentmi, napríklad odbornými štúdiami alebo reportami.
Prekvapujúce bolo, že hoci sú modely AI zvyčajne trénované najmä na angličtine a čínštine, poľština dosiahla 88 % presnosť, zatiaľ čo angličtina len 84 %. Čínsky jazyk skončil až štvrtý od konca, s 62 % presnosťou. To ukazuje, že množstvo dát, na ktorých je model trénovaný, nemusí vždy korelovať s jeho efektívnosťou pri konkrétnych jazykoch.
Vplyv dĺžky textu na výkon modelov
Vedci upozorňujú, že s rastúcou dĺžkou textu sa rozdiel medzi jazykmi prehlbuje. Vysokozdrojové jazyky, ako poľština, francúzština alebo taliančina, si udržiavajú vysokú presnosť, zatiaľ čo nízkozdrojové jazyky, napríklad swahilčina alebo sothčina, výrazne strácajú. Pri najdlhších testovaných textoch sa rozdiel vo výkonnosti zvýšil z 11 % až na 34 %, čo je významný posun, ktorý dokazuje, že poľština zvláda komplexné vstupy veľmi dobre.
Prečo poľština vedie
Aj napriek relatívne menšiemu množstvu tréningových dát sa poľština ukázala ako efektívnejšia pri zadávaní komplexných otázok (promptovaní). Modely dokážu zachytiť kontext presnejšie, vyhýbajú sa chybám a poskytujú kvalitnejšie odpovede pri analýze dlhých dokumentov. Autori štúdie uviedli, že poľština je ideálna na promptovanie AI, čo znamená zadávanie dlhých a štruktúrovaných inštrukcií, ktoré model správne spracuje.
Logika jazyka vyhráva
Výskum ukazuje, že najlepší jazyk pre komunikáciu s AI nemusí byť angličtina, ako sa často predpokladá. Pre rozsiahle a komplexné vstupy je poľština momentálne líder medzi testovanými jazykmi a ukazuje, že kvalita spracovania jazyka závisí nielen od množstva dát, ale aj od štruktúry a logiky samotného jazyka. Tieto zistenia môžu byť cenné pre firmy a vývojárov pracujúcich s AI, ktorí hľadajú efektívny spôsob, ako zadávať príkazy a analyzovať rozsiahle texty.
