Google říká, že jeho nový chatbot Meena je nejlepší na světě

Kategorie: Umělá inteligence Vyslán 30. ledna

Google spustil chatbota poháněného neuronovou sítí s názvem Meena o kterém tvrdí, že je lepší než jakýkoli jiný chatbot.

Přepad dat: Meena byla vyškolena na neuvěřitelných 341 gigabajtech veřejného chatování na sociálních sítích – 8,5krát více dat než OpenAI GPT-2. Google říká, že Meena může mluvit v podstatě o čemkoli a může si dokonce vymýšlet (špatné) vtipy .

Proč na tom záleží: Konverzace s otevřeným koncem, která pokrývá širokou škálu témat, je těžká a většina chatbotů nestíhá. V určitém okamžiku většina říká věci, které nedávají smysl nebo odhalují nedostatek základních znalostí o světě. Chatbot, který se takovým chybám vyhýbá, ujde dlouhou cestu k tomu, aby se umělá inteligence cítila lidštější a postavy ve videohrách byly živější.

Smysl a specifičnost: Aby společnost Meena otestovala, vyvinula novou metriku, kterou nazývá Sensibleness and Specificity Average (SSA), která zachycuje důležité atributy pro přirozené konverzace, například to, zda každý výrok dává smysl v kontextu – což mnoho chatbotů umí – a je specifické pro to, co bylo právě řečeno, což je těžší.

Co myslíš? Pokud například řeknete Mám rád tenis a chatbot odpoví To je hezké, odpověď dává smysl, ale není konkrétní. Mnoho chatbotů spoléhá na triky, jako je tento, aby skryli skutečnost, že nevědí, o čem mluvíte. Na druhou stranu reakce typu Já taky – nemůžu se Rogera Federera nabažit je specifická. Google pomocí crowdworkerů vygeneroval ukázkové konverzace a ohodnotil projevy v přibližně 100 konverzacích. Meena získala skóre SSA 79 %, ve srovnání s 56 % pro Mitsuku, nejmodernějšího chatbota, který za poslední čtyři roky vyhrál Loebnerovu cenu. Dokonce i partneři lidské konverzace dosáhli v tomto novém testu pouze 86 %.

Mohu mluvit s Meenou? Ještě ne. Google říká, že nezveřejní veřejné demo, dokud neprověří model z hlediska bezpečnosti a zaujatosti, což je pravděpodobně dobrá věc. Když Microsoft v roce 2016 zveřejnil svého chatbota Tay na Twitteru, během několika hodin začal chrlit rasistické, misogynní invektivy.