Googlen työntekijät kyseenalaistavat Gemini 4:n koodaustaidot

Alphabet ↗ 1.02% kohtaa sisäisiä epäilyksiä tulevan Gemini 4 -tekoälymallinsa suorituskyvystä. Bloombergin keskiviikkona julkaiseman raportin mukaan työntekijät kertovat järjestelmän kamppailevan todellisten koodaustehtävien kanssa, vaikka se on saavuttanut vahvoja tuloksia alan vertailutesteissä.bloomberg

Kuilu vertailutulosten ja käytännön suorituskyvyn välillä on herättänyt huolta yhtiön sisällä, kun se valmistautuu julkaisemaan seuraavan lippulaivamallinsa. Gemini-mallit ovat lähes jokaisen Googlen myymän tuotteen taustalla, hakukoneen tekoälyvastauksista Mapsiin, Gmailiin ja Chromeen, joita kutakin käyttää yli miljardi ihmistä.investing

Vertailutulokset vs. todellinen käyttö

Vaikka Gemini 4 on menestynyt hyvin alan standardivertailuissa, joilla mitataan mallien tehokkuutta, se toimii heikommin, kun työntekijät soveltavat sitä käytännön tehtäviin, kertovat Bloombergin haastattelemat suoraan kehitystyöhön osallistuneet henkilöt. Malli kamppailee erityisesti tiettyjen koodaustehtävien kanssa, jotka ovat yksi suurten kielimallien kaupallisesti arvokkaimmista sovelluksista.bloomberg

Jotkut työntekijät uskovat, että kilpailijat Anthropic ja OpenAI kehittävät mallejaan, joita kutsutaan sisäisesti nimillä Fable ja Astra, nopeammin kuin Google edistää Geminiä. Bloomberg raportoi myös, että Googlen oli tarkoitus julkaista kesäkuussa eri versio nimeltä Gemini 3.5 Pro, mutta se hylkäsi suunnitelman.investing+1

Googlen vastine

Google kiisti väitteet Gemini 4:n heikosta suorituskyvystä ja viittasi Google DeepMindin johtajan Koray Kavukcuoglun viime viikolla antamiin kommentteihin, joiden mukaan hän on rohkaistunut mallin suorituskyvystä. Mallin kehitykseen perehtynyt Googlen työntekijä kertoi Bloombergille, että yhtiön sisällä vallitsee "laaja yhteisymmärrys" siitä, että Gemini 4 on kehityksen kärjessä, ja kiisti mallien kamppailevan todellisten koodaustehtävien kanssa.investing

Muut työntekijät yhtyivät tähän näkemykseen, ja osa uskoo Gemini 4:n saavuttaneen johtavat tekoälylaboratoriot.investing

Markkinoiden reaktio

Alphabetin osake laski raportin myötä keskiviikkona ja kavensi aiempaa nousuaan. Osake oli noussut yli 2 % ennen Bloombergin jutun julkaisua, mutta laski noin 0,5 %:n nousuun ennen pörssin sulkeutumista. Reaktio korosti sijoittajien herkkyyttä kaikille signaaleille siitä, että Google saattaa menettää asemiaan tekoälykilvassa, joka on tullut määrittämään suurimpien teknologiayhtiöiden välistä kilpailukenttää.investing