Seitsemän metakyvykkyyttä, joita laituri.ai mittaa: rakenteelliset ajattelukyvyt, jotka siirtyvät roolista, toimialasta ja työkalusta toiseen.
Mitä mittaamme
Emme testaa, osaatko Pythonia. Mittaamme rakenteellisia ajattelukykyjä, jotka siirtyvät jokaiseen rooliin, toimialaan ja tekoälytyökaluun.
Työkalukohtaiset testit vanhenevat kuukausissa. Osallistuja, joka "osaa ChatGPT:n" tänään, saattaa käyttää aivan eri tekoälypinoa ensi vuonna. Me mittaamme alla olevat ajattelumallit: ne kyvykkyydet, joilla oppii nopeasti minkä tahansa uuden tekoälytyökalun.
Metakyvykkyys on rakenteellinen ajatusmalli, esimerkiksi tapa pilkkoa epämääräinen tehtävä osiin, suodattaa kohinaa tai parantaa työtä iteroiden. Nämä mallit ennustavat tekoälysuoritusta yli työkalujen, roolien ja toimialojen.
Mitä arvioidaan
Monimutkaisten ja epämääräisten haasteiden jakaminen jäsenneltyihin ja työstettäviin osatehtäviin.
Tunnistaako osallistuja sotkuisesta kysymyksestä todellisen ongelman? Erottaako hän oireet juurisyistä? Rakentaako hän loogisen vaihejärjestyksen ennen toimintaa? Tämä on tehokkaan tekoälyyhteistyön perusta.
Useiden vaiheiden, agenttien tai tulosten yhdistäminen yhtenäiseksi kokonaisratkaisuksi.
Ajatteleeko osallistuja putkina eikä vain yksittäisinä kehotteina? Osaako hän ennakoida, miten yksi tekoälyn tulos vaikuttaa seuraavaan vaiheeseen? Suunnitteleeko hän monivaiheisen työnkulun sen sijaan, että pyrkisi yhden vastauksen ratkaisuun?
Tekoälytyökalujen täsmällinen ja tehokas käyttö laadukkaan työn tuottamiseen.
Kirjoittaako osallistuja selkeitä ja kontekstirikkaita kehotteita? Antaako hän oikeat rajaukset ja esimerkit? Saako hän hyödyllisen tuloksen ilman jatkuvaa yritystä ja erehdystä?
Työskentely tekoälyn kanssa aitona ajattelukumppanina, ei pelkkänä tekstigeneraattorina.
Kohteleeko osallistuja tekoälyä yhteistyökumppanina? Tarkistaako hän tulokset kriittisesti? Yhdistääkö hän oman alaosaamisensa tekoälyn tuottamaan sisältöön niin, että lopputulos on parempi kuin kumpikaan yksinään?
Suunnan vaihtaminen nopeasti ja luottavaisesti, kun tilanne muuttuu tai tekoälyn vastaus on väärä.
Mitä osallistuja tekee, kun tekoäly antaa huonon vastauksen? Jähmettyykö hän, hyväksyykö virheen vai jäsentääkö ongelman uudelleen? Kuinka nopeasti hän muuttaa lähestymistään menettämättä etenemistahtia?
Olennaisen tunnistaminen suurista, monimutkaisista tai kohinaisista tekoälyn tuotoksista.
Löytääkö osallistuja ydinhavainnon kahdentuhannen sanan tekoälyvastauksesta? Tietääkö hän, mihin osiin luottaa, mitkä tarkistaa ja mitkä hylätä? Osaako hän koota näkymää useista lähteistä menettämättä punaista lankaa?
Tulosten hiominen jäsentyneiden, tarkoituksenmukaisten kehotekierrosten avulla.
Pysähtyykö osallistuja ensimmäiseen vastaukseen vai parantaako sitä järjestelmällisesti? Osaako hän tunnistaa, miksi tulos on heikko, ja kohdistaa korjauksen oikeaan kohtaan? Tietääkö hän, milloin lopettaa iterointi?
Jokainen vastaus arvioidaan kaikilla seitsemällä ulottuvuudella samanaikaisesti. Pisteytys on johdonmukainen, objektiivinen ja välitön: ei arvioijakohtaista vaihtelua.
Kaikki seitsemän pistemäärää yhdistyvät yhdeksi kokonaispistemääräksi (0–100). HR näkee erittelyn tutkakaaviona ja kokonaispisteet nopeaan vertailuun.
Promptitaidot ja vastausten laatu painavat jokaisessa roolissa 50/50, ja kaikki 7 kyvykkyyttä syöttävät näitä puolikkaita tasaisesti. Kiinteät yhtäläiset painot ennustavat vähintään yhtä hyvin kuin säädetyt, joten painotuksia ei tarvitse asettaa eikä niissä voi mennä vikaan. Roolikohtaiset pakolliset vaatimukset hoidetaan kelpoisuuslistalla.
Aloita ilmainen arviointi tai tutustu HR-hallintapaneeliin.