Model AI vyspělosti
5 úrovní adopce AI: model AI vyspělosti pro engineering.
Kde vaše vývojová organizace je, co je k tomu potřeba a co měřit, abyste to doložili. Pět úrovní a žádnou nepřeskočíte: firmy, které skočí z úrovně 1 na úroveň 4 bez talentu a měření, mají hezký dashboard a žádnou odpověď na to, co řádek za AI přinesl.
Poprvé představeno na ELC meetupu #39 v Praze. Meetup
Úroveň 1
Nic v produkci
Hackathony, piloty, jedna inženýrka s Copilotem na vlastní kartu. Žádný platící uživatel ještě nespustil inferenci. Ve výsledovce žádný řádek za AI.
| KPI | Červená | Oranžová | Zelená |
|---|---|---|---|
| Podíl PR s AI | <10 % | 10 až 30 % | >30 % |
| Dny do první AI funkce v produkci | Nestanoveno | Posouvá se | <90 dní |
| Nasazené placené AI licence | <25 % | 25 až 60 % | >60 % |
Co je potřeba, abyste opustili úroveň 1
Jeden vybraný workflow.
Interní, s omezeným dopadem. První den ne pro zákazníky.
Baseline změřená dřív, než přijde AI.
Lead time, tikety, náklad na jednotku. Čísla, kterým rozumí CFO.
Šest týdnů na pokus.
Když baseline nepohne, viditelně ho ukončete.
Pilot i produkci vlastní jeden tým.
Žádné předávání přes zeď.
Další krok: Vyberte jeden workflow. Změřte baseline. Do šesti týdnů ho dodejte. Pilot i produkci od prvního dne vlastní stejný tým.
Úroveň 2
Talent
Kvůli AI se změnil váš organigram. Ne nástroje, organigram. AI enablement vede jmenovaný vlastník s rozpočtem.
| KPI | Červená | Oranžová | Zelená |
|---|---|---|---|
| Inženýři plynulí v AI, ověřeno kvartálně | <30 % | 30 až 70 % | >70 % |
| Čistá změna organizace kvůli AI za 12 měsíců | 0 % | 5 až 15 % | >15 % |
| Jeden jmenovaný vlastník AI enablementu | Ne | Jen formálně | Ano, s QBR |
Co je potřeba pro úroveň 2
Popisy pozic uvádějí plynulost v AI jako základ.
Ne bonus. Požadavek.
Rozložení lidí se viditelně posunulo.
Méně juniorních náhrad, víc seniorů plynulých v AI. Nebo naopak.
Aspoň jedna role zanikla nebo se změnila.
Protože tu práci teď dělá AI.
Jeden jmenovaný vlastník AI enablementu.
S kvartálním business review, ne se Slack kanálem.
Další krok: Přestaňte AI měřit jako úsporu nákladů. Měřte ji jako zrychlení dodávek, se strukturou, která se sčítá.
Úroveň 3
Důkaz
Na jednu otázku odpovíte jedním číslem: kolik nás AI minulý kvartál stála a co přinesla. Když se CFO a CTO neshodnou, na úrovni 3 nejste.
| KPI | Červená | Oranžová | Zelená |
|---|---|---|---|
| Náklad AI na dodanou jednotku, měsíčně | Nesleduje se | Sleduje se, bez prahu | Sleduje se, práh na QBR |
| Marže připsatelná AI | Nesleduje se | <2 % | >2 % |
| Nestabilita dodávek s AI proti práci bez AI | 2x a hůř | 1,2 až 2x | Do 20 % |
Co je potřeba pro úroveň 3
AI je samostatný řádek ve výsledovce.
Vlastní ho Engineering nebo Product. Není schovaný v účtu za cloud.
Existuje jednotková ekonomika.
Náklad na PR s AI, na tiket vyřešený AI, na jednotku dodané hodnoty.
Kontrafaktuální baseline.
Kolik by to stálo bez AI. Bez baseline žádný důkaz.
Stabilita dodávek se sleduje vedle propustnosti.
AI obvykle zvedne propustnost a sníží stabilitu. Kdo měří jen jedno, past přehlédne.
Další krok: Postavte agenta, který hodnotí výstup vaší AI: za každou session odhad, jak dlouho by to trvalo člověku. Ten poměr je váš důkaz pro úroveň 3.
Úroveň 4
AI-native
AI není nástroj, který vaši inženýři používají. Je to kolega v build pipeline. Složitost úkolů roste, autonomie roste, lidských zásahů na session ubývá.
| KPI | Červená | Oranžová | Zelená |
|---|---|---|---|
| PR mergnuté plně autonomně AI | <5 % | 5 až 30 % | >30 % |
| AI funkce v produkci pokryté evaly v CI | <40 % | 40 až 80 % | >80 % |
| EBIT připsatelný AI, podepsaný CFO | 0 % | <5 % | >5 % |
Co je potřeba pro úroveň 4
AI funkce pro zákazníky s SLA a pohotovostí.
Ne demo. Produkt.
Autonomní agenti dělají měřitelnou část interní práce.
Mergy, řešení tiketů, bezpečnostní záplaty.
Eval harness v CI.
Regrese blokují deploy. Monitoring kvality a bezpečnosti budí pohotovost.
CFO podepíše EBIT připsatelný AI.
Ne odhad směru. Konkrétní číslo.
Další krok: Najděte další věc, kterou AI umí a konkurence ji nezkopíruje nákupem stejných modelů. To je úroveň 5 a je to produktová otázka.
Úroveň 5
Vyhraný závod
Vaše výhoda už není „máme AI“. Je to produkt, který by bez vaší konkrétní AI vyspělosti nemohl existovat. Vzácné a nejspíš dočasné.
| KPI | Červená | Oranžová | Zelená |
|---|---|---|---|
| Tržby z produktových schopností závislých na AI | <5 % | 5 až 20 % | >20 % |
| Prémie při náboru AI-native lidí proti trhu | 0 % | <10 % | >10 % |
| Nové AI-native sázky v roadmapě, s vlastníky | 0 | 1 až 2 | 3+ |
Co je potřeba pro úroveň 5
Náskok u zákazníků, který si konkurence nekoupí.
Ne model. Schopnosti kolem modelu.
Nové produktové linie vznikly díky interní AI vyspělosti.
Věci, které jste dřív dodat nemohli.
Najímáte lidi, které ostatní nezískají.
Protože práce s AI je tu zajímavější než jinde.
Rychlost změnila kategorii.
Ne o 20 % rychleji. Jiný druh dodané práce.