SVS Digital

AI svetovanje in uvajanje v podjetja

Kako pripraviti načrt AI pilotnega projekta pred začetkom razvoja

Odobrena zamisel za AI še ni načrt za razvoj. Če ekipa začne nastavljati orodja, preden se dogovori, kdo bo rezultat uporabljal, kateri podatki so dovoljeni in kako bo odkrila napako, lahko pilot ustvari privlačen prikaz, ne da bi odgovoril na poslovno vprašanje. Kratek načrt pilota pred začetkom razvoja uskladi lastnika procesa, uporabnike in tehnično ekipo.

Ekipa SVS Digital · Objavljeno

Začnite tukaj

Načrt pripravite za en proces in eno odločitev. Zapišite sedanji problem, uporabnike, natančen korak, pri katerem sme pomagati AI, dovoljene vhodne in prepovedane podatke, pričakovani rezultat, človeški pregled, povezave s sistemi, testni vzorec, izhodišče, merila sprejema, odziv ob napaki, odgovorne osebe in končno odločitev. Produkcijsko uvedbo, dodatne oddelke in nepreverjena dejanja izločite iz obsega. Pred uporabo živih podatkov ali dejanskimi spremembami v sistemih naj načrt potrdijo lastnik procesa, predstavnik uporabnikov, tehnični skrbnik ter potrebni strokovnjaki za varnost, varstvo podatkov, pravo ali panogo.

1. Začnite z odločitvijo, ki jo mora pilot podpreti

Poslovni problem opišite z današnjim delom. Primer: povpraševanja čakajo v skupnem e-poštnem predalu, zaposleni pa iste podatke znova vnašajo v CRM. Nato določite odločitev po koncu pilota: omejen produkcijski preizkus, popravek pristopa, dodatno zbiranje dokazov ali ustavitev. »Raziskati AI« in »povečati učinkovitost« sta temi, ne odločitvi.

Določite enega lastnika procesa in ljudi, na katere bo rezultat vplival. Okvir NIST AI RMF zahteva popis konteksta, namena, uporabnikov, prizadetih skupin, koristi, stroškov in predvidljivih vplivov, preden se tveganja merijo in obravnavajo. Tudi odločitev, da se projekt ne nadaljuje, je veljaven rezultat. Načrt naj zato razkrije predpostavke, ki jih mora pilot potrditi ali ovreči.

  • En sedanji proces in ena opazna težava.
  • Imenovani lastnik procesa s pooblastilom za sprejem ali ustavitev pilota.
  • Prepoznani uporabniki in drugi prizadeti, ne le naročnik projekta.
  • Zapisana končna odločitev: razširitev, popravek, raziskava ali ustavitev.
NIST: jedro okvira AI Risk Management Framework

2. Omejite obseg na eno opravilo in njegove predaje

Opišite sprožilec, korak, pri katerem pomaga AI, pričakovani rezultat, osebo za pregled in naslednjo postajo v procesu. Ločite pomoč od samostojne avtomatizacije. Pomočnik lahko pripravi osnutek odgovora, ki ga potrdi zaposleni; avtomatiziran sistem pa lahko razvrsti zahtevo in spremeni čakalno vrsto. Rešitvi potrebujeta različna dovoljenja, zmogljivost pregleda in odziv ob napaki.

UK AI Knowledge Hub priporoča razčlenitev dela na procese, opravila in korake ter opozarja, da AI pri različnih opravilih ni enako zanesljiv. Namesto prenosa uspeha z ene naloge na drugo svetuje preverjanje z znanimi primeri. Izrecno izločite denimo določanje cen, kadrovske odločitve, pravne presoje, vračila ali nenadzorovana sporočila strankam, če ta dejanja niso bila posebej ocenjena in odobrena.

  • Sprožilec, vhod, korak z AI, rezultat in naslednji prejemnik.
  • Dovoljena skupina uporabnikov, kanal, jezik in vrsta primera.
  • Človeške odločitve in pot za predajo zahtevnejših primerov.
  • Dejanja zunaj obsega, zapisana v razumljivem jeziku.
UK AI Knowledge Hub: uporaba AI pri delu

3. Pred izbiro orodja opredelite podatke, sisteme in spremembe

Naštejte vsak vir podatkov, njegovega skrbnika, nujna polja in dovoljenje za uporabo reprezentativnih testnih primerov. Zapišite osebne ali občutljive podatke, ki jih je treba odstraniti, prikriti ali povsem izločiti. Enako določite za rezultate: mesto hrambe, čas hranjenja, dostop in postopek popravka.

Povezave obravnavajte ločeno od vedenja modela. Branje zbirke znanja, iskanje stranke in zapis v CRM so tri različna dovoljenja. Za prvi preizkus uporabite testno okolje ali jasno označene testne zapise. Če je nujen zapis v živ sistem, določite odobritev, zaščito pred podvajanjem, dnevnik, povrnitev spremembe in osebo, ki preveri končni poslovni zapis. Sporočena potrditev še ni dokaz, da je bilo zunanje dejanje uspešno.

  • Dovoljeni viri in polja z imenovanim skrbnikom.
  • Reprezentativni testni podatki brez nepotrebnih osebnih informacij.
  • Dovoljenja za branje in zapis pri vsakem povezanem sistemu.
  • Določeni hramba, dostop, popravek, beleženje in povrnitev sprememb.

4. Določite merila sprejema, preden kdo vidi predstavitev

Testni vzorec sestavite iz običajnih primerov, pogostih izjem in redkih primerov z resnimi posledicami. Za vsak primer zapišite pričakovani rezultat ali odločitev, dovoljeno odstopanje in pregledovalca. Ne merite le kakovosti odgovora: vključite dokončanje procesa, čas pregleda, popravke, neuspele povezave, sprejetost med uporabniki in stroške delovanja, kadar vplivajo na odločitev.

UK AI Knowledge Hub priporoča zgodnje načrtovanje vrednotenja, določitev izhodišča ter spremljanje kakovosti, učinkovitosti, zadovoljstva uporabnikov, uporabe in stroškov. Tudi NIST zahteva dokumentirane testne vzorce, metrike in sprejemljive meje glede na dejanski kontekst uporabe. Ena skupna ocena lahko prikrije kritično napako: pilot lahko dobro pripravlja osnutke, vendar je vseeno neuspešen, če pošlje neodobreno sporočilo ali spregleda pomembno izjemo.

  • Izhodišče sedanjega procesa z zapisanim virom in obdobjem.
  • Znani primeri za običajno delo, izjeme in poti ob napaki.
  • Ločena merila kakovosti, procesa, pregleda, uporabe in stroškov.
  • Kritične napake, ki takoj ustavijo pilot.
UK AI Knowledge Hub: merjenje učinka rešitev AINIST: jedro okvira AI Risk Management Framework

5. Določite človeški pregled, usposabljanje in strokovne presoje

Imenujte pregledovalca, informacije, ki jih vidi, potreben čas in ravnanje ob negotovosti. »Človek v zanki« ni učinkovita varovalka, če oseba ne more odkriti napake, razveljaviti rezultata ali preveriti izvornega podatka. Vključite navodila za uporabnike, pot za prijavo težav in odgovorno osebo, ki sme pilot ustaviti.

Tveganja in obveznosti so odvisni od namena, ljudi in panoge. Pregled Akta o umetni inteligenci Evropske komisije ločuje prepovedane, visokotvegane, preglednostne in minimalno tvegane uporabe ter med občutljivejšimi področji navaja zaposlovanje, dostop do ključnih storitev in nekatere varnostne uporabe. Načrt naj zato označi namen za ustrezno pravno, varnostno, podatkovno ali panožno presojo, ne pa razglasi skladnosti na podlagi splošnega seznama.

  • Pregledovalec, njegova pooblastila, dostop do virov in razpoložljivi čas.
  • Navodila uporabnikom o pravilni uporabi, omejitvah in predaji.
  • Imenovani skrbnik incidentov in odločitve o ustavitvi.
  • Zgodaj prepoznane pravne, zasebnostne, varnostne ali panožne presoje.
NIST: jedro okvira AI Risk Management FrameworkEvropska komisija: pregled Akta o umetni inteligenci

6. Zaključite z rezultati, odgovornostmi in odločitvijo o nadaljevanju

Naštejte dejanske rezultate pilota: nastavljen prototip, potrjen testni vzorec, dnevnik rezultatov, odzive uporabnikov, znane omejitve, ugotovitve o povezavah in priporočilo. Razdelite odgovornost za pripravo podatkov, dostope, testiranje, sodelovanje uporabnikov, tehnične spremembe in končno potrditev. Naročnine, razvoj, usposabljanje in poznejše upravljanje ne smejo ostati skriti v nedoločeni besedi »pilot«.

Na zaključnem pregledu rezultate primerjajte z vnaprej dogovorjenim izhodiščem in kritičnimi mejami. Odločite se za ustavitev, popravek in ponovni test, ožji nadzorovani preizkus ali ločen načrt za produkcijo. Produkcija potrebuje lastno varnost, spremljanje, podporo, odgovornosti in upravljanje sprememb. Načrt pilota ni pravno mnenje, pogodba ali jamstvo prihranka, temveč urejen način za preverjanje, ali je naslednja naložba smiselna.

  • Rezultati in izključitve, vidni vsem odgovornim.
  • Odgovornosti za dostope, testiranje, povratne informacije in potrditev.
  • Znani stroški in odvisnosti ločeni od pričakovanih koristi.
  • Dogovorjeni pregled, ki lahko pilot potrdi, zoži, ponovi ali ustavi.

Viri in dodatno branje

Več vodičev

Uvajanje AI in izobraževanje ekip

Kako izmeriti AI pilotni projekt pred razširitvijo

Primerjajte en delovni proces z resničnim izhodiščem ter vključite čas pregleda, kakovost, izjeme, uporabo in stroške, preden AI pilot razširite, popravite ali ustavite.

Kaj bi radi naredili za svoje podjetje?

Izberite, pri čem potrebujete pomoč. Po e-pošti vam pošljemo povzetek in se oglasimo glede naslednjega koraka.

Uroš Jovanović

Ustanovitelj · SVS Digital

Živjo, jaz sem Uroš.

Sem ustanovitelj SVS Digital. Za podjetja oblikujemo in razvijamo digitalne rešitve po meri.

Kakšno rešitev potrebujete?

Vaš odgovor