Lehendik dagoen lan-fluxuari egokitzen zaio.
Taldeak sistemaren testuingurua deklaratzen du, datuak Croissant metadatuekin deskribatzen ditu eta arriskuak tratatzeko kontrolak definitzen ditu. Frogak exekuzioen eta sortutako artefaktuen ebidentziak jasotzen ditu dokumentazio teknikoa osatzeko.
Deklarazioak eta behaketak
Taldeak deklaratutakoa
- sistemaren helburua
- zertarako den eta nori eragiten dion
- arau aplikagarriak
- taldeak deklaratzen dituenak
- datuen deskribapena
- Croissant metadatuak: datu-multzoaren jatorria, egitura eta erabilera-baldintzak
Deskribapenak deklaratutakoa jasotzen du; ez ditu datuak berez egiaztatzen.
Exekuziotik jasotakoa
- Ereduaren deskribapena
- Exekuzio bakoitzean eskuragarri dauden osagai, artefaktu eta emaitzekin osatzen da. Haren irismena jasotako ebidentzien araberakoa da.
Taldeak definitzen ditu kontrolak
Taldeak arrisku bakoitza nola tratatu erabakitzen du: murriztu, justifikazioarekin onartu, saihestu edo transferitu, baita aukerei nola heldu ere. Tratamendu bakoitzerako behar dituen kontrolak definitzen ditu.
Kontrol bakoitzak zer egiaztatzen den, zein irizpiderekin eta zein ebidentziatan oinarrituta zehazten du. Zenbakizko egiaztapen batean, onarpen-irizpideak atalase bat barne hartzen du.
Taldeak bereizita definitzen du emaitza bakoitzak lanaren jarraipenean duen eragina.
Fikziozko adibidea · simulatutako zifrak
RSK-DEMO
Ikuskapenetik ihes egiten duten akatsak
- Adierazitako eragina
- Handia
- Adierazitako probabilitatea
- Gerta daiteke
Kalterako bidea
Pieza mota batek ordezkaritza eskasa du datuetan.
Modeloak ez ditu haren akatsak fidagarritasun berarekin detektatzen.
Piezak prozesuan aurrera egiten du berrikuspen gehigarririk gabe.
- Ondorioa
- Pieza akastun bat muntaketara iristen da eta produktuaren kalitatea arriskuan jartzen du.
- Arriskuaren tratamendua
- Murriztu. Balidazioa pieza motetara eta irudiak hartzeko baldintzetara zabaldu; zalantzazko kasuak berrikusi bertsioa argitaratu aurretik.
Tratamenduaren kontrolak
Akatsen detekzio-tasa. Kontrol bakoitzak bere irizpidea, emaitza eta ebidentzia gordetzen ditu.
C-01Detekzio orokorra
Irizpidea betetzen du
- Onarpen-irizpidea
- ≥ % 95
- Simulatutako emaitza
- % 96
Ebidentzia: Proba-datuen multzoaren ebaluazio orokorra.
C-02Detekzioa pieza motaren arabera · talderik txarrena
Ez du irizpidea betetzen
- Onarpen-irizpidea
- ≥ % 90
- Simulatutako emaitza
- % 82
Ebidentzia: Ebaluazioa pieza motaren arabera banatuta.
C-03Detekzioa argiztapen desegokian
Neurketarik gabe
- Onarpen-irizpidea
- ≥ % 90
- Simulatutako emaitza
- Ez dago eskuragarri
Ebidentzia: Baldintza horiek ebaluatzeko daude.
Eskala: % 0–100. Marra etena: atalasea. Marka jarraitua: simulatutako emaitza. Markarik gabe: neurketarik ez.
- Hondar-arriskua
- Berriz ebaluatzeko
- Adibide honetan konfiguratutako erabakia
- Bertsioa atxiki huts egiten duen kontrola ebatzi eta falta den neurketa osatu arte.
Ikuskapen bisualaren fikziozko kasua: irizpideak eta emaitzak simulatuak dira, ez bezero baten datuak edo gomendatutako atalaseak. Irizpidea betetzen duen kontrol batek ez du berez frogatzen arriskua tratatuta dagoenik.
Egiaztapen automatikoak, dokumentatutako giza berrikuspenak eta oraindik ondoriorik ateratzen uzten ez duen ebidentzia bereizten dira. Giza baieztapen bat dokumentatzeak ez du neurtutako edo baliozkotutako egiaztapen bihurtzen.
Non lotzen den
Froga erakundearen MLOps eta DevSecOps geruzetan integratzen da dokumentazio teknikorako ebidentzia biltzeko, eskuragarri dauden integrazioen bidez.
Erakundean
MLOps
Datuen bertsioak, exekuzio-erregistroak eta modeloaren metrikak, tresna bakoitzak ematen duenaren arabera.
Erakundean
DevSecOps
Bertsionatutako kodea eta integrazio jarraitua: Frogak entregak egiaztatzen ditu, konexio bakoitzaren gaitasunen arabera.
Emaitza Frogan
Dokumentazio teknikoa
Frogak ebidentzia bildu eta sinatzen du, datuekin, modeloarekin eta dokumentatutako kontrolekin lotuta.
Zerekin lan egiten duen
MLOps · datuak eta exekuzioak
DVC
blokeo-fitxategia ainguratzen du; hirugarren batek biltegiarekin birkalkulatzen du
MLflow
metriken digest-a ainguratzen du; bere biltegian bizi da
Dagster
bere material propioaren gainean ainguratzen du; bere biltegian bizi da
DataLad
jatorria historian, datuak erakuslearen bidez
DevSecOps · biltegiak eta integrazio jarraitua
GitHub
entrega egiaztatzen du
GitLab
entrega egiaztatzen du
Forgejo
bezeroa: ez du entrega egiaztatzen
Zer geratzen den sinatuta
- commit
- aldaketa-erregistroa
- datu-multzoa
- datuen jatorria
- entrenamendu-algoritmoa
- exekuzio-manifestua
- metrikak
- neurtutako atalaseak
- eredua
- sinatutako jatorria
Zer entregatzen den
Sortzen den dokumentazio teknikoa taldeak jakinarazitako erakundeari aurkezten diona da. Estaldurak esaten du, arauz arau, zer eusten duen eta zer ez.
Eta baieztatzeko ez ukatzeko ebidentziarik ez dagoenean, hala esaten du. Ez du berdez margotzen.
Ikusi estaldura