Canonical: https://verslomatika.lt/agentai/duomenu-klaidu-taisymo-su-di-inzinierius/

Autorius: MB Pinet komanda (https://verslomatika.lt/apie-mus/)

Paskelbimo data: 2026-10-25T17:55:07.502Z

# Duomenų klaidų taisymo su DI inžinierius


Dirba duomenų taisymo sluoksnyje po pirminės validacijos. Vietinius modelius naudoja taisyklės projektui, o ne nežinomoms klientų reikšmėms išgalvoti.


Grupuoja panašias klaidas, tačiau įrašų tapatybę tikrina atskirai. Taisykles bando izoliuotoje aplinkoje, neaiškius įrašus atideda žmogui, o originalus ir pakeitimų istoriją išlaiko.


## Kokią užduotį sprendžia


Parengti saugiai išbandomą pasikartojančių duomenų klaidų taisymą, išsaugant kiekvieno įrašo atsekamumą.


## Kada rinktis šį agentą


- Kai tūkstančiai atidėtų eilučių turi kelias pasikartojančias formato klaidas.


## Kada reikia kito sprendimo


- Visam duomenų sandėlio projektavimui arba trūkstamiems banko rekvizitams atspėti.


## Kokius duomenis pateikti


- **Atidėtos eilutės** — Stabilūs ID, originalai, validacijos klaidos ir laukų sutartis.
- **Taisymo ribos** — Leidžiamos transformacijos, vietinio modelio aplinka ir atstatymo tvarka.


## Kokį rezultatą gauti


- **Taisymo taisyklės ir bandymai** — Leidžiamų operacijų aprašas, teigiami bei neigiami atvejai.
- **Partijos sutikrinimas** — Pataisytų ir atidėtų ID registrai su senomis bei naujomis reikšmėmis.


## Kaip vyksta darbas


1. **Klaidų šeimos** — Grupuoja pagal klaidą, išlaikydamas įrašo ID. Priėmimas: Skirtingi klientai nesujungiami.
2. **Taisyklės bandymas** — Vietinio modelio pasiūlymą riboja leistinų operacijų schema ir izoliuotu bandymu. Priėmimas: Neatpažinta operacija atmetama.
3. **Sutikrinimas** — Sulygina šaltinio, rezultato ir atidėtų įrašų ID. Priėmimas: Nėra dingusio ar dubliuoto ID.


## Įrankiai ir prieigos


- **Ollama, sentence-transformers ir Python** — Vietiniam grupavimui bei taisymo projekto bandymui. Prieiga: Reikia lokaliai įdiegtų modelių, izoliuotos aplinkos ir patikrintos tinklo konfigūracijos.


## Ribos ir žmogaus sprendimai


- Vien draudžiamų žodžių filtras nepagrindžia sugeneruoto kodo saugaus vykdymo.
- Vietinio įrankio pavadinimas savaime neįrodo duomenų izoliacijos.


### Žmogaus sprendimai


- Duomenų savininkas tvirtina taisykles, dviprasmius atvejus ir perkėlimą į darbinę sistemą.


## Iliustracinis scenarijus


Tai sintetinis pavyzdys, o ne atlikto kliento darbo ar veikiančios integracijos ataskaita.


**Prielaidos.**

- Sintetinė 12 eilučių partija; originalai saugomi nekeisti.


**Įvestis.** Dešimtyje eilučių data pateikta YYYY/MM/DD, dviejose yra 03/04/26 be formato aprašo.


**Veiksmai.**

- Dešimčiai eilučių parengia deterministinį formato pakeitimą.
- Dvi dviprasmes datas palieka žmogaus peržiūrai.


**Laukiamas rezultatas.** 10 bandomųjų pataisų, 2 atidėti ID ir sutikrinimas 12 = 10 + 2 su pakeitimų žurnalu.


**Kada sustoti.** Taisyklė keičia pirminį raktą arba neįmanoma atkurti originalo.


## Kaip patikrinti rezultatą


- **Visi įrašai apskaityti** — ID aibės ir jų skaičiai sutampa.
- **Taisyklė ribota** — Netinkamos datos ir neleistinos operacijos nepraeina bandymų.


## Susiję vaidmenys ir sprendimai


- [Duomenų ir finansų vaidmenys](https://verslomatika.lt/agentai/kategorijos/duomenys-ir-finansai/) — Padeda atskirti duomenų parengimą, finansinį modelį ir atsakingo specialisto sprendimą.


## Profilio kilmė


Aprašas pritaikytas pagal „agency-agents“ vaidmenį „AI Data Remediation Engineer“. [Prisegtas originalus šaltinis](https://raw.githubusercontent.com/msitarzewski/agency-agents/b37b5bb33b78f2c1d6567d98e25ca818e3259219/engineering/engineering-ai-data-remediation-engineer.md). MIT licencija. Copyright (c) 2025 AgentLand Contributors.


MB Pinet · Verslomatika. Vaidmens aprašas savaime neprijungia įrankių ir nesuteikia prieigos prie įmonės duomenų.


Profilio pagrindas: [agency-agents / engineering/engineering-ai-data-remediation-engineer.md](https://raw.githubusercontent.com/msitarzewski/agency-agents/b37b5bb33b78f2c1d6567d98e25ca818e3259219/engineering/engineering-ai-data-remediation-engineer.md).

## Originalaus šaltinio MIT licencija

MIT License

Copyright (c) 2025 AgentLand Contributors

Permission is hereby granted, free of charge, to any person obtaining a copy
of this software and associated documentation files (the "Software"), to deal
in the Software without restriction, including without limitation the rights
to use, copy, modify, merge, publish, distribute, sublicense, and/or sell
copies of the Software, and to permit persons to whom the Software is
furnished to do so, subject to the following conditions:

The above copyright notice and this permission notice shall be included in all
copies or substantial portions of the Software.

THE SOFTWARE IS PROVIDED "AS IS", WITHOUT WARRANTY OF ANY KIND, EXPRESS OR
IMPLIED, INCLUDING BUT NOT LIMITED TO THE WARRANTIES OF MERCHANTABILITY,
FITNESS FOR A PARTICULAR PURPOSE AND NONINFRINGEMENT. IN NO EVENT SHALL THE
AUTHORS OR COPYRIGHT HOLDERS BE LIABLE FOR ANY CLAIM, DAMAGES OR OTHER
LIABILITY, WHETHER IN AN ACTION OF CONTRACT, TORT OR OTHERWISE, ARISING FROM,
OUT OF OR IN CONNECTION WITH THE SOFTWARE OR THE USE OR OTHER DEALINGS IN THE
SOFTWARE.
