By · Last updated 2026-03-23

Atgal į BlogąTechninė

Klaidingai teigiami rezultatai: kodėl ML redagavimas nepavyksta

2024 m. lyginamasis tyrimas nustatė, kad Presidio sugėrė 13 536 klaidingai teigiamus vardo aptikimus visose 4 434 imtyse - pazėmėdamas įvardžius, laivų pavadinimus ir šalis kaip asmenvardžius.

March 23, 20268 min skaityti
Presidio false positive ratePII detection precisionautomated redaction costlegal document reviewhybrid PII detection

Atnaujinta 2026 m.

22,7% tikslumo problema

2024 m. tyrimas pateste Microsoft Presidio su verslo bylomis. Presidio yra atvirojo kodo AAS įrankis. Teisinės komandos ir sveikatos priežiūros grupės jį placėiai naudoja.

Tyrimas matavo, kaip dažnai Presidio buvo teisus. Iš visų elementų, kuriuos jis pazėmėjo kaip asmenvardžius, kiek iš tikrųjų buvo asmenvardžiai?

Atsakymas buvo 22,7%. Apie 77 iš kiekvieno 100 pazėmėjimų buvo neteisingi. Tyrimas suskaičiavo 13 536 klaidingus pazėmėjimus visose 4 434 imčių bylose.

Klaidos nebuvo atsitiktinės. Jos sekė aiškius modelius:

  • įvardžiai pazėmėti kaip žmonės (pvz., I sakinio pradzųioje)
  • Laivų etiketes pazėmėtos kaip žmonės (pvz., ASL Scorpio)
  • Įmonų etiketes pazėmėtos kaip žmonės (pvz., Deloitte & Touche)
  • Šalių terminai pazėmėti kaip žmonės (pvz., Argentina, Singapore)

Nė vienas iš jų nėra retas kraštutinis atvejis. Jie atsiranda kai bendrinis NLP modelis susitinka su srities specifiniais tekstais. Modelis nebuvo sukurtas juos atskirti.

Ką kainuoja klaidingi pazėmėjimai

Teisinėje ir sveikatos priežiūros srityje kiekvienas pazėmėjimas reikalauja atsakymo. Komandos susiduria su trimis galimybėmis. Visos trys turi realius kaštus.

1 galimybė: žmogus tikrina kiekvieną pazėmėjimą. Teisininko ir eksperto laikas kainuoja nuo 200 iki 800 USD per valandą. Esant 22,7% tikslumui, apimtis yra didžiulė. Tai nėra įmanoma dideliu matu. Zųr. e-atradimų AAS automatizavimas ir teisinių peržiūros kaštų mažinimas, kaip peržiūros kaštai auga su apimtimi.

2 galimybė: praleisti peržiūrą ir pasitikėti išvestimi. Tai taip pat rizikinga. Kai 77% redaguotų elementų nėra jatrus, sukuriate teisinę riziką. Teismai baudė teisininkus už per dizelį redagavimą. Zųr. e-atradimų per didelio redagavimo sankcijos dokumentuotiems atvejams.

3 galimybė: pakelti balo slenksctį. Presidio leidžia vartotojams nustatyti score_threshold, kad atmėstų silpnus pazėmėjimus. 2024 m. DICOM tyrimas tai pateste ties 0,7 - gana aukšta riba. Rezultatas: 38 iš 39 DICOM vaizdų vis dar turėjo klaidingo pazėmėjimo. Slenksčiai padeda. Jie neištaiso šakininės priežasties.

Kodėl bendrinis NLP čia kovoja

Presidio spraga kyla iš neatitikimo tarp mokymo duomenų ir realaus naudojimo.

Teisinės bylos yra pilnos didžiosiomis raidėmis rašytų terminų. Bylų pavadinimai, įstatymu pavadinimai ir parodos kodai visi atrodo kaip asmeniniai duomenys bendriniui modeliui. Jis juos pazėmi. Dauguma jų nėra asmeniniai duomenys.

Sveikatos priežiūros bylos prideda vaistų pavadinimus, prietaisų kodus ir klinikės trumpinius. Pt. reiškia Pacientas. Dr. reiškia Daktaras. Tai apsunkina objektų aptikiimą sunkiai nuspėjamai.

Finansu bylos turi produktų kodus, objektų eilutes ir sąskaitų ID, kurie dalijasi paviršiaus modeliais su asmeniniais įrašais.

Modelio derinimas naudojant srities duomenis padeda. Tačiau tai reikalauja laiko ir pastangų sukurti ir atnaujinti.

Kaip hibridinis aptikimas tai ištaiso

Klaidingo pazėmėjimo problema turi aišką sprendimą. Paskirstykite darbą pagal duomenų tipą.

Modelio taisyklės struktūriniams duomenims. Socialinio draudimo numeriai, telefono numeriai, el. pašto adresai ir ID formatai laikosi fiksuotų taisyklių. Eilutė arba atitinka šabloną ir praeina kontrolinės sumos testą, arba ne. Nulis klaidingo pazėmėjimo galiojantių taisyklių rinkiniams.

Kalbos modeliai laisvam tekstui. Vardai ir pavardės, Įmonų etiketes ir vietos proze neturi griežtos struktūros. NLP juos randa, kai taisyklės negali. Pasitikėjimo balai ir konteksto patikrinimai sumažina klaidingo pazėmėjimo normą.

Kiekvieno tipo balų nustatymai smulkiai kontrolei. Teisinės komandos, kurios negali rizikuoti per dideliu redagavimu, nustato aukštus slenksčius netiksliems atitikimams. Tyrimo komandos, kurioms reikia aukšto iškvietimo, nustato žemesnius. Zųr. Dvejetainis AAS aptikimas ir pasitikėjimo vertinimas atitikčiai, kaip balo pakopos veikia praktikoje.

Rezultatas yra daug mažiau klaidų nei Presidio numatytiųjų nustatymai. Iškvietimas išlieka stiprus ten, kur taisyklės vienos praleistų per daug.

Teisinėms ir sveikatos priežiūros komandoms pagrindinis klausimas nėra tai, ar klaidingi pazėmėjimai egzistuoja. Jie visada egzistuoja NLP sistemose. Klausimas yra, ar Įrankis leidžia jums nustatyti, matuoti ir dokumentuoti kompromisą.

Šaltiniai

Pasiruošę apsaugoti savo duomenis?

Pradėkite anonimizuoti PII su 285+ subjektų tipais 48 kalbomis.

About this page

We update this page when our platform or the law changes.

Read our founder note for how we work.

Each change shows up in the timestamp at the top.

Related reading

We follow these rules

  • GDPR (EU 2016/679).
  • ISO/IEC 27001:2022.
  • NIS2 (EU 2022/2555).
  • HIPAA safe harbor under 45 CFR § 164.514(b)(2).

Our promise

We do not sell your data.

We do not train models on your text.

We store your files in Germany.

You can delete your account at any time.

You own your work.

Where we run

Our servers live in Falkenstein, Germany.

We use Hetzner. They hold ISO 27001 certification.

All data stays in the EU.

Backups run every day.

Need help?

Email support@anonym.legal.

We reply within one business day.

How we test

We run a full check suite on every release.

Each surface gets its own sweep script and report.

Human reviewers spot-check the output each week.

We track recall and precision on a labelled set.

Bad runs block the deploy.

What we never do

  • We never sell your information to third parties.
  • We never train models on what you upload.
  • We never keep your work after you delete it.
  • We never share keys with any outside firm.
  • We never run ads inside the product.

Plans in plain words

We sell credits, not seats.

One credit covers one short job.

Long jobs use a few credits each.

You can top up at any time.

Unused credits roll over each month.

Read the plans page for current rates.

Who built this

A small team of engineers and lawyers built this.

We ship from Europe and work in the open.

Our founder note spells out why we started.

Where to start

How the parts fit

A browser add-on cleans text inside Chrome.

A Word plug-in handles drafts in Office.

A small desktop tool works on whole folders.

An agent protocol link feeds large models safely.

All four share one core engine and one rule set.

Words from our team

We started this work after a lunch about cookies.

One friend kept getting odd ads on her phone.

We asked why a court file leaked through a draft.

We sketched the first build on a napkin that week.

By month three we had a tiny demo for a friend.

She used it on her first case the next day.

Common questions we hear

Can the tool read scanned PDFs? Yes, with OCR.

Does it work on long files? Yes, in small chunks.

Can I roll my own rule set? Yes, save it as a preset.

Does it run offline? The desktop build runs offline.

Do you keep my files? No, the cloud build wipes after each run.

Will it learn from my work? No, we never train on inputs.

A short tour of the workflow

Upload a file or paste a snippet of prose.

Pick the entities you want gone from the draft.

Choose a method: replace, mask, hash, encrypt, or redact.

Press run and watch the side panel show each hit.

Skim the result and tweak any rule that misfired.

Save the cleaned file or send it to a teammate.