By · Last updated 2026-03-23

Til baka á BloggTæknilegt

Falskar jákvæðar: Hvers vegna ML-neiting bilar

Viðmiðun frá 2024 leiddi í ljós að Presidio framleiddi 13.536 falskar jákvæðar nafngreiningar yfir 4.434 sýni - flaggaði fornafn, skipanöfn og lönd sem mannanöfn.

March 23, 20268 mín lestur
Presidio false positive ratePII detection precisionautomated redaction costlegal document reviewhybrid PII detection

Uppfært fyrir 2026

Nákvæmnivandinn 22,7%

Rannsókn frá 2024 prófaði Microsoft Presidio á viðskiptaskrám. Presidio er opið PII-tæki. Lögfræðiteymi og heilbrigðishópar nota það víða.

Rannsóknin mældi hversu oft Presidio hafði rétt fyrir sér. Af öllum atriðum sem það flaggaði sem mannanöfn, hversu mörg voru í raun mannanöfn?

Svarið var 22,7%. Um 77 af hverjum 100 flaggum voru rangar. Rannsóknin talði 13.536 falskar flaggur yfir 4.434 sýniskrár.

Vilurnar voru ekki handahófskenndar. Þær fylgdu skýrum mynstrum:

  • Fornafn flaggað sem fólk ("I" í upphafi setningar)
  • Skipamerki flaggað sem fólk ("ASL Scorpio")
  • Fyrirtækjamerki flaggað sem fólk ("Deloitte & Touche")
  • Landsskilmálar flaggaðir sem fólk ("Argentina," "Singapore")

Engin þessara eru sjaldgæf jaðartilfelli. Þau birtast þegar almenn NLP-líkan mætir geirasértækum texta. Líkanið var ekki byggt til að greina þau.

Hvað falskar flaggur kosta

Í lögfræðilegum og heilbrigðislegum störfum þarfnast sérhver flagg svars. Teymi standa frammi fyrir þremur valkostum. Allir þrír hafa raunverulegan kostnað.

Valkostur 1: Maður athugar sérhverja flagg. Lögfræðingur og sérfræðingur tími keyrir á $200 til $800 á klukkustund. Við 22,7% nákvæmni er magnið gríðarlegt. Þetta er ekki hæft í stórum mæli. Sjá eDiscovery PII sjálfvirkni og minnkun á endurskoðunarkostnaði fyrir hvernig endurskoðunarkostnaður hækkar með magni.

Valkostur 2: Sleppa endurskoðun og treysta úttakinu. Þetta er einnig áhættusamt. Þegar 77% "neitaðra" atriða eru ekki viðkvæm skapar þú lagalega áhættu. Dómstólar hafa sektað lögfræðinga fyrir yfirneiting. Sjá eDiscovery yfirneiting refsingar fyrir skráð dæmi.

Valkostur 3: Hækka stigsþröskuldin. Presidio leyfir notendum að stilla score_threshold til að sleppa veikum flaggum. DICOM rannsókn frá 2024 prófaði þetta við 0,7 - nokkuð háan þröskuld. Niðurstaðan: 38 af 39 DICOM-myndum höfðu enn falskar flaggur. Þröskuldar hjálpa. Þeir laga ekki rótarorsökin.

Hvers vegna almenn NLP á erfitt hér

Presidio-bilið kemur af misræmi milli þjálfunargagna og raunverulegrar notkunar.

Lögfræðilegar skrár eru fullar af stafstórum skilmálum. Málaheiti, lagaheiti og sýnismerki líkjast öllum persónulegum gögnum fyrir almennt líkan. Það flaggar þær. Flestar eru ekki persónulegar upplýsingar.

Heilbrigðisskrár bæta við lyfjunöfnum, tækjakóðum og klínískum styttingum. "Pt." þýðir sjúklingur. "Dr." þýðir læknir. Þessar villa einingagreininguna á óútreiknanleg hátt.

Fjármálaskrár hafa vörukóða, einingastrenger og reikningskenninga sem deila yfirborðsmynstrum með persónulegum skrám.

Fínstillir líkan á geiragögn hjálpar. En það tekur tíma og fyrirhöfn að byggja og viðhalda.

Hvernig blendinn uppgötvan lagar þetta

Falskar flaggvandinn hefur skýra lagningu. Skiptu vinnunni eftir gagnagerð.

Mynstrarreglur fyrir skipulagð gögn. Kennitölur, símanúmer, netföng og kenna-miðarsnið fylgja föstum reglum. Strengur annaðhvort passar við mynstrið og staðist eftirlitsstafapróf, eða ekki. Núll falskar flaggur fyrir gilt reglusett.

Tungumálalíkön fyrir frjálsan texta. Fyrstu og efturnöfn, fyrirtækjamerki og staðsetningar í prósatexta skortir stífa uppbyggingu. NLP finnur þær þegar reglur geta ekki. Öryggisstig og samhengisathuganir draga úr fölskum flaggtíðnum.

Stigsstillingar per gerð fyrir nákvæma stjórn. Lögfræðiteymi sem geta ekki riskað yfirneiting setja háa þröskulda fyrir óljósar samsvörun. Rannsóknarteymi sem þurfa mikla rifjun setja lægri. Sjá Tvíræð PII-uppgötvan og öryggisstigssetning fyrir samræmni fyrir hvernig stigsflokkar virka í framkvæmd.

Niðurstaðan er mun færri villur en sjálfgefnar Presidio-stillingar. Rifjun er sterk þar sem reglur einar myndu missa of mikið.

Fyrir lögfræðileg og heilbrigðisteymi er lykilspurningin ekki hvort falskar flaggur séu til. Þær eru alltaf til í NLP-kerfum. Spurningin er hvort tækið leyfir þér að stilla, mæla og skrá þvert á bótið.

Heimildir

Ertu tilbúinn að vernda gögnin þín?

Byrjaðu að anonymiza PII með 285+ gerðum í 48 tungumálum.

About this page

We update this page when our platform or the law changes.

Read our founder note for how we work.

Each change shows up in the timestamp at the top.

Related reading

We follow these rules

  • GDPR (EU 2016/679).
  • ISO/IEC 27001:2022.
  • NIS2 (EU 2022/2555).
  • HIPAA safe harbor under 45 CFR § 164.514(b)(2).

Our promise

We do not sell your data.

We do not train models on your text.

We store your files in Germany.

You can delete your account at any time.

You own your work.

Where we run

Our servers live in Falkenstein, Germany.

We use Hetzner. They hold ISO 27001 certification.

All data stays in the EU.

Backups run every day.

Need help?

Email support@anonym.legal.

We reply within one business day.

How we test

We run a full check suite on every release.

Each surface gets its own sweep script and report.

Human reviewers spot-check the output each week.

We track recall and precision on a labelled set.

Bad runs block the deploy.

What we never do

  • We never sell your information to third parties.
  • We never train models on what you upload.
  • We never keep your work after you delete it.
  • We never share keys with any outside firm.
  • We never run ads inside the product.

Plans in plain words

We sell credits, not seats.

One credit covers one short job.

Long jobs use a few credits each.

You can top up at any time.

Unused credits roll over each month.

Read the plans page for current rates.

Who built this

A small team of engineers and lawyers built this.

We ship from Europe and work in the open.

Our founder note spells out why we started.

Where to start

How the parts fit

A browser add-on cleans text inside Chrome.

A Word plug-in handles drafts in Office.

A small desktop tool works on whole folders.

An agent protocol link feeds large models safely.

All four share one core engine and one rule set.

Words from our team

We started this work after a lunch about cookies.

One friend kept getting odd ads on her phone.

We asked why a court file leaked through a draft.

We sketched the first build on a napkin that week.

By month three we had a tiny demo for a friend.

She used it on her first case the next day.

Common questions we hear

Can the tool read scanned PDFs? Yes, with OCR.

Does it work on long files? Yes, in small chunks.

Can I roll my own rule set? Yes, save it as a preset.

Does it run offline? The desktop build runs offline.

Do you keep my files? No, the cloud build wipes after each run.

Will it learn from my work? No, we never train on inputs.

A short tour of the workflow

Upload a file or paste a snippet of prose.

Pick the entities you want gone from the draft.

Choose a method: replace, mask, hash, encrypt, or redact.

Press run and watch the side panel show each hit.

Skim the result and tweak any rule that misfired.

Save the cleaned file or send it to a teammate.