anonym.legal

By · Last updated 2026-03-23

Înapoi la BlogTehnic

False Pozitive: De Ce Eșuează Redactarea ML

Un benchmark din 2024 a constatat că Presidio a generat 13.536 de detecții false pozitive de nume pe 4.434 de mostre — marcând pronume, nume de nave și țări ca nume de persoane.

March 23, 20268 min citire
Presidio false positive ratePII detection precisionautomated redaction costlegal document reviewhybrid PII detection

title: "Presidio False Pozitive: Ce Costă în Domeniul Juridic și al Sănătății" description: "Un benchmark din 2024 a constatat că Presidio a generat 13.536 de detecții false pozitive de nume pe 4.434 de mostre — marcând pronume, nume de nave și țări ca nume de persoane. Iată ce costă aceasta în mediile juridice și de sănătate." category: technical publishedAt: 2026-03-23 tags:

  • rata falselor pozitive Presidio
  • precizia detectării PII
  • costul redactării automate
  • revizuirea documentelor juridice
  • detectare PII hibridă readingTime: 8

Actualizat pentru 2026

Problema Preciziei de 22,7%

Un studiu din 2024 a testat Microsoft Presidio pe fișiere de afaceri. Presidio este un instrument PII open-source. Echipele juridice și grupurile din domeniul sănătății îl folosesc pe scară largă.

Studiul a măsurat cât de des Presidio a avut dreptate. Din toate elementele pe care le-a marcat ca nume de persoane, câte erau de fapt nume de persoane?

Răspunsul a fost 22,7%. Aproximativ 77 din fiecare 100 de marcaje erau greșite. Studiul a numărat 13.536 de marcaje false pe 4.434 de fișiere eșantion.

Erorile nu erau aleatorii. Urmau tipare clare:

  • Pronume marcate ca persoane („Eu” la începutul unei propoziții)
  • Etichete de nave marcate ca persoane („ASL Scorpio”)
  • Etichete de companii marcate ca persoane („Deloitte & Touche”)
  • Termeni de țări marcați ca persoane („Argentina”, „Singapore”)

Niciunul dintre acestea nu sunt cazuri limită rare. Apar ori de câte ori un model NLP general întâlnește text specific domeniului. Modelul nu a fost construit pentru a le distinge.

Ce Costă Marcajele False

În munca juridică și de sănătate, fiecare marcaj necesită un răspuns. Echipele se confruntă cu trei opțiuni. Toate trei au costuri reale.

Opțiunea 1: Un om verifică fiecare marcaj. Timpul avocaților și experților costă 200 până la 800 USD pe oră. La o precizie de 22,7%, volumul este imens. Aceasta nu este viabilă la scară. Consultați Automatizarea PII în eDiscovery și Reducerea Costurilor de Revizuire Juridică pentru modul în care costurile de revizuire cresc odată cu volumul.

Opțiunea 2: Sări peste revizuire și aveți încredere în rezultat. Aceasta este, de asemenea, riscantă. Când 77% din elementele „redactate” nu sunt sensibile, creați risc legal. Instanțele au amendat avocații pentru supra-redactare. Consultați Sancțiunile pentru Supra-Redactare în eDiscovery pentru cazuri documentate.

Opțiunea 3: Ridicați pragul scorului. Presidio permite utilizatorilor să seteze un score_threshold pentru a elimina marcajele slabe. Un studiu DICOM din 2024 a testat aceasta la 0,7 — un standard destul de ridicat. Rezultatul: 38 din 39 de imagini DICOM au avut în continuare marcaje false. Pragurile ajută. Nu remediază cauza principală.

De Ce NLP General Se Luptă Aici

Decalajul Presidio provine dintr-o nepotrivire între datele de antrenament și utilizarea din lumea reală.

Fișierele juridice sunt pline de termeni cu majuscule. Numele cazurilor, titlurile legilor și codurile de exhibiție arată toate ca date personale pentru un model general. Le marchează. Cele mai multe nu sunt date personale.

Fișierele de sănătate adaugă nume de medicamente, coduri de dispozitive și forme scurte clinice. „Pt.” înseamnă Pacient. „Dr.” înseamnă Doctor. Acestea perturbă detectarea entităților în moduri greu de prevăzut.

Fișierele financiare au coduri de produse, șiruri de entități și ID-uri de cont care împărtășesc tipare de suprafață cu înregistrările personale.

Reglarea fină a unui model pe date de domeniu ajută. Dar necesită timp și efort pentru a construi și a menține la zi.

Cum Remediază Aceasta Detectarea Hibridă

Problema marcajelor false are o remediere clară. Împărțiți munca după tipul de date.

Reguli de tipare pentru date structurate. Numerele de securitate socială, numerele de telefon, adresele de email și formatele de ID urmează reguli fixe. Un șir fie se potrivește cu tiparul și trece testul cifrei de control, fie nu. Zero false pozitive pentru seturi de reguli valide.

Modele de limbaj pentru text liber. Prenumele și prenumele, etichetele companiilor și locațiile în proză nu au structură rigidă. NLP le găsește când regulile nu pot. Scorurile de încredere și verificările de context reduc rata falselor marcaje.

Setări de scor per tip pentru control fin. Echipele juridice care nu pot risca supra-redactarea setează praguri ridicate pentru potrivirile fuzzy. Echipele de cercetare care au nevoie de recall ridicat setează praguri mai mici. Consultați Detectarea Binară PII și Notarea Încrederii pentru Conformitate pentru cum funcționează nivelurile de scor în practică.

Rezultatul este mult mai puține erori decât valorile implicite Presidio. Recall-ul rămâne puternic acolo unde regulile singure ar omite prea mult.

Pentru echipele juridice și de sănătate, întrebarea cheie nu este dacă există false pozitive. Ele există întotdeauna în sistemele NLP. Întrebarea este dacă instrumentul vă permite să setați, să măsurați și să documentați compromisul.

Surse

Pregătit să vă protejați datele?

Începeți să anonimizati PII cu 285+ tipuri de entități în 48 de limbi.

About this page

We update this page when our platform or the law changes.

Read our founder note for how we work.

Each change shows up in the timestamp at the top.

Related reading

We follow these rules

  • GDPR (EU 2016/679).
  • ISO/IEC 27001:2022.
  • NIS2 (EU 2022/2555).
  • HIPAA safe harbor under 45 CFR § 164.514(b)(2).

Our promise

We do not sell your data.

We do not train models on your text.

We store your files in Germany.

You can delete your account at any time.

You own your work.

Where we run

Our servers live in Falkenstein, Germany.

We use Hetzner. They hold ISO 27001 certification.

All data stays in the EU.

Backups run every day.

Need help?

Email support@anonym.legal.

We reply within one business day.

How we test

We run a full check suite on every release.

Each surface gets its own sweep script and report.

Human reviewers spot-check the output each week.

We track recall and precision on a labelled set.

Bad runs block the deploy.

What we never do

  • We never sell your information to third parties.
  • We never train models on what you upload.
  • We never keep your work after you delete it.
  • We never share keys with any outside firm.
  • We never run ads inside the product.

Plans in plain words

We sell credits, not seats.

One credit covers one short job.

Long jobs use a few credits each.

You can top up at any time.

Unused credits roll over each month.

Read the plans page for current rates.

Who built this

A small team of engineers and lawyers built this.

We ship from Europe and work in the open.

Our founder note spells out why we started.

Where to start

How the parts fit

A browser add-on cleans text inside Chrome.

A Word plug-in handles drafts in Office.

A small desktop tool works on whole folders.

An agent protocol link feeds large models safely.

All four share one core engine and one rule set.

Words from our team

We started this work after a lunch about cookies.

One friend kept getting odd ads on her phone.

We asked why a court file leaked through a draft.

We sketched the first build on a napkin that week.

By month three we had a tiny demo for a friend.

She used it on her first case the next day.

Common questions we hear

Can the tool read scanned PDFs? Yes, with OCR.

Does it work on long files? Yes, in small chunks.

Can I roll my own rule set? Yes, save it as a preset.

Does it run offline? The desktop build runs offline.

Do you keep my files? No, the cloud build wipes after each run.

Will it learn from my work? No, we never train on inputs.

A short tour of the workflow

Upload a file or paste a snippet of prose.

Pick the entities you want gone from the draft.

Choose a method: replace, mask, hash, encrypt, or redact.

Press run and watch the side panel show each hit.

Skim the result and tweak any rule that misfired.

Save the cleaned file or send it to a teammate.