By · Last updated 2026-06-05

Takaisin BlogiinGDPR & Vaatimustenmukaisuus

Itse isännöidyt PII-työkalut epäonnistuvat compliance-auditoinneissa

spaCy 3.4.4 tuottaa erilaisia NER-tuloksia kuin spaCy 3.5.1. Eräs finanssipalveluyritys havaitsee, että 3 % asiakirjoista oli anonymisoitu eri tavalla staging- kuin tuotantoympäristössä — GDPR-auditoinnin tulos.

June 5, 20266 min lukuaika
compliance auditenvironment consistencyspaCy versionsself-hosted PIIreproducible anonymization

Miksi itse isännöidyt PII-työkalut epäonnistuvat compliance-auditoinneissa

GDPR vaatii todisteita. Sinun on osoitettava, että henkilötietojen poistaminen suoritettiin samalla tavalla joka kerta. Valvontaviranomaisten tarkastajat varmistavat tämän. He haluavat nähdä selkeän, johdonmukaisen menetelmän sovellettuna kaikkeen dataan.

Itse isännöidyssä Presidiossa on todellinen ongelma tässä. Kyse ei ole konfigurointiasiasta. Se on itse isännöityjen NLP-työkalujen perustavanlaatuinen rajoitus.

Mitä on ympäristön ajautuminen?

Itse isännöity Presidio pyörii kehitys-, staging- ja tuotantoympäristöissä. Jokainen niistä voi käyttäytyä eri tavalla. Siksi sama syöte voi tuottaa erilaisia tuloksia kussakin.

Tätä kutsutaan ympäristön ajautumiseksi. Sillä on neljä pääsyytä.

Malliversion ajautuminen

spaCy-mallit ovat versioituja. Malli en_core_web_lg 3.4.4 ja en_core_web_lg 3.5.1 on koulutettu eri datalla. Ne käyttävät myös eri arkkitehtuuria. Siksi sama asiakirja voi tuottaa erilaisia NER-tuloksia kummallakin versiolla.

Yleinen konfiguraatio näyttää tältä:

  • Kehitys: en_core_web_lg 3.4.4 — asennettu projektin alussa
  • Staging: en_core_web_lg 3.5.0 — päivitetty rutiinitöiden aikana
  • Tuotanto: en_core_web_lg 3.5.1 — päivitetty tietoturvakorjauksen aikana

Tämä on kolme konfiguraatiota. Kolme malliversiota. Kolme erilaista tunnistustulosta. Testit läpäistään stagingissä. Mutta tuotanto pyörii eri mallilla. Aukko pysyy piilossa.

Riippuvuuksien ajautuminen

spaCy 3.4.x ja 3.5.x eroavat siinä, miten ne jakavat lauseita. Tämä muutos vaikuttaa siihen, miten nimet löydetään lähellä lauserajoja. Nämä muutokset ovat spaCyn julkaisutiedoissa. Mutta useimmat tiimit eivät tarkista niitä henkilötietoihin vaikuttavien muutosten osalta.

Konfiguraation ajautuminen

Kehityksessä asetetut pistemääräkynnykset eivät välttämättä siirry tuotantoon. Myös mukautetut sanaluettelot voivat erota konfiguraatioiden välillä. Nämä aukot ovat yleisiä. Niitä seurataan harvoin. Katso GDPR-compliance-oppaastamme, mitä tarkastajat etsivät.

Laitteistoerot

NLP-mallien matematiikka ei ole identtistä kaikilla suorittimilla ja GPU:illa. Kuluttajalaptop ja palvelin voivat tuottaa hieman erilaisia pistemäärätuloksia. Siksi jotkin nimet saatetaan löytää yhdellä koneella mutta ei toisella.

Todellinen auditoinnin tulos

Eräs pankki testasi itse isännöityä Presidio-konfiguraatiotaan.

Testikonfiguraatio: Presidio spaCy 3.4.4:llä staging-klusterissa. Live-konfiguraatio: Presidio spaCy 3.5.1:llä tuotantoklusterissa.

He ajivat saman asiakirjajoukon molempien läpi. Sitten he vertasivat tuloksia. Tulos: 3 % asiakirjoista tuotti erilaisia henkilötietojen poistotuloksia. Jotkin nimet tunnistettiin stagingissä mutta ei tuotannossa. Joissakin oli erilaisia tunnistettuja tekstialueita.

Auditoinnin tulos oli suoraviivainen: "Yritys ei pysty osoittamaan yhdenmukaista teknisten henkilötietojen poistotoimenpiteiden käyttöä ympäristökohtaisten tunnistustulosten erojen vuoksi."

GDPR:n 32 artikla vaatii riittäviä teknisiä toimenpiteitä. EDPB:n säännöt henkilötietojen anonymisoinnista vaativat johdonmukaisuutta ja toistettavuutta. 3 %:n aste 100 000 asiakirjassa kuukaudessa tarkoittaa 3 000 asiakirjaa epäjohdonmukaisilla tuloksilla kuukausittain. Osa on vääriä negatiivisia. Henkilötiedot, jotka staging olisi tunnistanut, jäävät live-tulosteeseen. Tämä on compliance-epäonnistuminen.

Pankki siirtyi sitten hallittuun SaaSiin. Auditoinnin tulos suljettiin. Katso tietoturva- ja compliance-sivultamme, miten hallitut konfiguraatiot käsittelevät tämän.

Miksi hallitut palvelut ovat erilaisia

Hallittu palvelu pyörittää yhtä moottoriversiota. Kaikki käyttäjät pyörittävät samaa versiota samanaikaisesti. Mallin päivitykset toteutetaan yhdestä pisteestä. Myös konfiguraatiota hallitaan yhdestä pisteestä, täydellisellä muutoslokillaolla. Käyttäjien laitteisto ei vaikuta tuloksiin.

Siksi sama tänään käsitelty asiakirja tuottaa saman tuloksen ensi kuussa. Jos moottoriversio on muuttunut, tuo muutos on kirjattu ja versioitu.

Ero kirjausketjussa on perustavanlaatuinen.

Itse isännöity kirjausketju:

  • "Käytetty Presidio 2.2.35 spaCy en_core_web_lg 3.5.1:llä Ubuntu 22.04:ssä."
  • Oliko tämä sama versio kuin stagingissä? Tuntematon.
  • Onko malli muuttunut tämän asiakirjan käsittelemisen jälkeen? Tuntematon ellei seurata.
  • Onko pistemääräkynnys sama kuin testeissä? Riippuu konfiguraation hallinnasta.

Hallitun palvelun kirjausketju:

  • "Käytetty anonym.legal API, moottoriversio 4.22.1, klo 2025-03-15T14:22:31Z."
  • Sama versio kaikille käyttäjille? Kyllä.
  • Onko se muuttunut? Moottoriversiota lukitaan. Versio 4.22.1 tarkoittaa aina samaa moottoria.
  • Onko konfiguraatio toistettavissa? Kyllä. Esiasetuksen tunnus on kirjattu. Konfiguraatio tuolla versiolla voidaan hakea.

Hallittu ketju on selkeä. Itse isännöity ketju vaatii huolellista seurantaa, jota useimmat tiimit eivät tee.

Johdonmukaisuuden parantaminen itse isännöidyssä

Jos itse isännöinti on välttämätöntä, voit vähentää ajautumista neljällä vaiheella.

Ensimmäiseksi lukitse malliversiot. Kiinnitä tarkat malliversiot kaikissa käyttöönottotiedostoissa. Estä automaattiset päivitykset. Seuraa versioita versionhallinnassa.

Sitten lukitse konttikuvat. Rakenna Docker-kuvat sisäänrakennetuilla tarkoilla malliversioilla. Merkitse jokainen kuva malliversiolla, Presidio-versiolla ja päivämäärällä. Älä päivitä pohjakuvia ilman ennakkotestausta.

Lisäksi pidä konfiguraatio koodissa. Tallenna kaikki Presidion asetukset versionhallinnassa seuratuissa tiedostoissa. Tämä sisältää tunnistimet, pistemääräkynnykset ja aktiiviset kielet. Asenna konfiguraatio sovelluksen mukana.

Lopuksi testaa konfiguraatioiden välillä. Minkä tahansa päivityksen jälkeen aja kiinteä joukko testausasiakirjoja uuden konfiguraation läpi. Vertaa tuloksia tallennettuun viitearvoon. Automatisoi tämä tarkistus. Katso UKK:stamme yleisistä kysymyksistä automatisoidusta PII-regressiotestauksesta.

Nämä vaiheet auttavat. Mutta ne myös lisäävät työtä. Hallittu palvelu tarjoaa saman johdonmukaisuuden ilman lisävaivaa.

Johtopäätös

Johdonmukainen henkilötietojen poistaminen ei näy tuotelehtisissä. Mutta se tulee kriittiseksi, kun tarkastajat pyytävät todisteita.

Ilman huolellista ylläpitoa itse isännöidyt PII-työkalut ajautuvat. Versiomuutokset lisäävät hiljaisia aukkoja. Nuo aukot tulevat esiin auditoinnin tuloksina.

Hallitut palvelut tarjoavat johdonmukaisuuden oletuksena. Moottori pyörii yhdestä pisteestä. Käyttäjien konfiguraatiot eivät vaikuta tuloksiin. Complianceen keskittyville tiimeille tämä on suora etu.

Lähteet

Valmiina suojaamaan tietojasi?

Aloita PII-anonymisointi yli 285 entiteettityypillä 48 kielellä.

About this page

We update this page when our platform or the law changes.

Read our founder note for how we work.

Each change shows up in the timestamp at the top.

Related reading

We follow these rules

  • GDPR (EU 2016/679).
  • ISO/IEC 27001:2022.
  • NIS2 (EU 2022/2555).
  • HIPAA safe harbor under 45 CFR § 164.514(b)(2).

Our promise

We do not sell your data.

We do not train models on your text.

We store your files in Germany.

You can delete your account at any time.

You own your work.

Where we run

Our servers live in Falkenstein, Germany.

We use Hetzner. They hold ISO 27001 certification.

All data stays in the EU.

Backups run every day.

Need help?

Email support@anonym.legal.

We reply within one business day.

How we test

We run a full check suite on every release.

Each surface gets its own sweep script and report.

Human reviewers spot-check the output each week.

We track recall and precision on a labelled set.

Bad runs block the deploy.

What we never do

  • We never sell your information to third parties.
  • We never train models on what you upload.
  • We never keep your work after you delete it.
  • We never share keys with any outside firm.
  • We never run ads inside the product.

Plans in plain words

We sell credits, not seats.

One credit covers one short job.

Long jobs use a few credits each.

You can top up at any time.

Unused credits roll over each month.

Read the plans page for current rates.

Who built this

A small team of engineers and lawyers built this.

We ship from Europe and work in the open.

Our founder note spells out why we started.

Where to start

How the parts fit

A browser add-on cleans text inside Chrome.

A Word plug-in handles drafts in Office.

A small desktop tool works on whole folders.

An agent protocol link feeds large models safely.

All four share one core engine and one rule set.

Words from our team

We started this work after a lunch about cookies.

One friend kept getting odd ads on her phone.

We asked why a court file leaked through a draft.

We sketched the first build on a napkin that week.

By month three we had a tiny demo for a friend.

She used it on her first case the next day.

Common questions we hear

Can the tool read scanned PDFs? Yes, with OCR.

Does it work on long files? Yes, in small chunks.

Can I roll my own rule set? Yes, save it as a preset.

Does it run offline? The desktop build runs offline.

Do you keep my files? No, the cloud build wipes after each run.

Will it learn from my work? No, we never train on inputs.

A short tour of the workflow

Upload a file or paste a snippet of prose.

Pick the entities you want gone from the draft.

Choose a method: replace, mask, hash, encrypt, or redact.

Press run and watch the side panel show each hit.

Skim the result and tweak any rule that misfired.

Save the cleaned file or send it to a teammate.