Japonski PPC in APPI: Skladnost pri usposabljanju umetne inteligence
Japonski PPC uveljavlja APPI. Spremembe iz leta 2022 so bile obseznejse od vseh prejsnjih. Uvedle so pravila za psevdonimizirane evidence, cezmejna posredovanja podatkov in nabore podatkov za usposabljanje AI. PPC je leta 2024 izdal 45 odlocitev. V istem letu je objavil tudi prvi japonski AI-smernice za zasebnost.
Ce vase podjetje usposablja modele na japonskem besedilu ali hrani japonske uporabniske evidence, ta pravila veljajo ze zdaj.
Kaj so spremenile spremembe iz leta 2022
2,4 milijona japonskih podjetij je moralo posodobiti pravila zasebnosti in preoblikovati postopke ravnanja s podatki.
Psevdonimizirane informacije (仮名加工情報): Nova vmesna kategorija. Zajema osebne evidence z odstranjenimi neposrednimi identifikatorji. Ponovna identifikacija je se vedno mozna, ce imate kljuc. Takne evidence se lahko znotraj organizacije prenasajo brez celotnega soglasja. Tretjim stranem jih ni mogoce posredovati. GDPR takne kategorije ne pozna.
Anonimizirane informacije (匿名加工情報): Ponovna identifikacija mora biti tehnicno nemogoca. To mora potrditi usposobljena tretja stran. Japonski standard je na tej tocki visji od GDPR. GDPR pregled naredi neobvezen. APPI ga zahteva.
Cezmejna posredovanja: Posredovanje v druge drzave mora izpolnjevati japonski standard varstva. PPC vodi seznam odobrenih drzav. EU je na tem seznamu.
Nabori podatkov za usposabljanje AI: Smernice PPC iz leta 2024 so to neposredno obravnavale.
- Nabori podatkov za usposabljanje morajo biti popolnoma anonimizirani ali temeljiti na veljavni pravni podlagi - obicajno na soglasju.
- Izjema glede obdelave velja samo, ce model ne more identificirati oseb iz svojih izhodnih podatkov.
- Razvijalci LLM, ki usposabljajo modele na japonskih zapisih, pridobljenih s spletnih strani, morajo dokazati veljavno pravno podlago za zbiranje.
Pregled obveznosti pri cezmejinih prenosih je na voljo na /legal/compliance.
My Number: japonska nacionalna identifikacijska stevilka
My Number (マイナンバー) je 12-mestna nacionalna ID-stevilka. Japonska jo dodeli vsem prebivalcem. Dobijo jo tudi tuji drzavljani. Sistem deluje od leta 2016. Pokriva davke, socialno varstvo in odziv na naravne nesrece.
Kako deluje kontrolna stevilka: My Number uporablja Verhoeffovo metodo - matematicno shemo za preverjanje napak. Bolj zapletena je od metode Luhn, ki se uporablja za svedski personnummer in kanadski SIN. Vecina evropskih ID-jev uporablja enostavnejso modulno matematiko.
Zakaj je zaznavanje tezko: Iskanje 12-mestnih nizov bo zgresnilo cilj. Datumi, postne stevilke in stevilke racunov izgledajo enako. Za razvrscanje potrebujete celotno Verhoeffovo logiko. Preprosta regularni izrazi ne zadostujejo.
Pregled PPC iz leta 2024 je pokazal zastrasyujoc rezultat: 63 % genericnih orodij NLP ne zazna My Number v japonskih evidencah.
Preberite, kako anonym.legal obravnava My Number, na /entities.
Trije pisni sistemi hkrati
Japonscina hkrati uporablja hirагано, катакано in kanji. V nekaterih kontekstih se pojavi tudi latinica. Isto ime je lahko v razlicnih evidencah zapisano razlicno. Orodja, zgrajena za besedilo v latinski pisavi, brez dodatne podpore na japonscini odpovejo.
Kaj to pomeni za zaznavanje imen:
- Japonski NER potrebuje modele, usposobljene na japonskem besedilu. Uporabite spaCy ja_core_news.
- Japonscina nima presledkov med besedami. Razdeljitev besed je locen korak, ki zahteva orodja s podporo za japonscino.
- Osebna imena se pojavljajo v kanji z vodicemi za branje v hiragani ali katakani. Orodja morajo zajeti obe obliki.
- Imena podjetij (会社名, 株式会社) potrebujejo pravila, specificna za Japonsko.
Vec o NER v jezikih APAC najdete na /docs/faq.
Drugi japonski formati identifikacijskih dokumentov
Vozniski izpit: 12 stevilk s kodo predpone za obmocje izdaje. Kode so fiksne - Tokio ima 10, Osaka 62. Del z regijo je mogoce preveriti.
Potni list: Standardni format ICAO s pravili izdaje, specificnimi za Japonsko.
Kartica zdravstvenega zavarovanja (健康保険証): Simbol (記号) in stevilka. Format se razlikuje glede na zavarovalnico.
Kartica prebivanja (在留カード): Za tuje rezidente. Format: dve crki, osem stevilk, dve crki. Te kartice izdaja Ministrstvo za pravosodje.
Status prenosa podatkov med Japonsko in EU
Japonska in EU sta si od leta 2019 vzajemno podelili status ustreznosti. Osebni podatki se med EU in Japonsko prenasajo brez dodatnih korakov. Japonska je ena redkih neevropskih drzav s polno ustreznostjo EU.
Dogovor zajema standardne osebne evidence. Obcutljivi zdravstveni podatki in kazenska zgodovina potrebujejo dodatne zavarovalnice celo v okviru ustreznosti. Podjetja, ki prenasajo te evidence, morajo beleziti dodatne ukrepe, ki jih uporabljajo.
Pregled obveznosti pri prenosu je na /security-compliance.
Vaš kontrolni seznam za skladnost z japonsko zakonodajo
Zacnite tukaj, ce ravnate z japonskimi osebnimi evidencami:
- Zaznavanje My Number z logiko kontrolne stevilke Verhoeff.
- Japonski NER z modeli, usposobljenimi na japonskem besedilu - ne modeli za latinicno pisavo.
- Podpora za oblike imen v kanji, hiragani in katakani ter variantam s prirocnikom za branje.
- Zaznavanje vozniskega izpita s preverjanji regionalne kode.
- Zaznavanje kartice prebivanja z logiko formata MOJ.
- Zaznavanje kartice zdravstvenega zavarovanja pri razlicnih zavarovalnicah.
- Veljavna pravna podlaga za vsak nabor podatkov za usposabljanje AI, ki vsebuje osebne evidence.
- Pregled tretje strani za vse evidence, razvrscene kot anonimizirane po APPI.
- Dodatni zavarovalniki za obcutljive evidence, ki se prenasajo v okviru sporazuma o ustreznosti med EU in Japonsko.
Glosar izrazov APPI, ki se uporabljajo v tem vodniku, je na /docs/glossary.