Japan PPC i APPI: Uskladjenost AI Training Podataka
Japanski PPC provodi APPI. Amandmani iz 2022. promijenili su zakon vise nego ikad. Dodali su pravila za pseudonimizirane zapise, prekogranicne prijenose i skupove podataka za trening AI modela. PPC je 2024. donio 45 odluka. Te je godine takoer objavio prvi japanski specificni vodic za privatnost u podrucju AI.
Ako vase poduzece trenira modele na japanskim tekstovima ili cuva japanske korisnicke zapise, ova pravila se primjenjuju vec sada.
Sto su promijenili amandmani iz 2022.
2,4 milijuna japanskih poduzeca moralo je azurirati pravila o privatnosti i preurediti postupke obrade.
Pseudonimizirani podaci (仮名加工情報): Nova srednja kategorija. Pokriva osobne zapise s uklonjenim izravnim identifikatorima. Ponovnu identifikaciju jos je moguce provesti ako imate kljuc. Ti se zapisi mogu prenositi unutar organizacije bez punog pristanka. Ne mogu se slati trecim stranama. GDPR nema takvu kategoriju.
Anonimizirani podaci (匿名加工情報): Ponovna identifikacija mora biti tehnicki nemoguca. Kvalificirani neovisni strucnjak mora to potvrditi. Japanska norma je strozia od GDPR-a u tom pogledu. GDPR tu provjeru cini neobaveznom. APPI je cini obaveznom.
Prekogranicni prijenosi: Prijenosi u druge drzave moraju zadovoljiti japanski standard zastite. PPC vodi popis odobrenih drzava. EU je na tom popisu.
Skupovi podataka za trening AI: PPC smjernice iz 2024. izravno su se bavile tim pitanjem.
- Skupovi za trening moraju biti potpuno anonimizirani ili se temeljiti na valjanoj pravnoj osnovi - obicno pristanku.
- Iznimka za obradu primjenjuje se samo ako model ne moze identificirati osobe iz svojih izlaznih podataka.
- Razvijatelji LLM-a koji treniraju na japanskim zapisima prikupljenim s web stranica moraju dokazati valjanu osnovu za prikupljanje.
Za potpuni pregled obveza uskladivanja prekogranicnih prijenosa, pogledajte /legal/compliance.
My Number: Japanski nacionalni ID
My Number (マイナンバー) je 12-znamenkasti nacionalni ID. Japan ga dodjeljuje svim stanovnicima. Strani drzavljani takoer ga dobivaju. Sustav radi od 2016. Pokriva poreze, socijalnu sigurnost i odgovor na katastrofe.
Kako funkcionira kontrolna znamenka: My Number koristi Verhoeff metodu. To je matematicka shema za provjeru gresaka. Slozenija je od Luhn metode - koja se koristi za svedski personnummer i kanadski SIN. Vecina europskih osobnih dokumenata koristi jednostavniju modularnu matematiku.
Zasto je otkrivanje tesko: Pretraga za 12-znamenkastim nizovima nece biti tocna. Datumi, postanski brojevi i kodovi racuna izgledaju jednako. Potrebna je potpuna Verhoeff logika da bi se razlikovali. Obicni regex nije dovoljan.
PPC-ov pregled iz 2024. imao je zabrinjavajuci nalaz: 63 % generickih NLP alata ne uspijeva otkriti My Number u japanskim zapisima.
Pogledajte kako anonym.legal obraduje My Number na /entities.
Tri pisma istovremeno
Japanski koristi hiraganu, katakanu i kanji istovremeno. Latinski se pismo pojavljuje u nekim kontekstima. Isto ime moze izgledati drugacije u razlicitim zapisima. Alati izgraeni za latinicni tekst ne uspijevaju s japanskim bez dodatne podrske.
Sto to znaci za otkrivanje imena:
- Japanski NER treba modele trenirane na japanskom tekstu. Koristite spaCy ja_core_news.
- Japanski nema razmaka medu rijecima. Razdjela rijeci je poseban korak. Zahtijeva alate svjesne japanskog.
- Osobna imena pojavljuju se u kanjiju s vodicima za citanje u hiragani ili katakani. Alati moraju prepoznati oba oblika.
- Nazivi tvrtki (会社名, 株式会社) zahtijevaju japanska specificna pravila.
Za NER kroz APAC jezike, pogledajte /docs/faq.
Ostali japanski formati osobnih dokumenata
Vozacka dozvola: 12 znamenki s prefiksom za regiju izdavanja. Kodovi su fiksni - Tokio je 10, Osaka je 62. Dio s regijom je provjerljiv.
Putovnica: Standardni ICAO format s japanskim specificnim pravilima izdavanja.
Iskaznica zdravstvenog osiguranja (健康保険証): Simbol (記号) plus broj. Format se razlikuje ovisno o osiguravatelju.
Iskaznica boravka (在留カード): Za strane rezidente. Format: dva slova, osam znamenki, dva slova. Ministarstvo pravde ih izdaje.
Status prijenosa podataka Japan-EU
Japan i EU imaju uzajamnu adekvatnost od 2019. Osobni zapisi mogu teci medu EU i Japanom bez dodatnih koraka. Japan je jedna od vrlo malo neeuropskih zemalja s punom EU adekvatnoscu.
Sporazum pokriva standardne osobne zapise. Osjetljivi zdravstveni podaci i podaci o kaznenim evidencijama zahtijevaju dodatne mjere zastite cak i pod adekvatnoscu. Tvrtke koje prenose te zapise moraju evidentirati dodatne korake koje poduzimaju.
Preispitajte svoje obveze prijenosa na /security-compliance.
Kontrolni popis za uskladjenost s Japanom
Pocnite ovdje ako rukujete japanskim osobnim zapisima:
- Otkrivanje My Number s Verhoeff logikom provjere kontrolne znamenke.
- Japanski NER s modelima treniranim na japanskom pismu - ne latinicnim modelima.
- Podrska za kanji, hiragana i katakana oblike imena plus varijante vodicnih citanja.
- Otkrivanje vozacke dozvole s provjerom regionalnog koda.
- Otkrivanje iskaznice boravka s logikom MOJ formata.
- Otkrivanje iskaznice zdravstvenog osiguranja kroz varijante osiguravatelja.
- Valjana pravna osnova za svaki skup podataka za trening AI koji sadrzi osobne zapise.
- Neovisna provjera za sve zapise klasificirane kao anonimizirane prema APPI-ju.
- Dodatne mjere zastite za osjetljive zapise koji se prenose prema sporazumu o adekvatnosti EU-Japan.
Pogledajte /docs/glossary za definicije APPI pojmova koji se koriste u ovom vodicu.