Kufanya Kazi ya ML Data na Mipango ya Kutokuwa na Jina Inayorudia
Kwa ML mafunzo, utahitaji:
- Taarifa ya Kutokuwa na Jina: Kila mteja analezwa na njia sawa
- Inayorudia: Kila sasa mteja sawa alionekana, njia sawa
- Ujinga: Haiwezi kuwa na "John Smith" katika faili moja na "John S." katika nyingine
Tatizo: Kila Njia Tofauti = Shida ya Kutokuwa na Jina
Kwa ML mafunzo:
- Faili 1: "John Smith" → "[PERSON_1]"
- Faili 2: "John Smith" → "[P_001]"
- Faili 3: "John Smith" → "Mr. John"
ML wako itajifanya kwa sababu kila taarifa inatofauti.
Suluhisho: Marekebisho ya Inayorudia
Anonym.legal ina marekebisho ambayo zinazaa matokeo sawa:
Kila mtu "John Smith":
- Faili 1 → "[PERSON_1]"
- Faili 2 → "[PERSON_1]"
- Faili 3 → "[PERSON_1]"
Hii ndiyo "inayorudia" - matokeo sawa kwa kila muda.
Soma pia: