Проблема FOIA редакції
FOIA запити часто включають тисячі документів:
- 100,000+ сторінок
- Тисячі одиниць PII
- Різні формати файлів
Традиційна редакція (ручна):
- Час: 1-2 років на 100,000 сторінок
- Витрати: €100,000–500,000
- Точність: 80–90% (ручні помилки)
Автоматизована редакція:
- Час: 2-4 тижні
- Витрати: €10,000–30,000
- Точність: 95–98%
Архітектура автоматизованої редакції
Етап 1: Конвертація формату
PDF → OCR → Text
Word → Extract → Text
Етап 2: Виявлення PII
Сканування текстум на Імена, Адреси, Номери
Етап 3: Редакція
Заміна чорним прямокутником
Або видалення строк
Етап 4: Валідація
Ручна перевірка 5% вибірки
Контроль якості
Контрольний список для державних органів
- Оцінити обсяг редакції
- Вибрати інструмент (ручна vs автоматична)
- Встановити конвеєр обробки
- Впровадити валідацію якості
- Документувати процес