By · Last updated 2026-02-24

بازگشت به وبلاگبهداشت و درمان

تشخیص PHI: Snow Labs 96% در برابر GPT-4o

ابزارهای شناسایی اطلاعات پزشکی یکسان نیستند. معیارهای ECIR 2025 امتیازات F1 از 79% تا 96% را نشان می‌دهد. بیاموزید چرا دقت اهمیت دارد و چگونه ابزارها را ارزیابی کنید.

February 24, 20267 دقیقه مطالعه
PHI detectionde-identificationNER accuracyHIPAAbenchmarks

به‌روزرسانی شده برای 2026

همه ابزارهای شناسایی PHI یکسان نیستند

دقت تنها معیاری است که برای شناسایی PHI اهمیت دارد. یک شکاف 4% کوچک به نظر می‌رسد. اما در یک میلیون پرونده، این به معنای 40,000 بیمار در معرض خطر است.

معیارهای ECIR 2025 شکاف‌های بزرگ دقت را در میان ابزارهای پیشرو نشان می‌دهد. این نتایج باید هر تصمیم خرید در حوزه بهداشت و درمان را شکل دهد.

نتایج معیار ECIR 2025

<!-- VERIFIED-EXTERNAL: John Snow Labs ECIR 2025 Text2Story Workshop paper -->
ابزارامتیاز F1دقتفراخوانی
John Snow Labs96%95%97%
Azure AI91%90%92%
AWS Comprehend Medical83%81%85%
GPT-4o79%82%76%

امتیاز F1 دو چیز را ترکیب می‌کند. دقت: چه تعداد از موارد علامت‌گذاری شده واقعاً PHI بودند. فراخوانی: چه تعداد از موارد PHI واقعی پیدا شدند.

  • دقت پایین به معنای ابرتحریف و از دست دادن زمینه است.
  • فراخوانی پایین به معنای PHI از دست رفته است — نقض داده.

چرا شکاف وجود دارد

داده‌های آموزشی اهمیت دارند

John Snow Labs روی یادداشت‌های بالینی آموزش می‌بیند. این یادداشت‌ها پر از اختصارات و اصطلاحات تخصصی هستند. GPT-4o روی ترکیب گسترده‌ای از متون آموزش می‌بیند. برای داده‌های بالینی طراحی نشده است.

ابزارتمرکز آموزشی
John Snow Labsمخصوص بهداشت، یادداشت‌های بالینی
Azure AIپزشکی عمومی + بالینی
AWS Comprehend Medicalموجودیت‌های پزشکی عمومی
GPT-4oآموزش گسترده، نه مخصوص بهداشت

پوشش موجودیت‌ها متفاوت است

هر ابزاری انواع PHI یکسانی را نمی‌یابد.

موجودیتJohn SnowAzureAWSGPT-4o
نام بیمارانبلهبلهبلهبله
شماره پرونده پزشکیبلهبلهمحدودمحدود
دوز داروبلهبلهبلهجزئی
کدهای روشبلهبلهمحدودخیر
اختصارات بالینیبلهجزئیخیرجزئی
نام اعضای خانوادهبلهبلهجزئیجزئی

زمینه دشوار است

این یادداشت بالینی را در نظر بگیرید:

"بیمار گزارش می‌دهد که داروی Smith را می‌گیرد. دکتر Johnson توصیه می‌کند که دوز افزایش یابد."

یک ابزار PHI خوب باید سه کار انجام دهد:

  1. "Smith" را به عنوان نام برند، نه بیمار، بخواند.
  2. "دکتر Johnson" را به عنوان نام ارائه‌دهنده برای حذف علامت‌گذاری کند.
  3. "بیمار" را به عنوان برچسب نقش، نه نام، بشناسد.

GPT-4o این موارد را از دست می‌دهد. این فراخوانی را به 76% می‌رساند.

هزینه دقت پایین

رفتن از 79% به 96% معرض خطر را به 170,000 پرونده در هر میلیون کاهش می‌دهد.

<!-- VERIFIED: arithmetic derived from ECIR 2025 benchmark figures -->
دقتپرونده‌هامعرض خطر PHI
96%1,000,00040,000
91%1,000,00090,000
83%1,000,000170,000
79%1,000,000210,000

جریمه‌های HIPAA با میزان معرض خطر مقیاس می‌شوند

<!-- VERIFIED-EXTERNAL: HIPAA Journal penalty tiers / 45 CFR 160.404 -->
سطحعلتجریمه به ازای هر نقض
1ناآگاه$100–$50,000
2دلیل معقول$1,000–$50,000
3غفلت عمدی، اصلاح شده$10,000–$50,000
4غفلت عمدی، اصلاح نشده$50,000+

انتخاب ابزار 79% در حالی که ابزارهای 96% وجود دارند ممکن است تحت قوانین HHS غفلت عمدی باشد. شکاف شناخته شده است. ابزار بهتری در بازار وجود دارد.

چگونه یک خط لوله ترکیبی دقت را افزایش می‌دهد

هیچ روش واحدی همه انواع PHI را نمی‌یابد. یک خط لوله ترکیبی روش‌ها را روی هم می‌چیند. هر کدام شکاف‌هایی را که دیگران می‌گذارند پر می‌کند.

متن ورودی
    ↓
[الگوهای Regex] — داده ساختاریافته: SSN، MRN، تاریخ‌ها
    ↓
[spaCy NER] — نام‌ها، مکان‌ها، سازمان‌ها
    ↓
[مدل‌های Transformer] — موجودیت‌های وابسته به زمینه
    ↓
[فرهنگ‌نامه‌های پزشکی] — اصطلاحات تخصصی بهداشت
    ↓
نتایج ادغام شده (بیشترین اطمینان برنده می‌شود)
روشنقاط قوتنقاط ضعف
Regexعالی برای داده ساختاریافتهبدون مدیریت زمینه
spaCyسریع، موجودیت‌های رایجواژگان پزشکی محدود
Transformersآگاه از زمینه، فراخوانی بالاکندتر
فرهنگ‌نامه‌هااصطلاحات پزشکی کاملایستا، نیاز به به‌روزرسانی

سوالاتی که باید از هر فروشنده بپرسید

قبل از امضا، پنج چیز بپرسید:

  1. امتیاز F1 روی یادداشت‌های بالینی چقدر است؟ داده‌های شخص ثالث بخواهید. ادعاهای مبهم را رد کنید.
  2. کدام انواع موجودیت؟ همه 18 شناسه HIPAA Safe Harbor باید پوشش داده شوند.
  3. اختصارات را چگونه مدیریت می‌کنید؟ "Pt," "Dx," و "Hx" باید به درستی تفسیر شوند.
  4. PHI اعضای خانواده را می‌یابید؟ "مادر دیابت دارد" PHI است. بسیاری از ابزارها آن را از دست می‌دهند.
  5. همه فرمت‌های یادداشت را پشتیبانی می‌کنید؟ یادداشت‌های پیشرفت، خلاصه‌های ترخیص و گزارش‌های رادیولوژی بسیار متفاوت هستند.

نشانه‌های هشداردهنده:

  • هیچ عدد دقت مشخصی وجود ندارد
  • آزمایش فقط روی داده‌های تمیز و ساختاریافته
  • داده آموزشی بهداشتی وجود ندارد
  • انواع موجودیت کم
  • اعتبارسنجی HIPAA Safe Harbor وجود ندارد

نتیجه‌گیری

داده‌های ECIR 2025 واضح است. یک شکاف 17 امتیازی — 96% در برابر 79% — به معنای 170,000 پرونده بیشتر در معرض خطر در هر میلیون است. انتخاب ابزار بزرگترین متغیر خطر در مقیاس است.

هنگام انتخاب ابزار تشخیص PHI:

  • داده دقت مشخص روی متن بالینی درخواست کنید
  • پوشش کامل HIPAA Safe Harbor را تأیید کنید
  • روی فرمت‌های سند خودتان آزمایش کنید
  • خطوط لوله ترکیبی را به جای ابزارهای تک‌روشی انتخاب کنید

بخوانید که توکن‌سازی چگونه در اسناد سیستم توکن کار می‌کند. سوالات متداول در FAQ هستند.


anonym.legal قبل از رسیدن اسناد به هر ابزار هوش مصنوعی، PHI را با توکن جایگزین می‌کند. نام‌ها، تاریخ‌ها و شماره‌های پرونده از طرف شما تعویض می‌شوند. نتایج با جزئیات واقعی برمی‌گردند — فقط برای شما. قیمت‌گذاری را بررسی کنید.

منابع

آماده‌اید داده‌های خود را محافظت کنید؟

شروع به ناشناس‌سازی PII با بیش از ۲۸۵ نوع نهاد در ۴۸ زبان.

About this page

We update this page when our platform or the law changes.

Read our founder note for how we work.

Each change shows up in the timestamp at the top.

Related reading

We follow these rules

  • GDPR (EU 2016/679).
  • ISO/IEC 27001:2022.
  • NIS2 (EU 2022/2555).
  • HIPAA safe harbor under 45 CFR § 164.514(b)(2).

Our promise

We do not sell your data.

We do not train models on your text.

We store your files in Germany.

You can delete your account at any time.

You own your work.

Where we run

Our servers live in Falkenstein, Germany.

We use Hetzner. They hold ISO 27001 certification.

All data stays in the EU.

Backups run every day.

Need help?

Email support@anonym.legal.

We reply within one business day.

How we test

We run a full check suite on every release.

Each surface gets its own sweep script and report.

Human reviewers spot-check the output each week.

We track recall and precision on a labelled set.

Bad runs block the deploy.

What we never do

  • We never sell your information to third parties.
  • We never train models on what you upload.
  • We never keep your work after you delete it.
  • We never share keys with any outside firm.
  • We never run ads inside the product.

Plans in plain words

We sell credits, not seats.

One credit covers one short job.

Long jobs use a few credits each.

You can top up at any time.

Unused credits roll over each month.

Read the plans page for current rates.

Who built this

A small team of engineers and lawyers built this.

We ship from Europe and work in the open.

Our founder note spells out why we started.

Where to start

How the parts fit

A browser add-on cleans text inside Chrome.

A Word plug-in handles drafts in Office.

A small desktop tool works on whole folders.

An agent protocol link feeds large models safely.

All four share one core engine and one rule set.

Words from our team

We started this work after a lunch about cookies.

One friend kept getting odd ads on her phone.

We asked why a court file leaked through a draft.

We sketched the first build on a napkin that week.

By month three we had a tiny demo for a friend.

She used it on her first case the next day.

Common questions we hear

Can the tool read scanned PDFs? Yes, with OCR.

Does it work on long files? Yes, in small chunks.

Can I roll my own rule set? Yes, save it as a preset.

Does it run offline? The desktop build runs offline.

Do you keep my files? No, the cloud build wipes after each run.

Will it learn from my work? No, we never train on inputs.

A short tour of the workflow

Upload a file or paste a snippet of prose.

Pick the entities you want gone from the draft.

Choose a method: replace, mask, hash, encrypt, or redact.

Press run and watch the side panel show each hit.

Skim the result and tweak any rule that misfired.

Save the cleaned file or send it to a teammate.