// Nafnagreining og tilbúin próf
Niðurstöður, með mörkunum sýnilegum.
Ný prófunarútgáfa bætir möskun og endurheimt. Nafnalíkanið helst óbreytt eftir síðustu þjálfunarumferð. Hér eru nýjar þróunarmælingar, óstaðfest markmið og eldri niðurstöður með skýrum takmörkunum.
DMZ · ný prófunarútgáfa · 05.10.2026
Fleiri auðkenni möskuð að fullu.
Ný lokuð prófunarútgáfa bætir möskun netfanga, aðgangstákna og studdra heimilisfanga með húsnúmeri án póstnúmers. Hún varðveitir upprunalegan texta við endurheimt, þar á meðal broddstafi, og heldur betur utan um sendingar sem bíða greiningar. Breytt uppkast er ekki sent sjálfkrafa eftir bið.
Þetta eru breytingar í prófunarútgáfu, ekki almenn útgáfa. Nafnalíkanið er óbreytt og markmiðið um 99% greiningarárangur er enn óstaðfest.
| Próf | Fyrir | Eftir |
|---|---|---|
| Netföng á mismunandi sniði | 18 / 39 | 39 / 39 |
| Forundirritaðar AWS-vefslóðir | 1 / 30 | 30 / 30 |
| GitHub-aðgangstákn | 1 / 15 | 15 / 15 |
| Aðgangsgildi í úthlutunum | 0 / 25 | 21 / 25 |
| Tímabundin AWS-aðgangsgildi | 7 / 23 | 21 / 23 |
Þetta eru valin og endurnýtt þróunarpróf, ekki dæmigert úrtak eða óháð mat á raunverulegum árangri. Hlutar auðkenna teljast ekki full möskun. Möskun alls textans getur varið gildi án þess að greining tegundar og marka sé rétt. Ekki má leggja prófin saman í heildarhlutfall nákvæmni.
Endurheimt og sendingar prófaðar.
Upprunalegur texti endurheimtist nákvæmlega í öllum prófuðum textahlutum í 20 tilbúnum prófunarsöfnum, bæði með grunnmöskun og þjálfuðum greini. Sextán sendingar- og villuferli voru prófuð í vafra. Fullkomin endurheimt í þessum prófum þýðir ekki að öll auðkenni hafi fundist.
Enn vantar nöfn, heimilisföng utan studdra sniða og sum stutt eða óvenjuleg aðgangsgildi. Saklausar tilvísanir geta líka verið ranglega maskaðar. Óháðar merkingar og prófun nýju útgáfunnar í daglegri notkun eru næstu skref.
Nafnagreining · staða þróunar · 05.10.2026
Nafnalíkanið helst óbreytt.
Ný þjálfunarumferð skilaði ekki líkani sem stóðst samanburð við núverandi líkan. Betri heimtur á tilbúnum laga- og fjármálatextum fylgdu lakari heimtur á almennum textum. Fyrra líkanið er því áfram í sérstakri DMZ-prófunarútgáfu. Engin almenn útgáfa hefur verið gefin út.
| Mælikvarði | Almennur texti · 5.582 textahlutar | Tilbúnir laga- og fjármálatextar · 256 skjöl |
|---|---|---|
| Textahlutar með öll nöfn rétt | 98,57% | 97,66% |
| Heimtur nafna (recall) | 97,01% | 98,75% |
| Nákvæmni greininga (precision) | 95,55% | 99,37% |
| Nöfn sem vantar | 45 | 6 |
| Rangar greiningar | 68 | 3 |
Markmiðið er að minnsta kosti 99% textahluta með öll auðkenni rétt og 99% heimtur í hverjum meginflokki texta. Það hefur ekki náðst. Óháð staðfesting er enn ólokin.
Textahluti telst aðeins réttur ef öll merkt auðkenni finnast með réttri tegund og nákvæmum mörkum, án aukagreininga. Heimtur mæla hlutfall merktra auðkenna sem finnast. Nákvæmni greininga (precision) er annar mælikvarði: hlutfall greininga sem eru réttar. Taflan metur aðeins nöfn; lokamarkmiðið nær til allra auðkennategunda.
Þetta eru þróunarmælingar eftir ítrekað val á líkönum og stillingum, ekki óháð lokaprófun. Tilbúnu skjölin endurnýta sniðmát og yfirferð merkinga er ólokið. Tölurnar segja ekki til um daglega notkun eða DMZ í heild.
Staða staðfestingar
Úrtak með 142 textahlutum úr 88 skjölum bíður óháðra merkinga og yfirferðar. Það hefur ekki verið keyrt í gegnum líkanið. Yfirferð og úrlausn ágreinings um merkingar eru enn eftir; engin óháð lokamæling liggur fyrir. Aðskilnaður skjala og dæmigert úrtak þurfa að liggja fyrir áður en hægt er að fullyrða um árangur í daglegri notkun.
Fyrri rannsóknarprófun í Chromium endurtók nákvæmni greininga og heimtur líkansins. Nýja DMZ-prófunarútgáfan hefur einnig verið prófuð með tilbúnum dæmum fyrir möskun, endurheimt og villumeðhöndlun. Það staðfestir ekki árangur á öllum sendingarleiðum eða raunverulegum vinnugögnum.
Eldri tilbúin próf · varðveittar mælingar
Eftirfarandi töflur varðveita eldri mælingar á 42, 18 og 29 tilbúnum dæmum. Þær lýsa útgáfunum sem þá voru prófaðar, ekki nýja þjálfaða greininum. Presidio-samanburðurinn gildir aðeins um sama eldra gervisafn.
SÉRSTAKT ÁSKORANASAFN
2 þekktir lekar í tilbúnu prófi.
Þessi 18 dæmi voru samin eftir fyrstu greiningarreglurnar. Upphaflega fóru 8 merkt auðkenni í gegn. Reglurnar voru síðan lagaðar að þessum dæmum; taflan varðveitir niðurstöðu þeirrar umferðar á sama safni. Hún er hvorki óháð prófun né dæmigert lekahlutfall.
Þá mæld endurheimt við nákvæma tegund og staðsetningu: nöfn 80%, heimilisföng 100%, leyndarmál 66.7%, símanúmer 100%, netföng 100%. Aðeins örfá dæmi eru í hverri tegund.
ELDRA KÖNNUNARPRÓF
13 auðkenni í leyfðum texta á 29 dæmum.
Dæmin voru samin eftir lagfæringarnar til að kanna önnur snið og rangar greiningar. Greiningin var ekki löguð að þeim. Þetta er markvisst lítið próf, ekki slembiúrtak eða mat á raunverulegri tíðni. Eitt saklaust verðdæmi var stöðvað sem heimilisfang.
dmz-frumgerð eftir tegund.
Rétt tegund og nákvæmlega rétt staðsetning þarf að finnast til að telja rétt svar. FP er röng greining; FN er auðkenni sem fór framhjá.
TP = rétt greining, FP = röng greining, FN = framhjáhlaup. Orðabókarprófið inniheldur aðeins eitt fyrirfram stillt gerviheiti, Verkefni Gervi. Eina heimilisfangið hittir þrönga lögunarreglu og stöðvar fyrirspurn.
ÖRYGGISMÖRK · FRUMGERÐ
Hvað yrði enn sýnilegt?
Á þessu handvalda safni eru 0 merkt auðkenni eftir í leyfðum texta. 2 óþekkt full nöfn og 1 heimilisfang stöðva fyrirspurn til yfirferðar; alls eru 10 fyrirspurnir stöðvaðar. Þetta er ekki sönnun fyrir því að raunverulegur texti leki ekki.
Talið fyrir hvert fyrirfram merkt auðkenni: maskað, stöðvað með allri fyrirspurninni eða enn í leyfðum texta. Engu líkani var sent efni. Ómerkt samhengi er ekki metið og safnið er ekki dæmigert fyrir raunverulegan leka.
Samanburður: einföld regex.
Sömu 42 dæmi, en án dagsetninga-, gátstafa-, mod-97- og Luhn-staðfestinga eða nafnaorðabókar. Mynstur geta skarast; röng greining er talin í hverri tegund.
Samanburður: sjálfgefið Presidio.
Presidio Analyzer 2.2.364 með sjálfgefnu ensku en_core_web_lg 3.8.0 líkani. Enginn íslenskur greinir eða sérstilling var bætt við. Sömu nákvæmu mörk og tegundir eru skoruð.
Hvernig við mældum.
Hvert dæmi hefur fyrirfram merkt auðkenni. Go-greiningin skilar tegund og staðsetningu í UTF-8 bætum. Skorarinn ber saman nákvæma staðsetningu og tegund; lík orð eða hlutar teljast ekki rétt.
Prófunarkennitölur hafa aldarstaf 8. Netföng nota frátekin dæmalén, kort eru prófunarnúmer og engin raunveruleg viðskiptavinagögn eru notuð.