Í spilun · Viðmið
Ray Guardian kynnt: sjónrænt öryggi fyrir myndir og myndskeið
Ray Guardian er sameinað sjónrænt öryggiskerfi Ray, viðmiðað yfir 13 öryggisflokka á myndstigi og gagnasöfn myndskeiða með opinberum merkingum.
Ray Guardian kynnt
Ray Guardian er sjónrænt öryggiskerfi Ray fyrir myndir og myndskeið. Það yfirfer sjónræna miðla með tilliti til viðkvæms efnis og skilar merkjum fyrir flokka sem Ray getur notað fyrir spilun, sköpun, efnisstýringu og fjölskyldustillingar.
Aðalatriðið er einfalt: Ray Guardian er eitt kerfi. Kyrrmyndir og myndskeið fara inn um mismunandi miðlaleiðir, en varan fær eina ákvörðun frá Guardian.
Fyrir myndir metur Ray Guardian allt öryggisflokkunarkerfið: nekt, kynferðislegt efni, ofbeldi, blóðugt efni, vopn, fíkniefni, áfengi, reykingar, truflandi efni, kossa / nánd, sjálfsskaða, dýraníð og blóðugt læknisfræðilegt efni.
Fyrir myndskeið bætir Ray Guardian tíma við. Stakur rammi getur verið tvíræður; myndskeið getur sýnt athöfn, ásetning og samhengi. Myndskeiðsleiðin sameinar öryggisgreiningu á rammastigi og tímalegan skilning á myndskeiðsstigi svo lokaniðurstaðan endurspegli bæði það sem birtist á skjánum og það sem gerist með tímanum.
Þetta er kerfið sem við viðmiðuðum.
13-flokka viðmið fyrir sjónrænt öryggi
Ray Guardian náði 100.000% nákvæmni á fráteknu 13-flokka myndaviðmiði Ray Guardian: 17,435 þekktar merkingar, 0 villur.
Þetta viðmið samsvarar flokkunarkerfi vörunnar best: sömu flokkaskilgreiningar, frátekin dæmi og allt safn sjónrænna öryggisflokka Ray Guardian.
| Viðmið | Umfang | Atriði | Nákvæmni | Nákvæmni jákvæðra niðurstaðna | Endurheimt | F1 |
|---|---|---|---|---|---|---|
| Frátekið myndaviðmið Ray Guardian á myndstigi | Allir 13 flokkar Ray Guardian | 17,435 merkingar | 100.000% | 100.000% | 100.000% | 100.000% |
Viðmiðið inniheldur flokka sem skarast oft í raunverulegum vörum: kynferðislegt efni á móti nekt, blóðugt efni á móti blóðugu læknisfræðilegu efni, vopn á móti ofbeldi og truflandi efni á móti venjulegu óþægilegu samhengi.
Viðmiðunarsafn myndskeiða með opinberum merkingum
Myndskeiðsviðmið eru mæld gegn þeim merkingum sem hvert gagnasafn veitir í raun. Gagnasafn fyrir kossa á móti faðmlögum styður vísbendingar um kossa / nánd. Gagnasafn um ofbeldi styður vísbendingar um ofbeldi og truflandi atburði. Gagnasafn öruggra athafna prófar hvort venjulegum myndskeiðum af athöfnum sé hleypt í gegn án vandkvæða.
Þetta gerir niðurstöðurnar auðveldari í lestri og erfiðari í rangri notkun: hver röð sýnir frammistöðu Ray Guardian innan upprunalegs merkingarumfangs viðkomandi gagnasafns.
| Gagnasafn | Umfang Ray Guardian | Myndskeið | Nákvæmni | Nákvæmni jákvæðra niðurstaðna | Endurheimt | F1 |
|---|---|---|---|---|---|---|
| HMDB51 Kiss vs Hug | Kossar / nánd | 182 | 98.901% | 99.020% | 99.020% | 99.020% |
| XD-Violence Public Labels | Ofbeldi / truflandi efni | 248 | 100.000% | 100.000% | 100.000% | 100.000% |
| UCF-Crime Mapped Labels | Ofbeldi / truflandi efni | 79 | 100.000% | 100.000% | 100.000% | 100.000% |
| UCF-Crime Broad Anomaly | Frávik / truflandi efni | 109 | 100.000% | 100.000% | 100.000% | 100.000% |
| UCF101 Safe-Action Holdout | Varúðarmörk fyrir öruggar athafnir | 330 | 100.000% | n/a | n/a | n/a |
UCF101-röðin er varúðarmörk sem innihalda aðeins neikvæð dæmi: hún mælir hvort venjulegar öruggar athafnir séu ranglega útilokaðar. Í þessu prófi hleypti Ray Guardian öllum 330 myndskeiðum af öruggum athöfnum réttilega í gegn.
Það sem ruglingsfylkin sýna
Nákvæmni er aðaltalan. Ruglingsfylki sýnir gerð ákvarðananna sem liggja að baki henni.
Hvert fylki aðgreinir réttar heimilanir, falskar viðvaranir, óörugg myndskeið sem fóru fram hjá kerfinu og óörugg myndskeið sem voru réttilega merkt. Þetta skiptir máli vegna þess að öryggiskerfi þarf að vernda fólk án þess að trufla venjulega miðla meira en nauðsynlegt er.
Óháð viðmiðunargagnasöfn
Við metum Ray Guardian einnig á óháðum opinberum og aðgangsstýrðum viðmiðunargagnasöfnum. Þessi gagnasöfn eru gagnleg vegna þess að merkingar þeirra voru skrifaðar af öðrum teymum, í öðrum tilgangi, og samræmast ekki alltaf flokkum Ray Guardian fullkomlega.
Taflan hér fyrir neðan sýnir hverja niðurstöðu á því flokkastigi sem gagnasafnið getur stutt. Þegar gagnasafn prófar áfengishluti greinum við frá hegðun fyrir áfengi. Þegar það prófar læknisfræðileg sár greinum við frá hegðun fyrir blóðugt læknisfræðilegt efni eða truflandi efni.
| Viðmiðunargagnasafn | Umfang Ray Guardian | Atriði | Nákvæmni | Endurheimt | Athugasemdir |
|---|---|---|---|---|---|
| HoliSafe-Bench test split | Varpaðir myndöryggisflokkar | 32,248 merkingar | 94.266% | 75.779% | Óháð aðgangsstýrt öryggisviðmið |
| UnsafeBench train split | Varpaðir myndöryggisflokkar | 40,545 merkingar | 89.893% | 74.482% | Óháð aðgangsstýrt öryggisviðmið |
| SurgWound test split | Blóðugt læknisfræðilegt efni | 137 myndir | 86.861% | 100.000% | Næmisprófun fyrir læknisfræðileg sár |
| SurgWound test split | Truflandi efni | 137 myndir | 83.942% | 99.130% | Næmisprófun fyrir læknisfræðileg sár |
| Lower Limb and Feet Wound Dataset | Blóðugt læknisfræðilegt efni | 5,443 myndir | 65.185% | 98.958% | Viðmiðunarprófun á sviði sára |
| HOD Benchmark Dataset | Áfengi | 10,631 myndir | 97.667% | 87.095% | Hlutaviðmið til rannsóknanotkunar |
| HOD Benchmark Dataset | Reykingar | 10,631 myndir | 98.222% | 93.391% | Hlutaviðmið til rannsóknanotkunar |
| HOD Benchmark Dataset | Vopn | 10,631 myndir | 85.053% | 68.659% | Hlutaviðmið til rannsóknanotkunar |
| Open Images V7 selected validation subset | Vopn | 460 raðir | 81.957% | 87.234% | Viðmiðunarprófun hlutamerkinga |
Þessar raðir sýna hvernig Ray Guardian hegðar sér utan viðmiðsins sem það var þróað gegn.
Hvers vegna tölurnar eru ólíkar
Lægri niðurstaða á opinberu viðmiðunargagnasafni er ekki mótsögn. Hún þýðir að gagnasafnið spyr annarrar spurningar.
13-flokka viðmið Ray Guardian spyr hvort kerfið þekki öryggisflokkana sem notaðir eru í Ray. Óháðu viðmiðunargagnasöfnin spyrja hvað gerist þegar ytri merkingum, ytri söfnunaraðferðum og ytri flokkaskilgreiningum er varpað yfir í þetta flokkunarkerfi.
Niðurstöður geta breyst af einföldum ástæðum:
- Mismunandi skilgreiningar merkinga. Gagnasafn kann að merkja hlut á meðan Ray Guardian metur öryggismerkingu. Vínglas, flaska, hnífur eða klínískt sár er ekki alltaf óöruggt eitt og sér.
- Grófar merkingar. Sumar opinberar öryggismerkingar sameina nokkur hugtök í eina víða merkingu. Flokkar Ray Guardian eru sértækari.
- Skortur á samhengi. Sumar merkingar ráðast af myndatexta, hljóði, umlykjandi senu eða ásetningi manns. Þessi próf mæla sýnilegt efni.
- Lénshliðrun. Ytri gagnasöfn innihalda mismunandi skurði, upplausnir, myndaðar myndir, eftirlitsupptökur, nærmyndir af hlutum og læknisfræðilegt myndefni.
- Mismunandi hönnun verkefna. Viðmið fyrir hlutagreiningu eru gagnleg álagspróf, en hlutagreining er ekki það sama og efnisstýring fyrir sjónrænt öryggi.
Samræmda viðmiðið sýnir frammistöðu á vöruflokkunarkerfi Ray Guardian. Viðmiðunargagnasöfnin sýna hvernig flokkunarkerfið yfirfærist á óreiðukenndari ytri gögn.
Hvernig lesa á viðmiðið
Lesið hverja tölu á því stigi sem merkingarnar að baki henni ná yfir.
- 13-flokka niðurstaðan mælir allt öryggisflokkunarkerfi Ray Guardian fyrir myndir á myndstigi.
- Myndskeiðsraðirnar mæla Ray Guardian á opinberu myndskeiðsmerkingunum sem eru tiltækar í hverju gagnasafni.
- Óháðu viðmiðunarraðirnar mæla yfirfærslu yfir í ytri merkingarkerfi, en koma ekki í stað viðmiðsins fyrir vöruflokkunarkerfið.
Ray Guardian er nú sameinað sjónrænt öryggislag Ray: eitt kerfi fyrir myndir og myndskeið, þróað til að greina viðkvæmt efni og halda ákvörðunum stöðugum þegar miðill færist frá einum ramma til annars.
Upprunagagnasöfn
Viðmiðunarsafnið vísar meðal annars í gagnasafnsheimildirnar HMDB51 via FiftyOne, XD-Violence, UCF-Crime, UCF101 via FiftyOne, HoliSafe-Bench, UnsafeBench, Open Images V7, SurgWound og HOD Benchmark Dataset.
