Trenutno se predvaja · Primerjalni preizkusi
Predstavljamo Ray Guardian: vizualna varnost za slike in videoposnetke
Ray Guardian je poenoten sistem vizualne varnosti izdelka Ray, preizkušen v 13 varnostnih kategorijah na ravni slik in na javno označenih podatkovnih zbirkah videoposnetkov.
Predstavljamo Ray Guardian
Ray Guardian je sistem vizualne varnosti izdelka Ray za slike in videoposnetke. Vizualne medije pregleduje glede občutljive vsebine in vrača signale po kategorijah, ki jih lahko Ray uporabi za predvajanje, ustvarjanje, moderiranje in družinske nastavitve.
Bistvo je preprosto: Ray Guardian je enoten sistem. Statične slike in videoposnetki vstopajo po različnih medijskih poteh, vendar izdelek prejme eno odločitev sistema Ray Guardian.
Pri slikah Ray Guardian ocenjuje celotno varnostno taksonomijo: goloto, spolno vsebino, nasilje, nazorne krvave vsebine, orožje, droge, alkohol, kajenje, vznemirljivo vsebino, poljubljanje / intimnost, samopoškodovanje, mučenje živali in nazorne medicinske vsebine.
Pri videoposnetkih Ray Guardian doda časovno razsežnost. Posamezen kader je lahko dvoumen; posnetek lahko prikaže dejanje, namen in kontekst. Pot za videoposnetke združuje prepoznavanje varnosti na ravni kadrov s časovnim razumevanjem na ravni posnetka, tako da končni rezultat odraža, kaj se pojavlja na zaslonu in kaj se dogaja skozi čas.
To je sistem, ki smo ga primerjalno preizkusili.
Primerjalni preizkus vizualne varnosti v 13 kategorijah
Ray Guardian je dosegel 100.000% točnost na izločenem slikovnem primerjalnem preizkusu Ray Guardian s 13 kategorijami: 17,435 znanih oznak, 0 napak.
Ta primerjalni preizkus je najbližje sami taksonomiji izdelka: enake opredelitve kategorij, izločeni primeri in celoten nabor kategorij vizualne varnosti Ray Guardian.
| Primerjalni preizkus | Obseg | Elementi | Točnost | Natančnost | Priklic | F1 |
|---|---|---|---|---|---|---|
| Izločeni primerjalni preizkus Ray Guardian na ravni slik | Vseh 13 kategorij Ray Guardian | 17,435 oznak | 100.000% | 100.000% | 100.000% | 100.000% |
Primerjalni preizkus vključuje kategorije, ki se v dejanskih izdelkih pogosto prekrivajo: spolna vsebina v primerjavi z goloto, nazorne krvave vsebine v primerjavi z nazornimi medicinskimi vsebinami, orožje v primerjavi z nasiljem ter vznemirljiva vsebina v primerjavi z običajnim neprijetnim kontekstom.
Zbirka javno označenih primerjalnih preizkusov videoposnetkov
Primerjalni preizkusi videoposnetkov se merijo glede na oznake, ki jih posamezna podatkovna zbirka dejansko zagotavlja. Podatkovna zbirka poljubov v primerjavi z objemi zagotavlja dokaze za poljubljanje / intimnost. Podatkovna zbirka nasilja zagotavlja dokaze za nasilje in vznemirljive dogodke. Podatkovna zbirka varnih dejanj preverja, ali sistem običajne posnetke dejanj nemoteno dovoli.
Zaradi tega so rezultati lažje berljivi in jih je težje napačno uporabiti: vsaka vrstica poroča o delovanju sistema Ray Guardian v izvornem obsegu oznak te podatkovne zbirke.
| Podatkovna zbirka | Obseg Ray Guardian | Posnetki | Točnost | Natančnost | Priklic | F1 |
|---|---|---|---|---|---|---|
| HMDB51 Kiss vs Hug | Poljubljanje / intimnost | 182 | 98.901% | 99.020% | 99.020% | 99.020% |
| XD-Violence Public Labels | Nasilje / vznemirljiva vsebina | 248 | 100.000% | 100.000% | 100.000% | 100.000% |
| UCF-Crime Mapped Labels | Nasilje / vznemirljiva vsebina | 79 | 100.000% | 100.000% | 100.000% | 100.000% |
| UCF-Crime Broad Anomaly | Anomalija / vznemirljiva vsebina | 109 | 100.000% | 100.000% | 100.000% | 100.000% |
| UCF101 Safe-Action Holdout | Varovalni preizkus varnih dejanj | 330 | 100.000% | n/a | n/a | n/a |
Vrstica UCF101 je varovalni preizkus samo z negativnimi primeri: meri, ali so običajna varna dejanja nepravilno blokirana. V tem preizkusu je Ray Guardian pravilno dovolil vseh 330 posnetkov varnih dejanj.
Kaj prikazujejo matrike zamenjav
Točnost je glavna številka. Matrika zamenjav prikazuje strukturo odločitev, na katerih temelji.
Vsaka matrika ločuje pravilne odobritve, lažne alarme, spregledane nevarne posnetke in pravilno označene nevarne posnetke. To je pomembno, ker mora varnostni sistem zaščititi ljudi, ne da bi običajne medije prekinjal bolj, kot je potrebno.
Neodvisne referenčne podatkovne zbirke
Ray Guardian ocenjujemo tudi na neodvisnih javnih in dostopno omejenih referenčnih podatkovnih zbirkah. Te podatkovne zbirke so uporabne, ker so njihove oznake pripravile druge ekipe za druge cilje in se ne ujemajo vedno popolnoma s kategorijami Ray Guardian.
Spodnja tabela poroča o vsakem rezultatu na ravni kategorije, ki jo podatkovna zbirka lahko podpira. Ko podatkovna zbirka preverja predmete, povezane z alkoholom, poročamo o vedenju glede alkohola. Ko preverja medicinske rane, poročamo o nazornih medicinskih vsebinah ali vznemirljivem vedenju.
| Referenčna podatkovna zbirka | Obseg Ray Guardian | Elementi | Točnost | Priklic | Opombe |
|---|---|---|---|---|---|
| HoliSafe-Bench test split | Preslikane kategorije varnosti slik | 32,248 oznak | 94.266% | 75.779% | Neodvisen dostopno omejen varnostni primerjalni preizkus |
| UnsafeBench train split | Preslikane kategorije varnosti slik | 40,545 oznak | 89.893% | 74.482% | Neodvisen dostopno omejen varnostni primerjalni preizkus |
| SurgWound test split | Nazorne medicinske vsebine | 137 slik | 86.861% | 100.000% | Preverjanje občutljivosti za medicinske rane |
| SurgWound test split | Vznemirljiva vsebina | 137 slik | 83.942% | 99.130% | Preverjanje občutljivosti za medicinske rane |
| Lower Limb and Feet Wound Dataset | Nazorne medicinske vsebine | 5,443 slik | 65.185% | 98.958% | Referenčno preverjanje na področju ran |
| HOD Benchmark Dataset | Alkohol | 10,631 slik | 97.667% | 87.095% | Primerjalni preizkus predmetov za raziskovalno uporabo |
| HOD Benchmark Dataset | Kajenje | 10,631 slik | 98.222% | 93.391% | Primerjalni preizkus predmetov za raziskovalno uporabo |
| HOD Benchmark Dataset | Orožje | 10,631 slik | 85.053% | 68.659% | Primerjalni preizkus predmetov za raziskovalno uporabo |
| Open Images V7 selected validation subset | Orožje | 460 vrstic | 81.957% | 87.234% | Referenčno preverjanje oznak predmetov |
Te vrstice prikazujejo, kako se Ray Guardian vede zunaj primerjalnega preizkusa, za katerega je bil zasnovan.
Zakaj se številke razlikujejo
Nižji rezultat na javni referenčni podatkovni zbirki ni protislovje. Pomeni, da podatkovna zbirka zastavlja drugačno vprašanje.
Primerjalni preizkus Ray Guardian s 13 kategorijami preverja, ali sistem prepoznava varnostne kategorije, uporabljene v izdelku Ray. Neodvisne referenčne podatkovne zbirke preverjajo, kaj se zgodi, ko so zunanje oznake, zunanji načini zbiranja in zunanje opredelitve kategorij preslikani v to taksonomijo.
Rezultati se lahko spremenijo iz preprostih razlogov:
- Različne opredelitve oznak. Podatkovna zbirka lahko označuje predmet, medtem ko Ray Guardian presoja njegov varnostni pomen. Kozarec za vino, steklenica, nož ali klinična rana sami po sebi niso vedno nevarni.
- Grobo opredeljene oznake. Nekatere javne varnostne oznake združujejo več konceptov v eno široko oznako. Kategorije Ray Guardian so natančneje določene.
- Vrzeli v kontekstu. Nekatere oznake so odvisne od napisa, zvoka, okoliškega prizora ali človekovega namena. Ti preizkusi merijo vidno vsebino.
- Premik domene. Zunanje podatkovne zbirke vključujejo drugačne izreze, ločljivosti, ustvarjene slike, nadzorne posnetke, bližnje posnetke predmetov in medicinske posnetke.
- Drugačna zasnova naloge. Primerjalni preizkusi prepoznavanja predmetov so koristni obremenitveni preizkusi, vendar prepoznavanje predmetov ni enako moderiranju vizualne varnosti.
Usklajeni primerjalni preizkus prikazuje delovanje na taksonomiji izdelka Ray Guardian. Referenčne podatkovne zbirke prikazujejo, kako se ta taksonomija prenaša na manj urejene zunanje podatke.
Kako brati primerjalni preizkus
Vsako številko berite na ravni oznak, na katerih temelji.
- Rezultat s 13 kategorijami meri celotno varnostno taksonomijo Ray Guardian na ravni slik.
- Vrstice z videoposnetki merijo Ray Guardian glede na javne oznake videoposnetkov, ki so na voljo v posamezni podatkovni zbirki.
- Vrstice z neodvisnimi referenčnimi podatkovnimi zbirkami merijo prenos na zunanje sisteme oznak in ne nadomeščajo primerjalnega preizkusa taksonomije izdelka.
Ray Guardian je zdaj poenotena plast vizualne varnosti izdelka Ray: en sistem za slike in posnetke, zasnovan za zaznavanje občutljive vsebine in ohranjanje stabilnih odločitev med prehajanjem med kadri.
Izvorne podatkovne zbirke
Zbirka primerjalnih preizkusov navaja vire podatkovnih zbirk, vključno z HMDB51 via FiftyOne, XD-Violence, UCF-Crime, UCF101 via FiftyOne, HoliSafe-Bench, UnsafeBench, Open Images V7, SurgWound in HOD Benchmark Dataset.
