Zpět na hledáníOn the User-centric Comparative Remote Evaluation of Interactive Video Search Systems (2021)výskyt výsledku
Identifikační kód | RIV/00216208:11320/21:10432907 |
---|---|
Název v anglickém jazyce | On the User-centric Comparative Remote Evaluation of Interactive Video Search Systems |
Druh | J - Recenzovaný odborný článek (Jimp, Jsc a Jost) |
Poddruh | J/A - Článek v odborném periodiku je obsažen v databázi Web of Science společností Thomson Reuters s příznakem „Article“, „Review“ nebo „Letter“ (Jimp) |
Jazyk | eng - angličtina |
Vědní obor | 10201 - Computer sciences, information science, bioinformathics (hardware development to be 2.2, social aspect to be 5.8) |
Rok uplatnění | 2021 |
Kód důvěrnosti údajů | S - Úplné a pravdivé údaje o výsledku nepodléhající ochraně podle zvláštních právních předpisů. |
Počet výskytů výsledku | 2 |
Počet tvůrců celkem | 13 |
Počet domácích tvůrců | 6 |
Výčet všech uvedených jednotlivých tvůrců | Miroslav Kratochvíl (státní příslušnost: CZ - Česká republika, domácí tvůrce: A, vedidk: 9526531, orcid: 0000-0001-7356-4075, researcherid: D-2492-2017) Jakub Lokoč (státní příslušnost: CZ - Česká republika, domácí tvůrce: A, vedidk: 3885364, orcid: 0000-0002-3558-4144, scopusid: 24329538300, researcherid: P-1216-2017) František Mejzlík (státní příslušnost: CZ - Česká republika, domácí tvůrce: A, vedidk: 8918322) Ladislav Peška (státní příslušnost: CZ - Česká republika, domácí tvůrce: A, vedidk: 9028773, orcid: 0000-0001-8082-4509, scopusid: 53985181000, researcherid: HTQ-1107-2023) Tomáš Souček (státní příslušnost: CZ - Česká republika, domácí tvůrce: A, vedidk: 6440818) Patrik Veselý (státní příslušnost: CZ - Česká republika, domácí tvůrce: A, vedidk: 3209291) Ralph Gassler (státní příslušnost: CH - Švýcarská konfederace) Silvan Heller (státní příslušnost: CH - Švýcarská konfederace) Mahnaz Parian-Scherb (státní příslušnost: CH - Švýcarská konfederace) Luca Rossetto (státní příslušnost: CH - Švýcarská konfederace) Loris Sauter (státní příslušnost: CH - Švýcarská konfederace) Heiko Schuldt (státní příslušnost: CH - Švýcarská konfederace) Florian Speiss (státní příslušnost: CH - Švýcarská konfederace) |
Popis výsledku v anglickém jazyce | In the research of video retrieval systems, comparative assessments during dedicated retrieval competitions provide priceless insights into the performance of individual systems. The scope and depth of such evaluations is unfortunately hard to improve, due to the limitations by the set-up costs, logistics and organization complexity of large events. We show that this easily impairs the statistical significance of the collected results, and the reproducibility of the competition outcomes. In this paper, we present a methodology for remote comparative evaluations of content-based video retrieval systems and demonstrate that such evaluations scale-up to sizes that reliably produce statistically robust results, and propose additional measures that increase the replicability of the experiment. The proposed remote evaluation methodology forms a major contribution towards open science in interactive retrieval benchmarks. At the same time, the detailed evaluation reports form an interesting source of new observations about many subtle, previously inaccessible aspects of video retrieval. |
Klíčová slova oddělená středníkem | remote comparative evaluation;video retrieval |
Stránka www, na které se nachází výsledek | https://verso.is.cuni.cz/pub/verso.fpl?fname=obd_publikace_handle&handle=oSuUO5vRdf |
DOI výsledku | 10.1109/MMUL.2021.3066779 |
Odkaz na údaje z výzkumu | - |
Údaje o výsledku v závislosti na druhu výsledku
Název periodika | IEEE Multimedia |
---|---|
ISSN | 1070-986X |
e-ISSN | - |
Svazek periodika | 28 |
Číslo periodika v rámci uvedeného svazku | 4 |
Stát vydavatele periodika | US - Spojené státy americké |
Počet stran výsledku | 11 |
Strana od-do | 18-28 |
Kód UT WoS článku podle Web of Science | 000728190900010 |
EID výsledku v databázi Scopus | 2-s2.0-85103240674 |
Způsob publikování výsledku | C - Omezený přístup (Restricted Access) |
Předpokládaný termín zveřejnění plného textu výsledku | - |
Ostatní informace o výsledku
Předkladatel | Univerzita Karlova / Matematicko-fyzikální fakulta |
---|---|
Dodavatel | MSM - Ministerstvo školství, mládeže a tělovýchovy (MŠMT) |
Rok sběru | 2023 |
Specifikace | RIV/00216208:11320/21:10432907!RIV23-MSM-11320___ |
Datum poslední aktualizace výsledku | 25.05.2023 |
Kontrolní číslo | 192473001 ( v1.0 ) |
Informace o dalších výskytech výsledku dodaného stejným předkladatelem
Dodáno GA ČR v roce 2023 | RIV/00216208:11320/21:10432907 v dodávce dat RIV23-GA0-11320___ |
---|
Odkazy na výzkumné aktivity, při jejichž řešení výsledek vznikl
Projekt podporovaný MŠMT v programu LM | LM2018131 - Česká národní infrastruktura pro biologická data (2020 - 2022) |
---|---|
Podpora / návaznosti | Institucionální podpora na rozvoj výzkumné organizace Specifický výzkum na vysokých školách, poskytovatel MŠMT |