Case Law Retrieval: Critical Evaluation of Czech Legal Information Retrieval Systems

Logo poskytovatele

Varování

Publikace nespadá pod Ústav výpočetní techniky, ale pod Právnickou fakultu. Oficiální stránka publikace je na webu muni.cz.
Autoři

HARAŠTA Jakub

Rok publikování 2019
Druh Článek ve sborníku
Konference Internet of Things: Tagungsband des 22. Internationalen Rechtsinformatik Symposions IRIS 2019
Fakulta / Pracoviště MU

Právnická fakulta

Citace
Klíčová slova Information Retrieval; Evaluation; Czech Legal Information Retrieval Systems; Relevance; Recall; Precision
Přiložené soubory
Popis This paper is concerned with a critical evaluation of three widely used Czech legal information retrieval systems: ASPI, Beck-online and Codexis. The legal information retrieved from these systems shape the existing Czech legal practice. Thus, the issue of how reliable their results are when compared to each other is of utmost importance. The paper reports results of an experiment aiming to frame the discussion on information retrieval from the Czech systems. The experiment uses relation-based searches to create three sets of court decisions. The union of these sets establishes ideal databases for individual research tasks that allow for a comparison of the Recall and the Precision of the individual systems. To assess relevance of documents in a system-independent way, three lawyers (two experts and a non-expert) provided for a binary coding of the relevance of the individual court decisions.
Související projekty:

Používáte starou verzi internetového prohlížeče. Doporučujeme aktualizovat Váš prohlížeč na nejnovější verzi.

Další info