Changes between Version 2 and Version 3 of cs/ExtractionOfFactsGoldStandard

Timestamp:

Mar 22, 2016, 1:56:15 AM (8 years ago)

Author:

xkovar3

Comment:

--

cs/ExtractionOfFactsGoldStandard

@@ -34 +34 @@
 * speciální symboly (např. symboly měn) a fráze s nimi, ale pouze pokud mají jasnou sémantiku, která spadá do naší klasifikace
 
-{{{
-#!html
- <input type="text" name="uco" id="uco"/>
- <input type="submit" name="Go" onclick="window.location.href='https://nlp.fi.muni.cz/projekty/set/efa/gold/list.cgi?uco=' + document.getElementById('uco').value;"/>
-}}}
 
-== Praktické tipy ==
+== Vlastní anotace ==
+
+bude probíhat v jednoduché webové aplikaci, na kterou se dostanete, pokud zkopírujete a vložíte do URL řádku svého prohlížeče následující adresu:
+
+{{{https://nlp.fi.muni.cz/projekty/set/efa/gold/list.cgi?uco=xxxxxx}}}
+
+přičemž písmena {{{xxxxxxx}}} nahraďte svým UČO. Zobrazí se několik anotačních sad, které postupně projdete všechny. Po vybrání sady se otevře relativně krátký text v jednoduchém webovém editoru, kde můžete pouze měnit barvy -- používejte barvu pozadí, tedy to pravé ze dvou tlačítek v horní liště. **Vlastní text v žádném případě nijak neupravujte, ani pokud v něm najdete chybu.**
+
+Po dokončení anotace soubor odešlete tlačítkem ve spodní části stránky. Zobrazí se výsledek anotace a odkaz na původní seznam, kde bude indikováno, že jste příslušnou část úkolu splnili. Můžete si hotovou anotaci znovu prohlédnout, případně anotovat znovu. V aplikaci není možné jednoduše upravit již uloženou anotaci (takže si vždy dobře prohlédněte, co odesíláte).
+
+Po dokončení všech částí anotace nás informujte, že můžeme zahájit hodnocení -- e-mailem na adresy xkovar3@fi.muni.cz a hales@fi.muni.cz . Rovněž připojte několik krátkých postřehů o tom, co se vám rozhodovalo špatně a proč, a co naopak dobře (bude rovněž bráno v potaz při hodnocení, ale spíše okrajově).
+
+Jakékoli dotazy směřujte na e-mailovou adresu xkovar3@fi.muni.cz, do předmětu vždy uvádějte kód IB030.
+
+
+== Příklad ==
+
+Příklad dobře anotovaného textu: https://nlp.fi.muni.cz/projekty/set/efa/gold/priklad.finished.html
+Původní stav a legenda k barvám: https://nlp.fi.muni.cz/projekty/set/efa/gold/xkovar3_1.html
+
+
+=== Praktické tipy ===
 
 * Všimněte si, že řazení sémantických kategorií kopíruje obvyklý pořádek větných členů (asi tedy hlavně anglických) SVOMPT -- tedy Subject, Verb, Object, Manner, Place, Time. Může vám to posloužit jako mnemotechnická pomůcka při anotaci.
 * pokud označujete pouze jedno slovo, nejrychlejší bude dvojklik na něj
 * práce vám půjde mnohem lépe od ruky s myší než např. s touchpadem
+* funkce "zpět" je v editoru dostupná jako Ctrl+Z
+
+
+== Hodnocení ==
+
+Na základě ručního vyhodnocení náhodného vzorku vámi anotovaných dat vám budou přiděleny body. V úvahu bude brána zejména míra dodržení výše uvedených pokynů a faktická (lingvistická) správnost a kvalita anotace.