Pokyny k lingvistickému úkolu do IB030
- úkolem je doplnění nových nezodpověditelných otázek do
databáze SQAD, která se využívá pro trénování a testování nových
metod Question Answering na češtině
SQAD - Simple
Question Answering database.
Nové otázky budou odlišné od těch dosavadních v tom, že půjde
o otázky, na které není v textu odpověď. Cílem je,
aby nové techniky byly schopné tuto skutečnost rozpoznat.
- úkol řešte pomocí
on-line aplikace
umožňující rozšiřování databáze SQAD.
Do aplikace se přihlašte pomocí fakultního login i hesla.
- úkolem je připravit nezodpověditelné varianty k alespoň 200
otázkám daných typů. Každá nezodpověditelná varianta bude
vznikat jako obměna náhodně vybrané otázky z databáze SQAD
tak, aby po změně na otázku v daném článku Wikipedie
neexistovala odpověď (a s určitou pravděpodobností ani mimo
tento článek, i když to nemusíte podrobně ověřovat).
U každého záznamu je potřeba:
- vyberte typ otázky pro doplnění. Podle typu bude náhodně
vybrána otázka s odpovědí z databáze SQAD.
- pečlivě si přečtěte vybranou otázku a odpověď i uvedený
text článku ze SQAD.
- vytvořte nové otázky pomocí transformací
vybrané otázky jako je třeba změna dotazované entity,
negace nebo jiná změna, která zajistí, že na danou otázku
nebude možné v textu článku (a potenciálně ani jinde) najít
odpověď. Zachovejte přitom daný typ otázky a očekávané
(neexistující) odpovědi. Vyplňte vždy co nejvíc variant
podle nabízených transformací ve formuláři (1 až 5).
- po zadání variant otázky v aplikaci následně
zkontrolujte automaticky doplněné značky
textu otázek (zejména lemma, pád, rod, číslo, osoba).
Důležité je hlavně podchytit neznámá (cizí, přejatá) slova
a/nebo chybně rozpoznaný pád.
- všechny další dotazy, ke kterým nenajdete odpověď, směřujte
e-mailem na adresu skupiny ib030ling:
ib030ling@aurora.fi.muni.cz
- termíny odevzdání (částí) úkolu jsou uvedeny na stránce předmětu.
- Seznam přihlášených:
1. | Jan Malý |
|
2. | Katarína Petreková |
|
3. | Ondřej Metelka |
|
4. | Šimon Mišák |
|
5. | Martin Dědič |
|
6. | Vít Šebestík |
|
7. | Marek Mahrík |
|
8. | Tomáš Sasínek |
|
9. | Miroslav Gáll |
|
10. | Anna Briolová |
|
11. | Gabriela Macinková |
|
- Pokud by byly s řešením nějaké zásadnější problémy, tak se obraťte
samozřejmě na přednášejícího.
Zpět na stránku předmětu.