[SlovLit] Morfologija v Linguistici -- Strojni prevajalniki

[Miran gmail]

From: Lingvistični krožek <lingvisticni.krozek na gmail.com>
Date: 2011/2/23
Subject: Linguistica - Vabilo k oddaji prispevkov

Znanstvena revija Linguistica, ki jo izdaja Oddelek za romanske jezike
in književnosti
Filozofske fakultete Univerze v Ljubljani, vabi k oddaji prispevkov za
tematsko številko,
ki bo posvečena vprašanju notranjih in zunanjih meja morfologije.

===

Od: Špela Vintar <spela.vintar na guest.arnes.si>
Datum: 23. februar 2011 11:51
Zadeva: [SDJT-L] [JOTA] Predavanje 1. 3. 2011

Dragi ljubitelji Jote, prisrčno vas vabimo na naše naslednje srečanje,
na katerem
bo absolvent  Oddelka za prevajalstvo Aljoša Vrščaj predstavil svoje diplomsko
delo in raziskavo z naslovom Evalvacija strojnih prevajalnikov.
Predavanje bo v torek,
1. marca 2011, ob 17.00 v učilnici 03 na Filozofski fakulteti,
Aškerčeva 2, Ljubljana.
Povzetek predavanja sledi spodaj, več o Joti pa tudi na naši strani
http://lojze.lugos.si/jota/.
Se vidimo, vaša Jota

Aljoša Vrščaj: Evalvacija strojnih prevajalnikov

Povzetek: V raziskavi sem obravnaval razvoj strojnega prevajanja in metode
za evalvacijo strojnih prevajalnikov. Poleg preizkušenih metod za
ročno evalvacijo,
ki so jih uporabljali v raziskavah ALPAC in ARPA, sem predstavil najpogosteje
citirane metrike za samodejno evalvacijo strojnih prevodov: WER, BLEU, GTM,
ROUGE, METEOR, TER in nekatere njihove izpeljanke. V eksperimentu je
zajeta tako ročna kot samodejna evalvacija ob uporabi štirih metrik in
trije strojni
prevajalniki, ki so trenutno razpoložljivi za jezikovni par
angleščina-slovenščina:
Presis, Bing in Google. S primerjavo ročne in samodejne evalvacije sem s
pomočjo Pearsonovega koeficienta korelacije izračunal, katera metrika se
najbolj ujema z rezultati ročne evalvacije, za katero sem predpostavil, da je
merilo za verodostojno evalvacijo. Rezultati so pokazali zanesljivost
metrik pri
rangiranju prevajalskih sistemov, hkrati pa tudi dvom v dovoljšnjo objektivnost
ročne evalvacije.