Az EMNLP nyelvtechnológiai konferencia október 26-án a második főkonferencia-napját tartja Budapesten. A magyar fejlesztők és nyelvi modelleket használó vállalkozások számára a kutatási eredmények értékelése azért lényeges, mert egy általános teszt pontszáma csak részben írja le a saját feladatukon várható működést.
A hivatalos program Graham Neubig előadását hétfőn 15:15 és 16:15 közé helyezi. A rendezvény honlapja október 24–29-i budapesti időszakot jelöl. A meghirdetett előadásból eredményt vagy elhangzott állítást előre nem közlünk.
Egy magyar ügyfélszolgálati alkalmazás vizsgálatához saját értékelési javaslatunk három kérdésből áll. Milyen magyar nyelvű mintán mérték a rendszert? Mennyi kézi javítást igényel a válasz? A sikertelen válasz után vissza tudja-e adni az ügyet emberi munkatársnak? A minta összetétele, a javításra fordított idő és az átadás működése külön megfigyelés, amelyet a bevezetés előtt célszerű rögzíteni.
A minőségirányítási szabványról szóló cikkünk a dokumentált folyamatokat, az MIT-n elhangzott gondolatmenet az önálló gondolkodás szerepét tárgyalta. A konferencia anyagainak olvasásakor ezek mellé a tesztelés pontos feladata is odailleszthető. Következőként az előadásokhoz kapcsolt, ténylegesen hozzáférhető tanulmányok és értékelési adatok adhatnak további bizonyítékot. A dátum nélküli programot október 26-án ellenőriztük; helyszíni jelenlétet nem állítunk.