Multimodal integration in a map-based system using temporal, spatial and deictic relationship approaches

Penyelidikan ini bertujuan untuk meningkatkan integrasi multimodel, khususnya untuk pertuturan berterusan dan lakaran dalam interaksi manusia dengan komputer. Untuk memanfaatkan maklumat yang terkandung di kedua-dua model, kita harus mengenali maklumat lisan dengan merujuk kepada lakaran yang betul...

وصف كامل

محفوظ في:
التفاصيل البيبلوغرافية
المؤلف الرئيسي: Loh, Chee Wyai
التنسيق: أطروحة
اللغة:English
منشور في: 2011
الموضوعات:
الوصول للمادة أونلاين:http://ir.unimas.my/id/eprint/28956/2/Loh%20Chee%20Wyai.pdf
الوسوم: إضافة وسم
لا توجد وسوم, كن أول من يضع وسما على هذه التسجيلة!
الوصف
الملخص:Penyelidikan ini bertujuan untuk meningkatkan integrasi multimodel, khususnya untuk pertuturan berterusan dan lakaran dalam interaksi manusia dengan komputer. Untuk memanfaatkan maklumat yang terkandung di kedua-dua model, kita harus mengenali maklumat lisan dengan merujuk kepada lakaran yang betul. Dalam teknik cadangan kami, kami mengintegrasikan model perwakilan lakaran dan pertuturan dengan mempertimbangkan jarak relatif yang dinormalisasi antara objek dalam lakaran, kata sendi ruang dan kata-kata petunjuk dari pertuturan tersebut. Kami membandingkan teknik integrasi yang dicadangkan dengan teknik integrasi multimodel. Keputusan menunjukkan peningkatan 11% dalam ketepatan pencocokan pasangan yang benar dari pertuturan dan lakaran iaitu dari 52% menjadi 63%. Peningkatan teknik integrasi ini telah menunjukkan bahawa kemungkinan berpadanan dengan pasangan yang salah antara pertuturan dan lakaran dapat dikurangkan.