کد مقاله کد نشریه سال انتشار مقاله انگلیسی نسخه تمام متن
6960482 1451999 2018 15 صفحه PDF دانلود رایگان
عنوان انگلیسی مقاله ISI
Influence of visual cues on head and eye movements during listening tasks in multi-talker audiovisual environments with animated characters
ترجمه فارسی عنوان
تأثیر نشانه های بصری بر حرکات چشم و چشم در طی وظایف گوش دادن در محیط های صوتی و تصویری چند زبانه با شخصیت های متحرک
کلمات کلیدی
جنبش سر و چشم، سمعک، ارزیابی، محیط های صوتی و تصویری، تصاویر متحرک،
ترجمه چکیده
مطالعات اخیر در مورد مزایای سمعک نشان می دهد که رفتار جنبش بر روی عملکرد تاثیر می گذارد. برای ارزیابی سیستماتیک این اثرات، رفتار جنبش باید در شرایط ارتباط واقعی واقع شود. برای این منظور، استفاده از محیط های مجازی صوتی و تصویری با شخصیت های متحرک به عنوان محرک های بصری پیشنهاد شده است. با این حال مشخص نیست که چگونه این انیمیشن ها بر رفتار حرکتی چشم و چشم افراد تاثیر می گذارد. در اینجا دو کار شنوایی با گروهی از 14 نوجوان شنوایی طبیعی انجام شد تا بتوانند تأثیر نشانه های بصری بر رفتار حرکتی چشم و چشم را بررسی کنند. در مورد محلی سازی محلی و عملکرد وظیفه قابلیت تشخیص گفتار؛ و همچنین در مورد روشنایی گفتار درک شده، تلاش گوش دادن درک شده و تصور عمومی از محیط های صوتی و تصویری. شخصیت های متحرک با الگوهای مختلف همگام سازی لب و چشم با یک وضعیت صوتی تنها و یک ویدیو از افراد واقعی مقایسه شدند. نتایج نشان می دهد که رفتار حرکتی، عملکرد کار و ادراک تحت تأثیر نشانه های بصری قرار دارند. رفتار جنبش شنوندگان شنوایی شنوایی طبیعی در شرایط انیمیشن با همگام سازی لب ها، شبیه شرایط فیلم بود. این نتایج در شنوندگان شنوایی شنوایی طبیعی اولین گام در جهت استفاده از شخصیت های متحرک برای ارزیابی تاثیر رفتار حرکتی سر بر عملکرد شنوایی است.
موضوعات مرتبط
مهندسی و علوم پایه مهندسی کامپیوتر پردازش سیگنال
پیش نمایش مقاله
تأثیر نشانه های بصری بر حرکات چشم و چشم در طی وظایف گوش دادن در محیط های صوتی و تصویری چند زبانه با شخصیت های متحرک
چکیده انگلیسی
Recent studies of hearing aid benefits indicate that head movement behavior influences performance. To systematically assess these effects, movement behavior must be measured in realistic communication conditions. For this, the use of virtual audiovisual environments with animated characters as visual stimuli has been proposed. It is unclear, however, how these animations influence the head- and eye-movement behavior of subjects. Here, two listening tasks were carried out with a group of 14 young normal hearing subjects to investigate the influence of visual cues on head- and eye-movement behavior; on combined localization and speech intelligibility task performance; as well as on perceived speech intelligibility, perceived listening effort and the general impression of the audiovisual environments. Animated characters with different lip-syncing and gaze patterns were compared to an audio-only condition and to a video of real persons. Results show that movement behavior, task performance, and perception were all influenced by visual cues. The movement behavior of young normal hearing listeners in animation conditions with lip-syncing was similar to that in the video condition. These results in young normal hearing listeners are a first step towards using the animated characters to assess the influence of head movement behavior on hearing aid performance.
ناشر
Database: Elsevier - ScienceDirect (ساینس دایرکت)
Journal: Speech Communication - Volume 101, July 2018, Pages 70-84
نویسندگان
, , , ,