کد مقاله کد نشریه سال انتشار مقاله انگلیسی نسخه تمام متن
6961186 1452034 2015 16 صفحه PDF دانلود رایگان
عنوان انگلیسی مقاله ISI
Audiovisual temporal integration in reverberant environments
ترجمه فارسی عنوان
ادغام زمانی صوتی و تصویری در محیط های بازاریابی
کلمات کلیدی
سخنرانی صوتی و تصویری، ناهنجاری صوتی و تصویری، ادغام موقتی، بازتاب
ترجمه چکیده
محققان با تخصیص تله کنفرانس به عنوان یک پلتفرم ارتباطی در دسترس، به منظور درک پیامدهای تعامل بین ادراک انسان و این محیط نا آشنا تلاش می کنند. با توجه به فضای محصور اتاق اتاق کنفرانس، همراه با جدایی فیزیکی بین کاربر، میکروفون و بلندگو، صدای منتقل شده اغلب با اجزای شنوایی بازتاب از اتاق مخلوط می شود. در نتیجه، صوتی را می توان به عنوان زمان تخلیه درک کرد، و این می تواند بر تجربه کاربر و کیفیت درک شده تاثیر می گذارد. علاوه بر این، چالش های دیگر همچنان باید حل شوند. برای مثال، در حین رمزگذاری، فشرده سازی و انتقال، جریان های صوتی و تصویری به طور جداگانه رفتار می شوند. در نتیجه، سیگنالها به ندرت کاملا هماهنگ و همگام هستند. در حقیقت، زمانبندی هر دو بازخورد و هماهنگی تصویری را تحت تاثیر قرار می دهد و دو چالش نیز ممکن است وابسته به یکدیگر باشند. این تحقیق به بررسی ادغام زمانی از واژه های صوتی و گفتار مداوم و همزمان با یک رویداد غیر سخنرانی می پردازد که در گستره ای از سطوح ناپیوستگی برای شرایط مختلف بازتاب قرار دارد. محرک های غیر ارگانیک با محرک ها با ضبط های تقویت شده مقایسه می شوند. یافته ها نشان می دهد که انعکاس بر ادغام زمانی مکالمه پیوسته تاثیر نمی گذارد. با این حال، بازتابی بر ادغام زمانی جداگانه سخنرانی ها و رویداد عمل گرا تاثیر می گذارد، با هماهنگی ذهنی درک شده نسبت به سرآیند صوتی صوتی و دور از جهت مناسبت صوتی رایج است. علاوه بر این، وقت کمتری برای تصمیم گیری های همزمان برای توالی های طولانی صرف می شود، زمانی که مقادیر زمانی طول می کشد و زمانی که بازخوانی معرفی می شود، پیشنهاد می کند که هر دو ناهمگام و بازخورد به خواسته های این کار اضافه می شوند.
موضوعات مرتبط
مهندسی و علوم پایه مهندسی کامپیوتر پردازش سیگنال
چکیده انگلیسی
With teleconferencing becoming more accessible as a communication platform, researchers are working to understand the consequences of the interaction between human perception and this unfamiliar environment. Given the enclosed space of a teleconference room, along with the physical separation between the user, microphone and speakers, the transmitted audio often becomes mixed with the reverberating auditory components from the room. As a result, the audio can be perceived as smeared in time, and this can affect the user experience and perceived quality. Moreover, other challenges remain to be solved. For instance, during encoding, compression and transmission, the audio and video streams are typically treated separately. Consequently, the signals are rarely perfectly aligned and synchronous. In effect, timing affects both reverberation and audiovisual synchrony, and the two challenges may well be inter-dependent. This study explores the temporal integration of audiovisual continuous speech and speech syllables, along with a non-speech event, across a range of asynchrony levels for different reverberation conditions. Non-reverberant stimuli are compared to stimuli with added reverberation recordings. Findings reveal that reverberation does not affect the temporal integration of continuous speech. However, reverberation influences the temporal integration of the isolated speech syllables and the action-oriented event, with perceived subjective synchrony skewed towards audio lead asynchrony and away from the more common audio lag direction. Furthermore, less time is spent on simultaneity judgements for the longer sequences when the temporal offsets get longer and when reverberation is introduced, suggesting that both asynchrony and reverberation add to the demands of the task.
ناشر
Database: Elsevier - ScienceDirect (ساینس دایرکت)
Journal: Speech Communication - Volume 66, February 2015, Pages 91-106
نویسندگان
, , ,