Waiting
Elaborazione accesso...

Trial ends in Request Full Access Tell Your Colleague About Jove
JoVE Journal Behavior
Click here for the English version

Behavior

استخدام حركات العين التي تسجل في نموذج العالم المرئي لاستكشاف الإنترنت معالجة اللغة المنطوقة

Published: October 13, 2018 doi: 10.3791/58086
Automatic Translation
1
1Institute for Speech Pathology and the Brain Science, School of Communication Science, Beijing Language and Culture University

Summary

نموذج العالم المرئي وترصد حركات العين المشاركين في مساحة عمل visual كما يتم الاستماع إلى أو يتحدث لغة منطوقه. يمكن استخدام هذا النموذج للتحقيق في معالجة طائفة واسعة من المسائل بسيتشولينجويستيك، بما في ذلك البيانات المعقدة لغوياً، مثل بيانات الفاصل على الإنترنت.

Abstract

في عين نموذجية تتبع دراسة باستخدام نموذج العالم المرئي، المشاركين العين حركات للكائنات أو الصور في مساحة عمل visual تسجل عبر تعقب عين كما تنتج المشارك أو يفهم لغة منطوقه تصف البصرية المتزامنة العالم. هذا النموذج ببراعة عالية، كما أنها يمكن أن تستخدم في طائفة واسعة من السكان، بما في ذلك أولئك الذين لا يمكن قراءة و/أو الذين لا يمكن أن تعطي علنا ردودهم السلوكية، مثل الأطفال الشفهي، البالغين المسنين، والمرضى. الأهم من ذلك، النموذج حساسة للغاية للتلاعب غرامة الحبيبات إشارة الكلام، ويمكن استخدامه لدراسة معالجة معظم المواضيع في فهم اللغة على مستويات متعددة، مثل الصوتية غرامة الحبيبات الصوتية عبر الإنترنت ميزات وخصائص الكلمات والهياكل اللغوية. ويوضح البروتوكول الموضحة في هذه المقالة كيفية إجراء نموذجي عالم مرئي عين تتبع الدراسة، مع أمثلة تبين كيف يمكن استكشاف الإنترنت معالجة بعض البيانات المعقدة لغوياً مع نموذج العالم المرئي.

Introduction

اللغة المنطوقة هو تدفق معلومات السريع والمتواصل، الذي يختفي الحق بعيداً. تحد تجريبيا دراسة هذا الزمان، وسرعة تغيير إشارة الكلام. يمكن استخدام حركات العين التي تسجل في نموذج العالم المرئي للتغلب على هذا التحدي. في عين نموذجية تتبع دراسة باستخدام نموذج العالم المرئي، تراقب حركات العين المشاركين للصور في عرض أو الكائنات الحقيقية في مساحة عمل visual كما أنهم الاستماع إلى، أو إنتاج، اللغة المنطوقة التي تصور محتويات العالم المرئي1 ،2،،من34. المنطق الأساسي، أو فرضية الربط، وراء هذا النموذج أن فهم أو التخطيط الكلام (علنا أو سراً) سيتحول المشاركين الانتباه البصري لكائن معين في العالم المرئي. وسيكون هذا التحول في الاهتمام وجود احتمال كبير لبدء حركة عين ساككاديك لإحضار منطقة حضر إلى رؤية نقري. مع هذا النموذج، يعتزم الباحثون لتحديد ما هي النقطة الزمنية، فيما يتعلق ببعض معلما الصوتية في إشارة الكلام، يحدث تحولاً في المشارك الانتباه البصري، مقيسة بحركة عين ساككاديك لكائن أو صورة في المرئي العالم. متى وأين بدأت حركات العين ساككاديك فيما يتعلق بإشارة الكلام ثم تستخدم للاستدلال على معالجة اللغة على الإنترنت. يمكن استخدام نموذج العالم المرئي لدراسة اللغة المنطوقة الفهم1،2 والإنتاج5،6على حد سواء. سوف تركز هذه المادة المنهجية على دراسات الفهم. وفي دراسة فهم باستخدام نموذج العالم المرئي، العين المشاركين وتراقب تحركات على العرض المرئي كما كانوا يستمعون إلى تصريحات المنطوقة تتحدث عن العرض المرئي.

وقد صممت نظم تتبع العين مختلفة في التاريخ. أبسط، هو النظام الأقل كلفة والأكثر المحمولة مجرد كاميرا الفيديو عادي، الذي يسجل صورة لعيون المشارك. ثم يتم ترميز حركات العين يدوياً من خلال دراسة الإطار حسب الإطار لتسجيل الفيديو. بيد أن معدل أخذ العينات من هذه تعقب العين منخفضة نسبيا، وإجراءات الترميز مضيعة للوقت. وهكذا، يستخدم عين تجارية معاصرة بنظام تتبع عادة أجهزة الاستشعار البصرية قياس اتجاه العين في المدار7،،من89. لفهم كيفية عمل نظام تتبع العين تجارية معاصرة، ينبغي النظر في النقاط التالية. أولاً، لقياس اتجاه رؤية نقري، إضاءة الأشعة تحت حمراء بشكل صحيح (عادة مع الطول الموجي حوالي 780 880 نانومتر) هو عادة المزروعة على طول أو إيقاف المحور البصري للكاميرا، مما يجعل صورة التلميذ distinguishably أكثر إشراقا أو أغمق من القزحية المحيطة بها. ثم يتم استخدام صورة للتلميذ و/أو انعكاس القرنية التلميذ (عادة الصورة بوركنجي الأولى) لحساب اتجاه العين في مدارها. ثانيا، الموقع الحملقة في العالم المرئي فعلا يتوقف ليس فقط على اتجاه العين فيما يتعلق بالرأس ولكن أيضا على التوجه الرئيسي فيما يتعلق بالعالم المرئي. لدقة الاستدلال أنظار الصدد من اتجاه العين، مصدر الضوء والكاميرا من العين-تتبع أما ثابتة فيما يتعلق برئيس المشاركين (محمولة على رأس العين-تتبع) أو ثابتة فيما يتعلق بالعالم المرئي (محمولة على الجدول أو العين بعيد-تتبع). ثالثا، التوجه المشتركين الرئيسي يجب أن تكون ثابتة أما فيما يتعلق بالعالم المرئي أو يمكن تعويضه حسابياً إذا رأس المشاركين حرية التحرك. عندما يتم استخدام عين-تعقب بعيد في وضع الرأس مجاناً للتحرك، يتم تسجيل موقف المشاركين رئيس عادة بوضع ملصق صغير على جبهته المشاركين. ثم يتم طرح اتجاه الرأس حسابياً من اتجاه العين لاسترداد موقع البصر في العالم المرئي. رابعا، مطلوبة ثم معايرة وعملية التحقق من صحة لتعيين اتجاه العين للبصر الشأن في العالم المرئي. في عملية المعايرة، ويتم تسجيل تثبيت العينات المشاركين من النقاط المستهدفة معروفة لتعيين البيانات الخام العين نظرات الموقف في العالم المرئي. في عملية التحقق من الصحة، يتم عرض المشاركون مع نفس النقاط المستهدفة كعملية المعايرة. ثم يتم استخدام الفرق القائم بين موقف التثبيت محسوب من نتائج المعايرة والوضع الفعلي لهذا الهدف تركز اهتمامها في العالم المرئي للحكم على دقة المعايرة. إلى مزيد تأكيد دقة عملية التعيين، عادة يتم تطبيق الاختيار انجراف في كل محاكمة، التي عرضت فيها هدفا يتمثل في تثبيت واحد للمشاركين لقياس الفرق بين موقف محسوب التثبيت والوضع الفعلي الهدف الحالي.

البيانات الأولية لدراسة العالم المرئي تيار مواقع نظرات في العالم المرئية المسجلة بمعدل أخذ العينات من العين-tracker، تمتد على مدى كلياً أو جزئيا لمدة المحاكمة. تعتمد على المتغير المستخدمة في دراسة عالم مرئي هو عادة نسبة العينات أن تثبيتات المشاركين تقع في منطقة معينة المكانية في العالم المرئي عبر إطار زمني معين. لتحليل البيانات، لديها إطار زمني أولاً يتم اختيارها، غالباً ما يشار إلى فترات من الفائدة. الإطار الزمني عادة الوقت مغلق لعرض بعض الأحداث اللغوية في المدخلات السمعية. وعلاوة على ذلك، يلزم العالم المرئي أيضا لتقسيم إلى عدة مناطق للفائدة (رويس)، ويرتبط كل منها بواحد أو أكثر من الكائنات. واحد هذه المنطقة تحتوي على الكائن المناظرة للفهم الصحيح للغة المنطوقة، وهكذا كثيرا ما يسمى المنطقة المستهدفة. طريقة نموذجية لتصور البيانات هي مؤامرة نسبة من التثبيت، حيث في كل بن في إطار زمني، متوسط نسبة العينات مع نظرة لكل منطقة لمصلحة جميع المشاركين والبنود.

باستخدام البيانات التي تم الحصول عليها من دراسة عالم مرئي، يمكن الإجابة الأسئلة البحثية المختلفة:) على مستوى الحبوب الخشنة، هي حركات العين المشتركين في العالم البصرية تأثرا بمختلف المدخلات اللغوية السمعية؟ ب) إذا لم يكن هناك تأثير، ما هو مسار للتأثير على مجرى المحاكمة؟ هل تأثير الخطية أو تأثير الترتيب العالي؟ وج) إذا كان هناك تأثير، ثم على مستوى غرامة من الحبوب، هو عند أقرب النقطة الزمنية التي تظهر فيها مثل هذا أثر، وكم أثر هذا الأخير؟

لتحليل النتائج إحصائيا، ينبغي النظر في النقاط التالية. أولاً، متغير الاستجابة، أينسب تثبيتات، سواء أدناه وأعلاه يحدها (بين 0 و 1)، التي سوف تتبع توزيع متعدد الحدود بدلاً من توزيع الطبيعي. من الآن فصاعدا، الأساليب الإحصائية التقليدية استناداً إلى التوزيع العادي مثل اختبار t، ANOVA والنماذج الخطية (تأثير مختلطة)10، لا يمكن مباشرة استعمالها حتى النسب قد تم تحويلها إلى متغيرات غير محدودة كما هو الحال مع الصيغة التجريبية اللوغاريتمية11 أو قد تم استبدال مع غير محدودة تعتمد على متغيرات مثل مسافة إقليدية12. يمكن أيضا استخدام الأساليب الإحصائية التي لا تتطلب افتراض التوزيع العادي مثل المعمم النماذج الخطية (تأثير مختلطة)13 . ثانيا، استكشاف مسار التأثير الملاحظ المتغيرة، قد متغير تدل السلسلة الزمنية المراد إضافتها إلى النموذج. هذا متغير السلسلة الزمنية هو أصلاً العين-tracker أخذ عينات من نقاط إعادة تنظيمها إلى ظهور لغة الإدخال. نظراً لتغير مسار عادة ليست خطية، تتم عادة إضافة دالة متعدد الحدود ذات الترتيب العالي من السلاسل الزمنية في (المعمم) (تأثير مختلطة) النموذج الخطي، أيالنمو منحنى تحليلات14. وعلاوة على ذلك، مواقف المشاركين العين في نقطة العينة الحالية يعتمد اعتماداً كبيرا على نقطة (نقاط) أخذ العينات السابقة، خاصة عند تكرار تسجيل مرتفع، أسفر عن مشكلة ترابط تلقائي. للحد ترابط تلقائي بين نقاط العينات المتجاورة، البيانات الأصلية غالباً ما تكون عينات من أسفل أو إهمال. وفي السنوات الأخيرة، استخدمت أيضا نماذج تأثير مختلطة المضافة المعمم (جام) لمعالجة الأخطاء أوتوكوريلاتيد12،،من1516. ويختلف عرض سلال بين دراسات مختلفة، تتراوح بين عدة مللي ثانية عدة مئات من المللي ثانية. بن أضيق يمكن اختيار دراسة مقيد بمعدل أخذ العينات من تعقب العين تستخدم في دراسة معينة. على سبيل المثال، إذا كان تعقب عين معدل أخذ عينات من 500 هرتز، ثم عرض الإطار الزمني لا تكون أصغر من 2 مللي ثانية = 1000/500. ثالثا، عندما يتم تطبيق تحليل الإحصائي مرارا وتكرارا على بن مرة كل فترة من فترات الفائدة، الناجمة عن الخطأ فاميليويسي من هذه المقارنات متعددة ينبغي معالجتها. كما وصفت لنا في وقت سابق، تحليل مسار يبلغ الباحث ما إذا كان تأثير على مستوى الحبوب الخشنة خطي فيما يتعلق بتغيير الوقت، ولكن لا تظهر عندما يبدأ التأثير الملاحظ في الظهور وكيف طويلة الملاحظة ويستمر تأثير. لتحديد موضع الزمنية عندما يبدأ الفارق الملاحظ تتباعد، ومعرفة مدة الفترة الزمنية التي يستمر التأثير الملاحظ، قد تحليل الإحصائي لتطبيقها مرارا وتكرارا على كل بن مرة. وسوف أعرض هذه مقارنات متعددة الخطأ فاميليويسي ما يسمى، بغض النظر عن يتم استخدام الأسلوب الإحصائي. يتم تصحيح الخطأ فاميليويسي تقليديا مع التكيف بونفيروني17. في الآونة الأخيرة، طبق أسلوب يسمى اختبار التباديل nonparametric المستخدمة أصلاً في نيورويماجينج قدم18 نموذج word البصرية19 لعنصر التحكم للخطأ فاميليويسي.

الباحثون باستخدام نموذج العالم المرئي تنوي الاستدلال الفهم لبعض اللغات المنطوقة من حركات العين المشتركين في العالم المرئي. للتأكد من صحة هذا الخصم، ينبغي أن تكون العوامل الأخرى التي ربما تؤثر حركات العين أما استبعد أو الخاضعة لسيطرة. اثنين من العوامل التالية من بين تلك المشتركة التي يتعين النظر فيها. العامل الأول ينطوي على بعض أنماط منتظمة في تثبيتات المشتركين تفسيرية مستقلة للغة الإدخال، مثل الميل إلى يحملق في أعلى يسار كوادرات العالم المرئي، وعيون تتحرك في اتجاه أفقي يجري أسهل في الاتجاه العمودي، إلخ12،20 للتأكد من أن أنماط التثبيت الملاحظة المرتبطة بالكائنات، ولا ينبغي أن تعوض مواقف المكانية لكائن إلى المواقع المكانية التي يقع فيها الكائنات، عبر محاكمات مختلفة أو عبر مختلف المشاركين. والعامل الثاني الذي قد يؤثر على حركات العين المشاركين هو ملامح الصورة الأساسية للكائنات في العالم المرئي، مثل اتجاه التباين واللون وحافة النصوع، بين أمور أخرى21. لتشخيص هذه الإمكانات التباس، عادة ما يقدم العرض المرئي قبل ظهور اللغة المنطوقة أو قبل ظهور العلامة الصوتية الحرجة من اللغة المنطوقة، للسيدة حوالي 1000 خلال الفترة الزمنية من البداية ولم يسمع بعد صورة الاختبار لبدء اختبار الصوت، ولغة الإدخال أو نقطة توضيح لغة الإدخال. ينبغي أن يستنتج أي فرق بين الأوضاع المختلفة للعوامل الأخرى المؤثرة الأخرى مثل العرض المرئي في حد ذاته، بدلاً من لغة الإدخال. من الآن فصاعدا، حركات العين التي لوحظت في هذه الفترة معاينة توفر أساس لتحديد تأثير المدخلات اللغوية. كما يسمح هذا الفترة معاينة المشاركين للحصول على إطلاع مع العرض المرئي، وتقليل التحيز المنهجي تثبيتات تفسيرية عندما يتم عرض اللغة المنطوقة.

لتوضيح كيف تجري عين نموذجية بتتبع دراسة باستخدام نموذج العالم المرئي، يصف البروتوكول التالي تجربة مقتبس من زان ل17 لاستكشاف الإنترنت تجهيز البيانات المعقدة لغوياً، أي بيانات الفاصل (S1 أو S2) والبيانات المترابط (S1 و S2)، و لكن--البيانات (S1 ولكن عدم-S2). في الحفظ العادية، المعلومات التي أعرب عنها بعض التصريحات أقوى فعلا من معناها الحرفي. الفاصل عبارات مثل شياو مينغ في المربع يحتوي على بقرة أو ديك بمثل هذه التصريحات. منطقياً، يصح البيان الفاصل الذي طالما ديسجونكتس اثنين شياو مينغ في المربع يحتوي على بقرة و شياو مينغ في المربع يحتوي على ديك ليست على حد سواء كاذبة. ولذلك يصح البيان الفاصل عندما ديسجونكتس اثنين كلاهما صحيح، حيث يصح أيضا بيان المترابط المقابلة شياو مينغ في المربع يحتوي على بقرة وديك . في العادية المحادثة، إلا أن الاستماع إلى البيان الفاصل الذي غالباً ما يوحي بأن البيان المترابط المقابلة كاذبة (implicature العددية)؛ ويشير إلى أن قيم الحقيقة ديسجونكتس اثنين غير معروف بالمتكلم (الاستدلال الجهل). تختلف حسابات في الأدب في ما إذا كانت هي استدلالات اثنين العمليات النحوية أو عملي22،23،24،،من2526. وتبين التجربة كيف يمكن استخدام نموذج العالم المرئي للفصل بين هذه الحسابات، باستكشاف الإنترنت تجهيز ثلاثة بيانات معقدة.

Subscription Required. Please recommend JoVE to your librarian.

Protocol

جميع المواضيع يجب أن تعطي موافقة خطية مستنيرة قبل إدارة البروتوكولات التجريبية. جميع الإجراءات ونماذج الموافقة على البروتوكول التجريبي بموافقة "لجنة أخلاقيات البحوث بكين اللغة" والثقافة الجامعة.

ملاحظة: دراسة فهم عادة باستخدام نموذج العالم المرئي يتكون من الخطوات التالية: يعرض المشاكل النظرية التي يمكن استكشافها؛ نموذج تصميم تجريبي؛ تحضير المحفزات البصرية والسمعية؛ إطار المشكلة النظرية فيما يتعلق بالتصميم التجريبي؛ حدد عين المقتفي لتتبع حركات العين المشاركين؛ قم بتحديد برامج وبناء نصي مع البرنامج لتقديم المحفزات؛ رمز وتحليل البيانات المسجلة من حركات العين. تجربة محددة يمكن أن تختلف عن بعضها البعض في أي من الخطوات الموصوفة. على سبيل مثال، هو عرض بروتوكول لإجراء التجربة ومناقشة بعض النقاط التي تحتاج إلى الباحثين أن نأخذ في الاعتبار عند بناء وإجراء التجربة الخاصة بهم باستخدام نموذج العالم المرئي.

1-إعداد اختبار المنشطات

  1. المحفزات البصرية
    1. تحميل 60 مقطع الفنون من الحيوانات التي حرة لحقوق التأليف والنشر من الإنترنت. فتح كل صورة واحدة مع محرر صورة (على سبيل المثال، Pixelmator)، انقر فوق أدوات | أداة التحديد السريع لتحديد وحذف الخلفية. انقر فوق الصورة | حجم الصورة تغيير حجمها إلى 120 × 120 بكسل.
    2. دعوة طالب متخصص في الرسم رسم أربعة مربعات خضراء خفيفة، كما هو مبين في الشكل 1. استخدام محرر الصور لتغيير حجم المربع فتح كبيرة إلى 320 × 240 بكسل ومربع مغلقة صغيرة بالحجم 160 × 160 بكسل ومربعي المفتوحة الصغيرة إلى 160 × 240 بكسل، على التوالي.
    3. انقر فوق Pixelmator | الملف | جديد بناء قالب اختبار الصورة مع حجم 1024 768 بكسل. اسحب المربعات والحيوانات لتصحيح المواقع يجري هو مبين في الشكل 1.
      ملاحظة: يختلف تخطيط صورة الاختبار بين الدراسات، ولكن هو الطريقة المثلى لاستخدام الكائنات الأربعة ووضعها في الأرباع الأربعة من صورة الاختبار. وبهذه الطريقة، من الأسهل لموازنة الموقف المكاني للكائنات.
    4. إنشاء صور الاختبار 60 مثل الشكل 1، مع كل صورة الحيوان تستخدم مرتين. موازنة المواقع المكانية من أربع خانات بين الصور.
      ملاحظة: عدد الصور لم تكون 60 دقيقة، ما دام أثرها منفصلين عن التلاعب التجريبية.
  2. المحفزات اللغة المنطوقة
    1. تصميم أربع جمل اختبار المقابلة لكل صورة الاختبار واختبار 240 الجمل في المجموع بتسجيلها. التأكد من وجود ثلاثة من الأحكام الأربعة في شكل رقم 2؛ وعلى الجملة حشو على شكل المربع في شياو مينغ لا يحتوي على ديك ولكن بقرة.
      ملاحظة: ينبغي أن تقدم الجمل اختبار باللغة الأصلية التي يتحدث المشاركون. المشاركون في هذه التجربة الصينية من بكين، الصين القارية، حيث يتم اختبار اللغة "الصينية الفصحى".
    2. توظيف الإناث اللغة أصلية (اللغة الصينية الفصحى في هذه التجربة) لتسجيل بيانات المثال أربعة مثل الشكل 2، فضلا عن الصوت من جميع الحيوانات التي استخدمت في التجربة. عند تسجيل أسماء الحيوانات المعزولة، نسأل المتكلم أن نتصور أن أسماء الحيوانات مكونات سليمة من جملة بسيطة، مثل ___ شياو مينغ في المربع يحتوي على/ ، لكنها تحتاج فقط نطق اسم الحيوان علنا.
    3. استبدال مقاطع الصوت من الحيوانات اثنين في بيانات المثال مع الصوت من اثنين من الحيوانات المستخدمة في كل محاكمة لإنشاء قائمة كاملة من صوتيات الاختبار. أولاً، افتح برات (أي تحرير برامج الصوت الأخرى بديل مؤهلة لذلك)، ثم انقر فوق فتح | قراءة من ملف | انتقل إلى الملف | فتح وتحرير، انتقل إلى عنصر استبدال، ثم انقر عرض وتحرير | تحرير | نسخ التحديد إلى الحافظة سليمة. ثانيا، استخدم نفس الخطوات لفتح بيانا مثال، انقر فوق لصق بعد التحديد. ثالثا، انقر فوق حفظ | حفظ كملف الرعايا لحفظ البيان المحرر. كرر هذه العملية لجميع العناصر التي يمكن تغييرها وجميع الأحكام الاختبار.
    4. توظيف حوالي 10 الناطقين بلغة الاختبار (الماندرين الصينية هنا) لتحديد ما إذا كان أو لم يكن الصوت اختبار شيدت واضح وطبيعي.
      ملاحظة: يتم عادة تسجيل الصوت الاختبار ككل، وليس ككلمات منفصلة. يعد هذا الأسلوب تسجيل التقليدية معقولة إذا كان الصوت اختبار أنفسهم فصل الكلمات. إذا كانت اللغة المحكية المحفزات الجمل بدلاً من الكلمات منفصلة، بيد أن هذا الأسلوب التقليدي بالعديد من أوجه القصور: أولاً، خاصية في كل مكان عن خطاب المستمر هو أن اثنين أو أكثر من أصوات الكلام تميل إلى تداخل زمنياً ومكانيا، مما يجعل من الصعب تحديد بداية الكلمة الحاسمة. وثانيا، الفرق بين طول فترة المحاكمات المختلفة أيضا يجعل من الصعب الجمع بين جميع المحاكمات معا للتحليلات الإحصائية. الثالث، طريقة التسجيل التقليدي غالباً ما تستغرق وقتاً طويلاً خاصة عند إعداد اختبار الصوت كبيرة نسبيا، مثل التجارب التي أبلغنا في البروتوكول. للتغلب على أوجه قصور أسلوب التسجيل التقليدية، يقترح أسلوباً مختلفاً لتشييد صوتيات اختبار المنطوقة. أولاً، تم تسجيل قائمة جمل عينة تحتوي على الكلمات التي مشتركة بين كل اختبار الصوت. وثانيا، كل الكلمات أن التغيير بين المحاكمات وسجلت أيضا في عزلة. أخيرا، استعيض عن الجمل عينة مع الكلمات المسجلة لبناء قائمة كاملة من صوتيات الاختبار. مقارنة بالطريقة التقليدية، الأسلوب الجديد له العديد من المزايا. أولاً، من الآن فصاعدا تسيطر كل صوت الاختبار هو بالضبط نفس ما عدا الكلمات الحاسمة، وكل آثار الخلط المحتملة في اختبار الصوت. ثانيا، يجري نفس الشيء في الطول أيضا يجعل تجزئة صوتيات الاختبار أسهل من عندما يتم تسجيل صوتيات الاختبار ككل. أحد العيوب المحتملة لهذا الأسلوب أن الصوت شيدت قد لا تكون طبيعية. من الآن فصاعدا، قد طبيعية الصوت اختبار تقييم قبل أن تكون مؤهلة للاختبار الفعلي...
  3. تقسيم الجمل اختبار 240 إلى أربع مجموعات، مع كل مجموعة تحتوي على 15 بيانات المترابط، البيانات الفاصل 15، 15 ولكن البيانات وجمل حشو 15. التأكد من أن كل مشارك لقاءات مجموعة واحدة فقط من المحاكمات 240: كان يرى كل اختبار الصور ولكن يسمع مجموعة واحدة فقط من صوتيات الاختبار.
    ملاحظة: هذا لمعالجة القلق أنه إذا تكررت نفس الحافز، المشتركون قد يكون التعود على هذه المحفزات وربما حتى تصبح الاستراتيجية حول كيفية أنها استجابت للمحفزات.
  4. حفظ جميع المعلومات الهامة المتعلقة بالمنبهات الاختبار إلى ملف txt المفصول، مع كل الصف المقابل لكل محاكمة من المحاكمات 240. التأكد من أن الملف يتضمن على الأقل من الأعمدة التالية: experiment_group، sentential_connective، trial_number، test_image، test_audio، test_audio_length، ia_top_left، ia_top_right، ia_bottom_left، ia_bottom_right، animal_1_ صورة، animal_1_audio، animal_1_audio_length، animal_2_image، animal_2_audio، animal_2_audio_length.
    ملاحظة: يتم استخدام experiment_group لتقسيم المحاكمات 240 إلى 4 مجموعات. sentential_connective يتوافق مع ظروف تجريبية مختلفة. animal_1_image يناظر صورة الحيوان الذي سيقدم أولاً إلى تعريف المشاركين بالحيوانات المستخدمة في صورة الاختبار. test_imageو test_audioو test_audio_length تشير إلى صورة الاختبار واختبار الصوت، فضلا عن طول المستخدمة في المحاكمة الحالية. ia_top_left، ia_top_right، ia_bottom_left، ia_bottom_right تشير إلى اسم مجالات الاهتمام الأربعة في المحاكمة، الحالي أي.، سواء كان مربع "فتح كبيرة"، وخانة "صغيرة مغلقة"، فتح الصغيرة مربع يحتوي على الحيوان "ذكر لأول مرة" في اختبار الصوت، أو فتح مربع صغير يحتوي على الحيوان "الثانية المشار إليها" في اختبار الصوت. animal_1_audio و animal_1_audio_length الرجوع إلى الصوت وطول الصوت المقابلة animal_1_image. animal_2_image، animal_2_audio، و animal_2_audio_length تتوافق مع الحيوان الثاني التي سيتم تقديمها. شيء واحد التأكيد أن تسلسل تقديم اثنين من الحيوانات يعادله فيما يتعلق بما إذا كان الحيوان مذكور في الأول أو في النصف الثاني من صوتيات الاختبار.

2-الإطار "النظري التنبؤ" فيما يتعلق "التصميم التجريبي".

  1. ضمان الاستجابة السلوكية المشاركين وحركات العين في التصميم التجريبي يمكن استخدامها للتفريق بين التفاهم الجمل اختبار ويمكن استخدامه للفصل بين حسابات مختلفة لفحصها.
    ملاحظة: نظراً لتصميم تجريبي، هو الاستجابة الصحيحة لبيان المترابط المربع فتح كبيرة، مثل "مربع أ" في الشكل 1. الإجابة الصحيحة و لكن-البيان هو فتح مربع صغير يحتوي على الحيوان يجري ذكرها في النصف الأول من صوتيات الاختبار، مثل "مربع د" في الشكل 1. بيد أن ردود المشاركين على البيان الفاصل، يتوقف على ما إذا أو كيف تتم معالجة استدلالات ناقش اثنين. إذا كان حساب المشاركين implicature العددية لا استدلال الجهل، ثم كافة المربعات الأربعة خيارات مؤهلة. إذا كان حساب المشاركين فتح implicature العددية ولكن عدم الاستدلال الجهل، ثم الكبيرة، مثل مربع A في الشكل 1، سوف يمكن استبعاد، والمربعات الثلاثة المتبقية ب وج ود جميع الخيارات المؤهلة. إذا كان حساب المشاركين الاستدلال الجهل ولكن ليس مفردة إيمبليكاتوري، ثم المربعات الصغيرة المفتوحة سوف يكون استبعد، أي.، استبعد مربعات ج ود. لتلخيص، مربع مغلقة صغيرة، مثل مربع ب في الشكل 1، سوف لا يتم اختيار كخيار نهائي لبيان الفاصل حتى implicature العددية واستدلالات الجهل سواء حسبت.

3-بناء البرنامج النصي تجريبي

  1. فتح انقر فوق منشئ التجربة، الملف | جديد لإنشاء مشروع تجربة. إدخال اسم المشروع مثل vwp_disjunction. حدد موقع المشروع. التحقق من التجربة اييلينك واختيار 1000plus اييلينك من قائمة الإفلات. سيتم إنشاء هذه العمليات الدليل الفرعي الذي يحتوي على كافة الملفات ذات الصلة بالتجربة فإنه سيتم إنشاء دليل فرعي يسمى vwp_disjunction مع ملف يسمى "graph.ebd" في المجلد.
    ملاحظة: يتم استخدام التجربة منشئ لإنشاء البرنامج النصي تجريبي لتقديم المحفزات الاختبار وتسجيل حركات العين المشاركين فضلا عن ردودهم السلوكية. "أني التجربة" أداة تعمل على بناء البرنامج النصي تجريبي. أنها سهلة الاستخدام، ولكن أي برنامج آخر في العرض التقديمي المحفزات بديلاً مؤهلاً.
  2. تصور الهيكل الهرمي لتجربة العين تتبع نموذجية باستخدام نموذج العالم المرئي كما هو مبين في الشكل 3. وينفذ كل مستطيل وردي في الشكل ككائن تسلسل منشئ التجربة؛ وينفذ كل كائن مع خلفية رمادية ككائن عقده.
    ملاحظة: تسلسل في "منشئ التجربة" وحدة تحكم حلقة تجريبية المستخدمة في سلسلة الكائنات المختلفة معا كعقدة معقدة. تسلسل يبدأ دائماً بعقدة ابدأ . ويمكن إرفاق مصدر بيانات إلى عقده تسلسل لتوفير معلمات مختلفة لكل محاكمة.
  3. بناء تسلسل التجربة
    1. انقر فوق الملف | فتح، استعرض بحثاً عن الدليل للتجربة، وانقر نقراً مزدوجاً فوق الملف graph.ebd في دليل المشروع لفتح المشروع المحفوظ التجربة.
    2. انقر فوق تحرير | إدارة مكتبة | الصورة | إضافة لتحميل الصور إلى تجربة المشروع. وبالمثل، انقر فوق تحرير | إدارة مكتبة | الصوت | إضافة لتحميل الصوت إلى تجربة المشروع.
    3. اسحب كائن DISPLAY_SCREEN في مساحة العمل وتغيير قيمة التسمية في لوحة خصائص إعادة تسميتها كالتعليم. انقر نقراً مزدوجاً لفتح عقده تعليمات ، وانقر فوق الزر إدراج الموارد النص سطور متعددة لإدخال التعليم التجريبي. ضمان بناء على تعليمات يحتوي على المعلومات التالية:
      في كل محاكمة، أولاً سوف تشاهد صور للحيوانات، وهما الحيوان واحدة كل مطبوعة على الشاشة وفي المقابل، جنبا إلى جنب مع صوت الحيوانات لعبت على اثنين من المتكلمين تقع على كلا الجانبين من الشاشة. وسيقدم بعد ذلك نقطة سوداء في وسط الشاشة. يجب أن تضغط على مفتاح المسافة أثناء فيكساتينج على النقطة. بعد ذلك، سترى صورة اختبار يتألف من أربع خانات مطبوعة على الشاشة وسماع جملة اختبار يتم لعب عن طريق اثنين من المتكلمين. مهمتك هي لتحديد موقع مربع شياو مينغ وفقا للجملة اختبار كنت استمع إلى واضغط على الزر المقابل بأسرع:
      أعلى يسار مربع---مفتاح السهم إلى اليسار
      أعلى المربع الأيمن---سهم لأعلى
      أسفل اليسار مربع---مفتاح السهم إلى اليسار
      أسفل المربع الأيمن---السهم لليمين
      في كل صورة الاختبار، سترى أربعة مربعات يقع في أربعة أجزاء واثنين من الحيوانات التي تحتوي المربعات. يمكن أن تختلف أربعة مربعات في بعدين: قربه وحجمه. ما إذا كان يتم إغلاق مربع أو لا يؤثر معرفتنا المعرفية في هذا المربع، ولكن لا أمتعة أنه يحتوي على. إذا كان هناك مربع مفتوح، ثم يعرف بأمتعة الوارد في هذا المربع. إذا تم إغلاق مربع، ثم أمتعة الوارد في هذا المربع غير معروف. يؤثر حجم مربع عدد الحيوانات الواردة في المربع، ولكن ليس لدينا المعرفة المعرفية في هذا المربع. لا يهم المربع مغلق أو لا، مربع صغير فقط ودائما يحتوي على واحد من الحيوان، ومربع كبير دائماً يحتوي على اثنين من الحيوانات المختلفة.
      إذا كنت مرتاحاً مع هدف التجريبية والإجراء، اسمحوا المجرب يعرف ونحن سوف تساعدك على أداء العين قياسية تتبع إجراءات المعايرة والتحقق من الصحة. إذا كان لديك أي أسئلة، من فضلك لا تتردد في طلب.
      ملاحظة: هذه هي تعليمات التي ستتم طباعتها على الشاشة قبل التجربة (الإرشادات يجب أن يكون مكتوب باللغة الأصلية المشاركين التكلم، مثل "الماندرين الصينية" هنا).
    4. اسحب كائن لوحة المفاتيح إلى مساحة العمل.
      ملاحظة: يتم استخدام هذه الخطوة نهاية الشاشة التعليمات
    5. اسحب كائن تسلسل إلى مساحة العمل وإعادة تسميتها كتلة.
    6. حدد تسلسل كتلة ، انقر فوق الحقل القيمة لخاصية مصدر البيانات لإحضار البيانات المصدر محرر. انقر فوق الزر استيراد البيانات في شاشة محرر البيانات المصدر، الحاجب إلى ملف.txt بإنشائه في الخطوة 1، 4 لاستيراد مصدر البيانات.
    7. انقر فوق الزر الإعداد العشوائية في محرر مصدر البيانات، تحقق من تمكين التعشيه المحاكمة، حدد trial_number من الحقل القيمة لحقل العمود ، و حدد experimental_group من القائمة المنسدلة لحقل عمود تقسيم .
    8. اسحب الثانية DISPLAY_SCREEN الكائن إلى مساحة العمل وإعادة تسميتها ك وداعا. انقر نقراً مزدوجاً فوق العقدة وداعا وإدراج المعلومات التالية: في اللغة الأصلية المشاركين (الماندرين الصينية في هذا البروتوكول):هو الانتهاء من التجربة وأشكركم على مشاركتكم كثيرا.
    9. الأيسر على عقده ابدأ واسحب السهم إلى عقده التعليم وحرر زر الماوس للاتصال بدء تشغيل العقدة عقده التعليمات . كرر تحريك الماوس نفس الاتصال تعليمات العقدة إلى العقدة لوحة المفاتيح ، لوحة المفاتيح عقده إلى عقده كتلة ، ثم كتلة عقده إلى عقده وداعا . انقر فوق عرض | ترتيب تخطيط لترتيب العقد في مساحة العمل.
  4. بناء تسلسل كتلة
    1. انقر نقراً مزدوجاً لفتح تسلسل كتلة . اسحب نقطة El_CAMERA_SETUP ضمن تسلسل كتلة لإحضار شاشة إعداد كاميرا على "جهاز الكمبيوتر المضيف اييلينك" المجرب القيام بإعداد الكاميرا والمعايرة والتحقق من الصحة. انقر فوق حقل "نوع المعايرة" في لوحة خصائص واختر HV5 من القائمة المنسدلة.
      ملاحظة: يختلف عدد المواقع في عملية رسم الخرائط بين تصاميم تجريبية مختلفة. المزيد من المواقع عينات وزادت المساحة المشمولة، أكبر يمكن أن يتوقع الدقة. ولكن المزيد من نماذج يعني مزيدا من الوقت للانتهاء من العمليات. ذلك عمليا، عدد المواقع في دراسة محددة لا يمكن أن تكون كبيرة جداً، خاصة عند المشاركين الأطفال الشفهي أو المرضى السريرية. في النموذج، والعالم المرئي عدد مجالات اهتمام صغيرة نسبيا، والمجالات التي تهم كبيرة نسبيا عادة. عملية التعيين يمكن أن تصل إلى مستوى مرضية مع عدد صغير نسبيا من المواقع. في البروتوكول وصفتها، اعتدت خمس نقاط المعايرة والتحقق من الصحة.
    2. اسحب عقده التسلسل ضمن تسلسل كتلة وتسميته المحاكمة. الاتصال بدء تشغيل العقدة إلى العقدة CAMERA_SETUP ، ثم إلى العقدة سكينكه.
  5. بناء تسلسل المحاكمة
    1. انقر نقراً مزدوجاً لفتح تسلسل المحاكمة وسحب عقده DISPLAY_SCREEN في تسلسل المحاكمة وإعادة تسميتها ك animal_1_image. انقر نقراً مزدوجاً لفتح عقده منشئ الشاشة وانقر فوق الزر إدراج الموارد الصورة على شريط الأدوات "منشئ شاشة" إدراج صورة حيوان من مصادر الصورة المحملة. انقر فوق الحقل القيمة لخاصية اسم الملف المصدر ، وانتقل إلى مصدر البيانات المرفقة إلى تسلسل كتلة ؛ وانقر نقراً مزدوجاً فوق العمود Animal_1_Image للاتصال DISPLAY_SCREEN مع العمود الصحيح من مصدر البيانات.
    2. اسحب عقده PLAY_SOUND ضمن تسلسل المحاكمة وإعادة تسميتها ك animal_1_audio. انقر فوق الخاصية ملف الصوت الخاص بعقدة animal_1_audio وتوصيله مع العمود الصحيح من مصدر البيانات (على النحو الذي تم وصفه في الخطوة 3.5.1).
    3. اسحب عقده الموقت ضمن تسلسل المحاكمة وإعادة تسميتها ك animal_1_audio_length. انقر فوق الخاصية المدة الموقت عقده وانتقل إلى العمود الصحيح من مصدر البيانات التي تم إنشاؤها في 3.4.1.
    4. سحب عقده DISPLAY_SCREEN أخرى وآخر PLAY_SOUND العقدة عقده مؤقت أخرى ضمن تسلسل المحاكمة ، تسميتها ك animal_2_image، animal_2_audio، والحيوانات _2_audio_duration، كرر الخطوات التي يجري وصفها في الخطوات 3.5.1-3.5.3.
      ملاحظة: هذه الخطوات يتم تضمين لعنصر التحكم للخلط المحتمل أنه قد يدعى نفس الصورة بشكل مختلف حسب مختلف المشاركين. موازنة تسلسل تقديم اثنين من الحيوانات فيما يتعلق بما إذا كان هو مذكور في النصف الأول أو الثاني من صوتيات الاختبار.
    5. اسحب كائن تسلسل إعداد ضمن تسلسل المحاكمة وتغيير خاصية رسم لاستضافة اييلينك للصورة.
      ملاحظة: يتم استخدام هذه العقدة التحميل المسبق لملفات الصوت والصورة إلى الذاكرة لرسم الصورة في الوقت الحقيقي واللعب الصوت. ويتم استخدامه أيضا لرسم رسومات التغذية المرتدة على "الكمبيوتر المضيف" حتى أنه يمكن رصد دقة نظرات المشاركين.
    6. اسحب عقده DRIFT_CORRECT ضمن تسلسل المحاكمة إدخال تصحيح الانحراف.
    7. اسحب عقده التسلسل جديد وإعادة تسميتها تسجيل. الاتصال ابدأ بهذه العقد واحدة بعد واحدة.
  6. بناء تسلسل تسجيل
    1. تحقق من الحقل سجل في لوحة الملكية تسلسل تسجيل ، وانقر نقراً مزدوجاً لفتح تسلسل تسجيل .
      ملاحظة: تسلسل مع خاصية سجل فحص يعني أنه سيتم تسجيل حركات العين المشاركين خلال هذه الفترة.
    2. اسحب من جديد DISPLAY_SCREEN في تسلسل السجل ، وتسميته ك test_image. إضافة رسالة test_image_onset إلى خاصية الرسالة من العقدة test_image .
      ملاحظة: في مرحلة تحليل البيانات، الرسالة في العقدة test_image والرسالة في العقدة test_audio (قسم 3.6.6) مهمة لتحديد مكان ظهور الصور الاختبار وبداية صوتيات الاختبار في كل محاكمة.
    3. انقر نقراً مزدوجاً لفتح عقده منشئ الشاشة وانقر فوق الزر إدراج الموارد الصورة على شريط الأدوات "منشئ الشاشة" لإدراج أي صورة الحيوان من مصادر الصورة المحملة. انقر فوق الحقل القيمة اسم الملف المصدر الملكية، انتقل إلى مصدر البيانات المرفقة إلى تسلسل كتلة ؛ وانقر نقراً مزدوجاً فوق العمود test_image للاتصال DISPLAY_SCREEN مع العمود الصحيح من مصدر البيانات.
    4. انقر نقراً مزدوجاً فوق العقدة DISPLAY_SCREEN لفتح منشئ الشاشة، انقر فوق الزر إدراج مستطيل مصلحة المنطقة، ورسم أربعة مجالات مستطيلة من الفائدة كما يتضح من المربعات الزرقاء في الشكل 1. تغيير التسميات من أربعة مجالات الاهتمام إلى Top_Left، Top_Right، Bottom_Left، و Bottom_Right، والاتصال اسم داتافيوير قدم مع الأعمدة الصحيحة من مصدر البيانات.
      ملاحظة: هذه المجالات غير مرئية للمشاركين. لجعل مجالات الاهتمام أكثر جدوى، تسمية اسم أعلى يسار المنطقة في المثال كما "مربع (فتح كبير)"، أسفل منطقة الحق الأعلى "مربع b (صغيرة مغلقة)"، الناحية اليمنى "المربع ج (ذكر الثاني)"، ومنطقة أسفل اليمين ك "مربع د (المذكورة أولاً)" ، نظراً لمربعي مفتوحة صغيرة تحتوي على اثنين من الحيوانات التي يجري ذكرها في النصف الأول والثاني من صوتيات الاختبار، على التوالي.
    5. سحب عقده جهاز ضبط الوقت إلى مساحة العمل وتسميته وقفهوتغيير الخاصية المدة إلى 500 مللي ثانية.
      ملاحظة: هذه العقدة الموقت يضيف بعض الفترة الزمنية الفاصلة بين ظهور صورة الاختبار وبداية اختبار الصوت. الفاصل الزمني يعطي المشاركين فرصة للتعرف على مع الصور الاختبار. حركات العين المشاركين خلال هذه الفترة معاينة أيضا توفير خط أساس لتحديد الآثار المترتبة على إدخال اللغة المنطوقة، خصوصا عندما تقع عبارة حاسمة في بداية صوتيات الاختبار.
    6. اسحب عقده PLAY_SOUND في إلى مساحة العمل وإعادة تسميتها ك test_audio. انقر فوق الخاصية ملف الصوت وتوصيله مع العمود الصحيح من مصدر البيانات (على النحو الذي تم وصفه في الخطوة 3.5.1) وإضافة الرسالة test_audio_onset في خاصية الرسالة .
    7. اسحب عقده الموقت في مساحة العمل، وإعادة تسميتها ك test_audio_length. تغيير خاصية المدة إلى 10500 مرض التصلب العصبي المتعدد.
    8. إضافة عقده جديدة جهاز ضبط الوقت وإعادة تسميتها ك record_extensionوتغيير الخاصية المدة إلى 4000 مرض التصلب العصبي المتعدد.
    9. إضافة عقده جديدة لوحة المفاتيح إلى مساحة العمل وتسميتها الاستجابات السلوكية، وتغيير خاصية مفاتيح مقبولة إلى "[أعلى، أسفل، اليمين، اليسار]".
      ملاحظة: يمكن استخدام الخيارات السلوكية المشاركين إلى مضاعفة فحص صلاحية إبرام استخلاصه من حركات العين المشاركين.
    10. قم بتوصيل العقدة ابدأ وقفه، test_audio، test_audio_length، ثم إلى العقدة Record_extension . إضافة اتصال آخر من test_audio_length إلى العقدة behavioral_responses .
      ملاحظة: بإضافة هذه الاتصالات، المحاكمة الحالية سوف تنتهي وسوف تبدأ محاكمته من جديد بعد أن قدم المشاركون ضغط مفتاح اختيار مربع شياو مينغ، أو مرض التصلب العصبي المتعدد 4000 بعد إزاحة الاختبار الصوت.
    11. سحب عقده المتغير إلى مساحة العمل وإعادة تسميتها ك key_pressedوالاتصال الخاصية القيمة الخاصة به إلى behavioral_Responses لوحة المفاتيح | أدت البيانات |  المفتاح.
    12. سحب عقده RESULT_FILE في مساحة العمل واسحب نقطة ADD_TO_RESULT_FILE في مساحة العمل وقم بتوصيل العقدة record_extension والعقدة behavioral_responses ADD_TO_RESULT_FILE عقده.
  7. انقر فوق التجربة | إنشاء لإنشاء البرنامج النصي تجريبي، انقر فوق التجربة | اختبار تشغيل اختبار تشغيل التجربة. بعد أن يتم كل شيء، انقر فوق التجربة | نشر لإنشاء إصدار قابل للتنفيذ للمشروع التجريبي.
    ملاحظة: لمزيد من المعلومات حول كيفية استخدام "منشئ التجربة"، يرجى الرجوع إلى دليل البرنامج27.

4-تجنيد المشاركين

  1. تضمن المشاركون إلى الرؤية العادية العادية أو تصحيحها. نوصي بأن المشاركين القصيرة لارتداء العدسات اللاصقة، ولكن النظارات مقبولة أيضا طالما أن العدسات نظيفة. التأكد من وجود جميع المشاركين الناطقين باللغة الاختبار، مثل "الماندرين الصينية" هنا.
    ملاحظة: كمبدأ توجيهي عام، مشارك تعتبر مؤهلة طالما المشارك يمكن مشاهدة الصور الاختبار على مسافة حوالي 60 سم. ينبغي أن يكون عدد المشاركين لتحليل الانحدار من حيث عدد المشاركين، ووفقا لبعض القواعد من الإبهام، لا تقل عن 50. هنا، وسبعة وثلاثون طلاب الدراسات العليا من جامعة الثقافة واللغة بكين شارك في التجربة، وأصغر قليلاً من المقدار الموصى به.

5-إجراء التجربة

ملاحظة: عند المشاركين الكبار المتقدمة النمو الطبيعي، المجرب واحد ما يكفي للقيام بإجراء التجربة. ولكن إذا كان المشاركون هم السكان خاصة، مثل الأطفال، المجربون اثنين أو أكثر مطلوبة.

  1. حدد تعقب عين لتسجيل حركات العين المشاركين.
    ملاحظة: تعقب العين المستخدمة في هذه التجربة هو 1000plus اييلينك يعمل تحت وضع الرأس مجاناً للتحرك. هذا عين محملة القائم على الفيديو، وسطح المكتب نظام التتبع، واستخدام مبدأ التلميذ مع انعكاس القرنية (CR) لتعقب الاستدارة للعين. عند التشغيل في وضع الرأس مجاناً للتحرك، وتعقب العين قد معدل أخذ العينات أحادي 500 هرتز، مع قرار مكانية من 0.01° وخطأ متوسط أقل من 0.5 °. للحصول على معلومات أكثر تفصيلاً للنظام، الرجاء مراجعة لها مواصفات تقنية28،29. تتبع بديلة يمكن استخدامها، ولكن مع وضع التعقب بعيد هم أفضل، لا سيما عند المشاركين هم من الأطفال الشفهي.
  2. تمهيد النظام على "جهاز الكمبيوتر المضيف" بدء تشغيل التطبيق المضيف للكاميرا.
  3. لتكوين النظام لوضع سطح المكتب البعيد، انقر فوق الزر تعيين الخيار ، تعيين خيار التكوين إلى سطح المكتب-"ملصقا الهدف" طول-أحادي-16/25 مم-رتاربلير-
  4. انقر فوق الإصدار القابل للتنفيذ للمشروع التجريبي على "جهاز الكمبيوتر عرض" وإدخال اسم المشارك، واختيار مجموعة من إطار موجه إلى حدد قيمة الشرط لتشغيل.
    ملاحظة: كل دورة اختبار سيتم إنشاء مجلد باسم تستقر تحت نتائج تجربة المشروع الفرعي. ملف شركة كهرباء فرنسا ضمن المجلد يحتوي على بيانات حركات العين ذات الصلة.
  5. أطلب من المشاركين الجلوس حوالي 60 سم من 21 بوصة، شاشة ملونة 4:3 مع 1024px x 769px القرار، حيث يساوي 27 بكسل للدرجة 1 من زاوية.
  6. ضبط ارتفاع شاشة "الكمبيوتر عرض"، لضمان أنه عندما يجلس المشارك والتطلع مباشرة، فهي تبحث عمودياً في منتصف الطريق إلى أعلى 75% من جهاز العرض.
    ملاحظة: الرئاسة ومكتب، و/أو جهاز الكمبيوتر المفضل إذا كانت قابلة للتعديل في الارتفاع. وينبغي تجنب الرئاسة والمكتب مع عجلات، كما أنها تميل إلى أن تسبب تحرك غير مقصود ولفه.
  7. وضع ملصق صغير هدف على الجبين المشاركين، لتعقب موضع الرأس حتى عندما تكون الصورة التلميذ المفقودة، كما هو الحال خلال يومض أو الحركات المفاجئة.
    ملاحظة: تتبع العين مختلفة يمكن استخدام أساليب مختلفة لتعقب رئيس المشاركين. لتعظيم نطاق الحركة الجانبية لهذا الموضوع، ينبغي أن تكون العين المتعقبة على نفس الجانب كإضاءة.
  8. قم بتدوير الذراع تركز على جبل مكتب لإحضار الصورة العين إلى التركيز.
  9. انقر فوق الزر معايرة على الكمبيوتر لإجراء عملية المعايرة من المشاركين طرح سؤال لثبت شبكة من خمسة أهداف التثبيت في خلافة عشوائية مع لا الاستجابات السلوكية العلنية، المضيف لتعيين المشاركين حركات العين للبصر الشأن في العالم المرئي.
  10. انقر فوق الزر التحقق من صحة على الكمبيوتر للتحقق من صحة نتائج محسوبة من المشاركين طرح سؤال يحملق الشبكة نفس أهداف التثبيت المضيف. كرر إجراءات المعايرة والتحقق من الصحة، عندما يكون الخطأ أكبر من درجة 1.
  11. القيام بإجراءات اثنين في بداية التجربة، وكلما ضعف دقة القياس (مثلاً.، وبعد حركات الرأس قوية أو تغييرا في موقف المشاركين).
  12. انقر فوق الزر السجل على الكمبيوتر لبدء التجربة المضيف.
  13. إجراء تدقيق انجراف في كل محاكمة بأن تطلب من المشاركين اضغط على مفتاح المسافة على لوحة المفاتيح أثناء فيكساتينج في نقطة سوداء في وسط الشاشة.
    ملاحظة: عندما المشاركون هم الأطفال الشفهي أو المرضى السريرية، صراحة توجيههم إلى الضغط لوحة المفاتيح أثناء فيكساتينج نقطة سوداء من غير العملي عادة. ولكن على تثبيتات الاهتمام والعين تميل إلى أن تنجذب تلقائياً بعرض النقطة السوداء. في هذه الحالة، ينبغي أن يكون المجرب الشخص اضغط على لوحة المفاتيح بينما هو فيكساتينج المشارك في النقطة السوداء.
  14. تقديم المحفزات البصرية عبر شاشة "عرض الكمبيوتر" وتلعب المحفزات السمعية عن طريق زوج مكبرات صوت خارجية يقع إلى اليسار وحق المراقبة (أيضا سماعات مقبولة).
    ملاحظة: يتم تشغيلها التسجيلات من القرص الثابت كمقاطع الصوت أحادية 24 كيلوهرتز. إذا لم يكن هناك لا سبب خاص، مقاطع الصوت أحادية المفضلة لقصاصات صوت ستيريو. في قصاصة صوت استريو، الفرق بين المسارين الصوت، فضلا عن الفرق بين اثنين من المتكلمين قد تؤثر على حركات العين المشاركين. لمزيد من المعلومات حول كيفية استخدام تعقب العين، الرجاء مراجعة دليل المستخدم30.

6-بيانات الترميز والتحليلات

  1. فتح "عارض البيانات"، انقر ملف | استيراد ملف | استيراد "عدة ملفات بيانات اييلينك" لاستيراد كافة ملفات تعقب العين مسجل (مع الملحق لشركة كهرباء فرنسا)، وحفظها في واحد . المركبات الكهربائية ملف.
  2. افتح الملف المحفوظ المركبات الكهربائية وانقر فوق التحليل | تقارير | نموذج تقرير لتصدير بيانات نموذج الخام مع لا تجميع.
    ملاحظة: إذا كان تعقب العين بمعدل أخذ عينات من 500 هرتز، البيانات التي تم تصديرها سيكون 500 من نقاط البيانات، والصفوف 500 من الآن فصاعدا، كل ثاني كل محاكمة. إذا كان يتم تعقب المشتركين العين اليسرى، ضمان يتم تصدير الأعمدة التالية، فضلا عن المتغيرات التي تم إنشاؤها في مصدر البيانات: RECORDING_SESSION_LABEL، LEFT_GAZE_X، LEFT_GAZE_Y، LEFT_INTEREST_AREA_LABEL، LEFT_IN_BLINK، LEFT_IN_SACCADE، LEFT_PUPIL_ الحجم، SAMPLE_INDEX، SAMPLE_MESSAGE. لمزيد من المعلومات حول كيفية استخدام "عارض البيانات"، الرجاء مراجعة دليل البرامج31.
  3. تقييد التحليلات الإحصائية إلى الإطار الزمني من ظهور صورة الاختبار إلى إزاحة صوتيات الاختبار، أي.، الإطار الزمني مع مدة 11 s.
  4. حذف العينات حيث لم يتم تسجيل حركات العين المشاركين، مثل وميض المشاركين عيونهم، الذي يصيب حوالي 10% البيانات المسجلة.
    ملاحظة: هذا خطوة اختيارية، كما النتائج عادة هي نفسها بغض النظر عن ما إذا كان حذف هذه العينات.
  5. رمز البيانات. لإنشاء البيانات الخاصة بمنطقة معينة من الاهتمام في بعض نقطة أخذ عينات، رمز البيانات ك 1 إذا كان التثبيت العين المشاركين يقع في مجال اهتمام يتم تحليلها في هذه النقطة أخذ العينات. رمز البيانات ك 0 إذا لم يقع تثبيت العين في المجالات التي تهم في هذه النقطة أخذ العينات.
  6. رسم نسبة لتثبيت لتصور البيانات التي تم الحصول عليها. لحساب النسبة من التثبيتات عبر منطقة معينة من الفائدة، متوسط نقطة البيانات مشفرة لجميع المحاكمات ولجميع المشاركين في كل عينة تحت كل الظروف. ارسم النسبة محسوبة من تثبيتات على المحور الصادي ضد نقطة أخذ العينات على المحور، مع أفرقة مختلفة تدل على مجالات الاهتمام ورسم الألوان تدل على ظروف تجريبية مختلفة.
    ملاحظة: في التجربة، يصور الأفرقة الأربعة أنماط التثبيت المشاركين في المجالات الأربعة للفائدة. الخطوط الحمراء والخضراء والزرقاء توضح أنماط المشاركين التثبيت عندما بيانات اختبار أدوات العطف (S1 و S2)، ولكن البيانات (S1 ولكن ليس S2)، والفصل (S1 أو S2)، على التوالي. البرمجيات المستخدمة لرسم هذه المؤامرة وصفية هو حزمة ggplot2 من بيئة التطوير. كما تتوفر أيضا برامج أخرى. الرقم 5 مثال على هذه الأرض.
  7. الاحتواء حدين المعمم النموذج الخطي مختلطة (جلمم) في كل مجال من مجالات الاهتمام في كل نقطة أخذ العينات، كما تم ترميز البيانات أما 1 أو 0, اعتماداً على ما إذا كان التثبيت المشترك يقع داخل أو خارج مجال الاهتمام في هذه النقطة أخذ العينات.
    ملاحظة: لا يتم إهمال البيانات، والبيانات مشفرة فقط يمكن أن يكون 1 أو 0، حتى توزيع البيانات مشفرة ثنائي بدلاً من العادي. من الآن فصاعدا، يتم استخدام نموذج جلمم مع الأسرة للتوزيع ذي الحدين. ويشمل نموذج جلمم محدد مدة التجريبية المشاركين الشروط، وولايتين عشوائية، والعناصر. تتضمن الصيغة تقييم للمصطلحين عشوائي قراءتها والمنحدر من الظروف التجريبية. البرمجيات المستخدمة للقيام بتركيب نموذج هو حزمة lme4 من بيئة التطوير. كما تتوفر أيضا برامج أخرى. تجدر الإشارة إلى شيء واحد هو أن خط الأساس للبنود الثابتة تختلف عندما مجال تحليل الفائدة، أي.، مربعات تم تحليلها، مختلفة. أن تكون محددة، الاقتران (S1 و S2) اختير كخط الأساس عند تحليل المربع الكبير المفتوحة (مربع A)، الانفصام (أ وب) اختير كخط الأساس عند تحليل مربع مغلق الصغيرة (مربع ب)، ولكن العبارة قد اختير خط الأساس عند تحليل المربع المذكور أولاً (مربع د).
  8. بونفيروني ضبط القيم ف الحصول على اختبار z والد، للحد من الخطأ فاميليويسي الناجمة عن مقارنات متعددة.
    ملاحظة: تعديل بونفيروني هو الطريقة التقليدية لمعالجة الخطأ فاميليويسي الناجمة عن مقارنات متعددة. كما تتوفر طرق أخرى، كما وصفها في المقطع مقدمة.

Subscription Required. Please recommend JoVE to your librarian.

Representative Results

وترد ردود المشاركين السلوكية في الشكل 4. كما وصفت لنا في وقت سابق، هو الاستجابة الصحيحة لبيان المترابط (S1 و S2) المربع فتح كبيرة، مثل "مربع أ" في الشكل 1. الإجابة الصحيحة و لكن-بيان (S1 ولكن ليس S2) يتم فتح مربع صغير يحتوي على الحيوان المذكور أولاً، مثل "مربع د" في الشكل 1. المربع الذي يتم اختياره للبيان الفاصل (S1 أو S2) حاسمة، يتوقف على كيفية معالجة بيان الفاصل: مربع مغلقة صغيرة، مثل مربع ب في الشكل 1، يتم اختيارها فقط عندما implicature العددية واستدلالات الجهل تتصل بالبيان الفاصل على حد سواء وتحسب. ويبين الشكل 4 أن عند فهم بيان الفاصل (S1 أو S2)، حساب المشاركين كلا استدلالات اثنين.

وعلاوة على ذلك، تثبيتات العين المشاركين في مربع المغلقة الصغيرة، خاصة عندما يتم اتباع هذه التثبيتات بالاستجابات السلوكية في هذا المربع، تشير أيضا إلى أن implicature العددية واستدلالات الجهل وتحسب. استدلالات اثنين ينبغي جهزت لا يتجاوز أقرب النقطة الزمنية عند نقل المشاركين الانتباه البصري وتثبيتات في خانة مغلقة صغيرة. ويرد في الشكل 5حركات العين المشاركين. كما يمكن أن نرى في لوحة ب، لا زيادة العين-التثبيتات المشتركين في المربع إغلاق الصغيرة (مربع ب) ما لم يكن الضام سينتينتيال هو الفاصل الضام، أو. وعلاوة على ذلك، تبدأ هذه الزيادة لا يتجاوز إزاحة الضام الفاصل. وهذا يوحي بأن إيمبليكاتوري العددية واستدلالات الجهل يتم حسابها قبل إزاحة الضام سينتينتيال، أي فورا عند مواجهة الضام الفاصل.

Figure 1
الشكل 1 . مثال على الصور الاختبار المستخدمة في التجربة- المنطقة الرمادية هو صورة الاختبار فعلا المقدمة للمشاركين. مربعات بلوز والخطوط المنقطة بكسل تدل على عرض العناصر هي فقط لأغراض التوضيح وهي غير مرئية للمشاركين. (مقتبس من تجربة واحدة من زان ل 17 مع إذن). الرجاء انقر هنا لمشاهدة نسخة أكبر من هذا الرقم-

Figure 2
الشكل 2 . مثال لاختبار الجمل المستخدمة في التجربة (أعيد طبعها من زان ل17 مع إذن). الرجاء انقر هنا لمشاهدة نسخة أكبر من هذا الرقم-

Figure 3
الشكل 3 . الهيكل الهرمي لتجربة العين تتبع نموذجية باستخدام نموذج العالم المرئي- الصوت هو موضح في الصورة هي ترجمة اللغة الإنجليزية "الصينية الفصحى" المستخدمة في التجربة. الرجاء انقر هنا لمشاهدة نسخة أكبر من هذا الرقم-

Figure 4
الشكل 4 . تسجيل الاستجابات السلوكية المشاركين في التجربة (مقتبس من تجربة واحدة من زان ل17 مع إذن). الرجاء انقر هنا لمشاهدة نسخة أكبر من هذا الرقم-

Figure 5
الشكل 5 . العين المشاركين الحركات التي لوحظت في التجربة- هي تدل على بداية وإزاحة من كونيكتيفيس سينتينتيال بخطين عمودي متقطع. هو يعني فرقا كبيرا القائمة بين الفاصل والشرط الأساس في بعض نقطة أخذ العينات بالمنطقة الرمادية (ف <.05، بونفيروني المعدلة) (مقتبس من زان ل17 مع إذن). الرجاء انقر هنا لمشاهدة نسخة أكبر من هذا الرقم-

Subscription Required. Please recommend JoVE to your librarian.

Discussion

لإجراء دراسة عالم مرئي، وهناك العديد من الخطوات الهامة لمتابعة. أولاً، يعتزم الباحثون للاستدلال على تفسير اللغة أوديتوريلي المقدمة عن طريق حركات العين المشتركين في العالم المرئي. من الآن فصاعدا، في تصميم تخطيط المحفزات البصرية، ينبغي التحكم في خصائص حركات العين في مهمة طبيعية التي يحتمل أن تؤثر على حركات العين المشاركين. يمكن ثم التعرف على تأثير اللغة المنطوقة على حركات العين المشاركين. الإشارات الصوتية، والثاني في اللغة المنطوقة عابرة وهناك لا تواقيع الصوتية فقط المقابلة لفئة لغوية معينة. لقفل الوقت بشكل صحيح المشتركين حركات العين مع ظهور بعض علامات لغوية، ينبغي أن تجد الباحثين موضوعي وطريقة متسقة لتعريف حدود بعض البنية اللغوية. ثالثا، تعيين بشكل صحيح دوران العين المشاركين حول الرأس مع هذه النظرة من الشأن في العالم المرئي، يحتاج الباحثون القيام بتشغيل واحد أو عدة للمعايرة والتحقق منها، وعمليات تصحيح الانحراف. رابعا، البيانات التي تم الحصول عليها من دراسة عالم مرئي لها بعض الخصائص المميزة، مثل كونها السفلي والعلوي يحدها، ووجود أخطاء أوتوكوريلاتيد إلخ. ينبغي النظر في هذه الخصائص المميزة عند تحديد أسلوب لتحليل البيانات إحصائيا.

دراسة عالم مرئي يتكون من ثلاثة عناصر أساسية: العرض المرئي، اللغة المحكية، المهام التجريبية. يمكن إجراء التعديلات في أي مكون للوفاء بأغراض محددة الباحثين. أولاً، عرض مرئي عادة عرض فحص التي تصور مجموعة صور. ولكن يمكن أيضا عرض فحص التي تصور مجموعة من الكلمات المطبوعة32، من30،تخطيطي مشهد31، أو مشهد عالم حقيقي الذي يحتوي على كائنات حقيقية1،32. ثانيا، يمكن أن تكون التصريحات تحدث كلمة36، جملة بسيطة30،31،34،17،بيان معقدة لغوياً35، أو حوار39. ثالثا، فيما يتعلق بالمهمة التجريبية، أما ببساطة يجري يطلب إلى المشاركين ننظر إلى العالم المرئي واستمع بعناية إلى التصريحات سمعي30،31؛ أو مطلوبة لجعل بعض الاستجابات السلوكية، مثل النيابة بها الحركات الموصوفة ب الكلام سمعي1، وتحديد ما إذا كان أو لم يكن سمعي الكلام ينطبق على العرض المرئي38، أو اختيار الصحيح الصورة في العرض المرئي الكلام المنطوقة يتحدث عن17.

نموذج العالم المرئي، بالمقارنة مع غيرها من تقنيات psycholinguistic، له العديد من المزايا الفريدة. أولاً، يمكن استخدامها في نموذج العالم المرئي في مجموعة واسعة سكان، بما في ذلك أولئك الذين لا يمكن قراءة و/أو الذين لا يمكن أن تعطي علنا ردودهم السلوكية، مثل الأطفال الشفهي37،،من3839، 40 , 41 , 42و46من المسنين البالغين المرضى (على سبيل المثال-، أفاسيكس)47. هذا سبب تعرض المحفزات اللغة في السمع وليس في شكل نصوص مكتوبة؛ ويستدل من فهم اللغة من حركات العين التلقائي الضمني المشاركين بدلاً من ردودهم السلوكية العلنية. ثانيا، نموذج العالم المرئي حساسة للغاية للتلاعب غرامة الحبيبات إشارة الكلام. يمكن استخدام هذا النموذج لدراسة معالجة على الإنترنت لمعظم المواضيع في فهم اللغة على مستويات متعددة، مثل غرامة الحبيبات الميزات الصوتية الصوتية33،45،46، خصائص عبارة30،31،1،هياكل لغوية47، وهياكل البيانات المعقدة لغوياً مثل كونسيسيفيس37، بيكونديتيونالس37، منطقية الجمل الشرطية38، والفصل17.

نموذج العالم المرئي، بالمقارنة مع أسلوب بسيتشولينجويستيك الأخرى، كما أن لديها بعض القيود المحتملة. أولاً، هو استنتاج تفسير المشاركين اللغة المنطوقة من تحركاتهم العين في العالم المرئي، وليس من التفسير الفعلي للمحفزات اللغة الواحدة ذاتها. من الآن فصاعدا، خصائص اللغة التي يمكن دراستها مع العالم المرئي نموذج تقتصر على تلك التي يمكن تصور، أي.، ينبغي أن صلتها بطريقة ما إلى كيانات أو الأحداث التي وقعت في العالم المرئي. ثانيا، نموذج العالم المرئي المستخدمة عادة أكثر تقييداً من العالم المرئي الفعلية، مع مجموعة محدودة من مرجعيات المصورة ومجموعة محدودة من الإجراءات المحتملة. هذا ما يسمى بمشكلة إغلاق مجموعة48 قد خلق الاستراتيجيات الخاصة بمهمة معالجة اللغة الملحوظ لا التعميم خارج الحالات المحددة التي تم إنشاؤها ضمن التجربة. من الآن فصاعدا، قد لا يكون النموذج يراعي الخصائص المعرفة اللغوية والخبرة ملقاة خارج مجموعة المغلقة التي أنشئت في محاكمة معينة.

ويستكشف نموذج العالم المرئي أساسا تكامل المعلومات من المجال المرئي والمعلومات من المجال السمعي. من الناحية النظرية، أي المعلومات التي يمكن معالجتها بواسطة بين المجالات المثيرة يمكن يحتمل أن تكون دراستها باستخدام هذا النموذج. على سبيل المثال، يمكن أن يكون العالم المرئي الواقع الافتراضي أو أشرطة الفيديو الديناميكية. المدخلات السمعية ليست بالضرورة اللغة، ويمكن أن يكون أي صيغة أخرى، مثل الموسيقى والصوت من العالم الطبيعي، و ما إلى ذلك. وعلاوة على ذلك، يمكن توسيع هذا النموذج كذلك استكشاف تكامل المعلومات من المجالات الأخرى، بدلاً من المجال المرئي والمجال السمعي. على سبيل المثال، قد تستخدم الباحثين هذا الأسلوب لمعرفة كيف تتأثر تثبيتات المشتركين في العالم المرئي بروائح مختلفة ولمسات مختلفة، إلخ.

Subscription Required. Please recommend JoVE to your librarian.

Disclosures

ويعلن المؤلف أنه ليس لديه أي تضارب المصالح المالية.

Acknowledgments

هذا البحث تدعمها مؤسسة العلوم للغة بكين وجامعة الثقافي تحت "الصناديق البحوث الأساسية" للجامعات المركزية (الموافقة على رقم 15YJ050003).

Materials

Name Company Catalog Number Comments
Pixelmator Pixelmator Team http://www.pixelmator.com/pro/ image editing app
Praat Open Sourse http://www.fon.hum.uva.nl/praat/ Sound analyses and editting software
Eyelink 1000plus SR-Research, Inc https://www.sr-research.com/products/eyelink-1000-plus/ remote infrared eye tracker 
Experimental Builder SR-Research, Inc https://www.sr-research.com/experiment-builder/ eye tracker software 
Data Viewer SR-Research, Inc https://www.sr-research.com/data-viewer/ eye tracker software 
R Open Sourse https://www.r-project.org free software environment for statistical computing and graphics

DOWNLOAD MATERIALS LIST

References

  1. Tanenhaus, M. K., Spivey-Knowlton, M. J., Eberhard, K. M., Sedivy, J. C. Integration of visual and linguistic information in spoken language comprehension. Science. 268 (5217), 1632-1634 (1995).
  2. Cooper, R. M. The control of eye fixation by the meaning of spoken language: A new methodology for the real-time investigation of speech perception, memory, and language processing. Cognitive Psychology. 6 (1), 84-107 (1974).
  3. Salverda, A. P., Tanenhaus, M. K. Research methods in psycholinguistics and the neurobiology of language: A practical guide. de Groot, A. M. B., Hagoort, P. , Wiley. (2017).
  4. Huettig, F., Rommers, J., Meyer, A. S. Using the visual world paradigm to study language processing: A review and critical evaluation. Acta Psychologica. 137 (2), 151-171 (2011).
  5. Meyer, A. S., Sleiderink, A. M., Levelt, W. J. M. Viewing and naming objects: Eye movements during noun phrase production. Cognition. 66 (2), B25-B33 (1998).
  6. Griffin, Z. M., Bock, K. What the eyes say about speaking. Psychological Science. 11 (4), 274-279 (2000).
  7. Young, L. R., Sheena, D. Survey of eye movement recording methods. Behavior Research Methods & Instrumentation. 7 (5), 397-429 (1975).
  8. Conklin, K., Pellicer-Sánchez, A., Carrol, G. Eye-tracking: A guide for applied linguistics research. , Cambridge University Press. (2018).
  9. Duchowski, A. Eye tracking methodology: Theory and practice. , 2, Springer. (2007).
  10. Baayen, R. H., Davidson, D. J., Bates, D. M. Mixed-effects modeling with crossed random effects for subjects and items. Journal of Memory and Language. 59 (4), 390-412 (2008).
  11. Barr, D. J. Analyzing 'visual world' eyetracking data using multilevel logistic regression. Journal of Memory and Language. 59 (4), 457-474 (2008).
  12. Nixon, J. S., van Rij, J., Mok, P., Baayen, R. H., Chen, Y. The temporal dynamics of perceptual uncertainty: eye movement evidence from Cantonese segment and tone perception. Journal of Memory and Language. 90, 103-125 (2016).
  13. Bolker, B. M., et al. Generalized linear mixed models: A practical guide for ecology and evolution. Trends in Ecology and Evolution. 24 (3), 127-135 (2009).
  14. Mirman, D., Dixon, J. A., Magnuson, J. S. Statistical and computational models of the visual world paradigm: Growth curves and individual differences. Journal of Memory and Language. 59 (4), 475-494 (2008).
  15. Baayen, H., Vasishth, S., Kliegl, R., Bates, D. The cave of shadows: Addressing the human factor with generalized additive mixed models. Journal of Memory and Language. 94, 206-234 (2017).
  16. Baayen, R. H., van Rij, J., de Cat, C., Wood, S. Mixed-Effects Regression Models in Linguistics. Speelman, D., Heylen, K., Geeraerts, D. 4, Ch 4 49-69 (2018).
  17. Zhan, L. Scalar and ignorance inferences are both computed immediately upon encountering the sentential connective: The online processing of sentences with disjunction using the visual world paradigm. Frontiers in Psychology. 9, (2018).
  18. Maris, E., Oostenveld, R. Nonparametric statistical testing of EEG- and MEG-data. Journal of Neuroscience Methods. 164 (1), 177-190 (2007).
  19. Barr, D. J., Jackson, L., Phillips, I. Using a voice to put a name to a face: The psycholinguistics of proper name comprehension. Journal of Experimental Psychology-General. 143 (1), 404-413 (2014).
  20. van Gompel, R. P. G., Fischer, M. H., Murray, W. S., Hill, R. L. Eye movements: A window on mind and brain. , Elsevier. Ch. 21 471-486 (2007).
  21. Parkhurst, D., Law, K., Niebur, E. Modeling the role of salience in the allocation of overt visual attention. Vision Research. 42 (1), 107-123 (2002).
  22. Grice, H. P. Vol. 3 Speech Acts. Syntax and semantics. Cole, P., Morgan, J. L. , Academic Press. 41-58 (1975).
  23. Sauerland, U. Scalar implicatures in complex sentences. Linguistics and Philosophy. 27 (3), 367-391 (2004).
  24. Chierchia, G. Scalar implicatures and their interface with grammar. Annual Review of Linguistics. 3 (1), 245-264 (2017).
  25. Fox, D. Presupposition and Implicature in Compositional Semantics. Sauerland, U., Stateva, P. , Palgrave Macmillan. Ch. 4 71-120 (2007).
  26. Meyer, M. C. Ignorance and grammar. , Massachusetts Institute Of Technology. Unpublished PhD Thesis (2013).
  27. SR Research Ltd. SR Research Experiment Builder User Manual (Version 2.1.140). , Ottawa, Canada. (2017).
  28. SR Research Ltd. EyeLink® 1000 Plus Technical Specifications. , Mississauga, Canada. (2017).
  29. SR Research Ltd. EyeLink-1000-Plus-Brochure. , Mississauga, Canada. (2017).
  30. SR Research Ltd. EyeLink® 1000 Plus User Manual (Version 1.0.12). , Ottawa, Canada. (2017).
  31. SR Research Ltd. EyeLink® Data Viewer User’s Manual (Version 3.1.97). , Ottawa, Canada. (2017).
  32. McQueen, J. M., Viebahn, M. C. Tracking recognition of spoken words by tracking looks to printed words. The Quarterly Journal of Experimental Psychology. 60 (5), 661-671 (2007).
  33. Altmann, G. T. M., Kamide, Y. Incremental interpretation at verbs: restricting the domain of subsequent reference. Cognition. 73 (3), 247-264 (1999).
  34. Altmann, G. T. M., Kamide, Y. The real-time mediation of visual attention by language and world knowledge: Linking anticipatory (and other) eye movements to linguistic processing. Journal of Memory and Language. 57 (4), 502-518 (2007).
  35. Snedeker, J., Trueswell, J. C. The developing constraints on parsing decisions: The role of lexical-biases and referential scenes in child and adult sentence processing. Cognitive Psychology. 49 (3), 238-299 (2004).
  36. Allopenna, P. D., Magnuson, J. S., Tanenhaus, M. K. Tracking the time course of spoken word recognition using eye movements: Evidence for continuous mapping models. Journal of Memory and Language. 38 (4), 419-439 (1998).
  37. Zhan, L., Crain, S., Zhou, P. The online processing of only if and even if conditional statements: Implications for mental models. Journal of Cognitive Psychology. 27 (3), 367-379 (2015).
  38. Zhan, L., Zhou, P., Crain, S. Using the visual-world paradigm to explore the meaning of conditionals in natural language. Language, Cognition and Neuroscience. 33 (8), 1049-1062 (2018).
  39. Brown-Schmidt, S., Tanenhaus, M. K. Real-time investigation of referential domains in unscripted conversation: A targeted language game approach. Cognitive Science. 32 (4), 643-684 (2008).
  40. Fernald, A., Pinto, J. P., Swingley, D., Weinberg, A., McRoberts, G. W. Rapid gains in speed of verbal processing by infants in the 2nd year. Psychological Science. 9 (3), 228-231 (1998).
  41. Trueswell, J. C., Sekerina, I., Hill, N. M., Logrip, M. L. The kindergarten-path effect: studying on-line sentence processing in young children. Cognition. 73 (2), 89-134 (1999).
  42. Zhou, P., Su, Y., Crain, S., Gao, L. Q., Zhan, L. Children's use of phonological information in ambiguity resolution: a view from Mandarin Chinese. Journal of Child Language. 39 (4), 687-730 (2012).
  43. Zhou, P., Crain, S., Zhan, L. Grammatical aspect and event recognition in children's online sentence comprehension. Cognition. 133 (1), 262-276 (2014).
  44. Zhou, P., Crain, S., Zhan, L. Sometimes children are as good as adults: The pragmatic use of prosody in children's on-line sentence processing. Journal of Memory and Language. 67 (1), 149-164 (2012).
  45. Moscati, V., Zhan, L., Zhou, P. Children's on-line processing of epistemic modals. Journal of Child Language. 44 (5), 1025-1040 (2017).
  46. Helfer, K. S., Staub, A. Competing speech perception in older and younger adults: Behavioral and eye-movement evidence. Ear and Hearing. 35 (2), 161-170 (2014).
  47. Dickey, M. W., Choy, J. W. J., Thompson, C. K. Real-time comprehension of wh-movement in aphasia: Evidence from eyetracking while listening. Brain and Language. 100 (1), 1-22 (2007).
  48. Magnuson, J. S., Nusbaum, H. C. Acoustic differences, listener expectations, and the perceptual accommodation of talker variability. Journal of Experimental Psychology-Human Perception and Performance. 33 (2), 391-409 (2007).
  49. Reinisch, E., Jesse, A., McQueen, J. M. Early use of phonetic information in spoken word recognition: Lexical stress drives eye movements immediately. Quarterly Journal of Experimental Psychology. 63 (4), 772-783 (2010).
  50. Chambers, C. G., Tanenhaus, M. K., Magnuson, J. S. Actions and affordances in syntactic ambiguity resolution. Journal of Experimental Psychology-Learning Memory and Cognition. 30 (3), 687-696 (2004).
  51. Tanenhaus, M. K., Trueswell, J. C. Approaches to Studying World-Situated Language Use: Bridging the Language-as-Product and Language-as-Action Traditions. Trueswell, J. C., Tanenhaus, M. K. , The MIT Press. (2005).

Tags

السلوك، العدد 140، والعين تتبع تقنية، نموذج العالم المرئي، اللغة المحكية، والمعالجة عبر الإنترنت، ومجمع البيان، المعمم الخطي نموذج مختلط، التوزيع ذي الحدين، خطأ فاميليويسي، والتكيف بونفيروني
استخدام حركات العين التي تسجل في نموذج العالم المرئي لاستكشاف الإنترنت معالجة اللغة المنطوقة
Play Video
PDF DOI DOWNLOAD MATERIALS LIST

Cite this Article

Zhan, L. Using Eye Movements… More

Zhan, L. Using Eye Movements Recorded in the Visual World Paradigm to Explore the Online Processing of Spoken Language. J. Vis. Exp. (140), e58086, doi:10.3791/58086 (2018).

Less
Copy Citation Download Citation Reprints and Permissions
View Video

Get cutting-edge science videos from JoVE sent straight to your inbox every month.

Waiting X
Simple Hit Counter