كيف تشكّل اللغة إدراكنا البصري؟

يحاول علماء الأعصاب فهم كيفية معالجة  الدماغ  للمعلومات البصرية، وقد فتحت الشبكات العصبية العميقة المستوحاة من تنظيم الدماغ آفاقًا جديدة في هذا المجال.

أظهرت دراسة حديثة لباحثين من جامعة بكين وجامعة بكين للمعلمين ومعاهد صينية أخرى، ونُشرت في مجلة Nature Human Behavior وفقًا لموقع Phys.org، أن اللغة تلعب دورًا مهمًا في الطريقة التي يعالج بها الدماغ  المعلومات البصرية  ، كما تتفاعل معها الشبكات العصبية العميقة متعددة الوسائط لفهم العالم البصري من حولنا.

طور علماء الحاسوب نماذج جديدة قادرة على التعامل مع  الصور والنصوص معًا، من أبرزها CLIP الذي يربط الصور بوصفها النصي، وResNet المدرب على صور مصنّفة مسبقًا، وMoCo المدرب على صور غير مصنّفة. اختبر الباحثون هذه النماذج على مهام فهم المعلومات البصرية وقارنوا نتائجها بتوقعات البشر، وشمل الاختبار أيضًا 33 مريضًا أصيبوا بسكتة دماغية أدت إلى تلف الروابط بين مناطق الدماغ المسؤولة عن الرؤية واللغة.

أظهرت النتائج أن نموذج الحاسوب CLIP يعكس نشاط  القشرة الصدغية البصرية (VOTC) بشكل أفضل من النماذج الأخرى، خاصة في الجانب الأيسر المرتبط باللغة.

كما أوضحت تحليلات مرضى السكتة الدماغية أن تضرر الروابط بين مناطق اللغة والرؤية يقلل من توافق نشاط الدماغ مع نموذج الحاسوب CLIP ويزيده مع MoCo، مما يبرز الدور الحيوي للغة في معالجة المعلومات البصرية ويدعم دمج اللغة في نماذج الإدراك البصري المستوحاة من الشبكات العصبية العميقة، وفقًا لمجلة Nature Human Behavior.

تشير هذه النتائج إلى أن اللغة تلعب دورًا أساسيًا في معالجة الدماغ   للمعلومات البصرية ، وقد تساعد هذه الملاحظات على تطوير نماذج  ذكاء اصطناعي تحاكي الدماغ البشري وفهم تأثير الحالات الطبية على وظائفه.

تحرير: عماد حسن