وصف تسلسل صور بالذكاء الاصطناعي قد ينتقل من ذكر ما يظهر إلى رواية ما حدث. تميز دراسة Visual Storytelling بين وصف الصور منفردة ووصفها ضمن تسلسل وصياغة قصة عنها. [1] نستخدم الفرق لفحص ثلاث حالات ورقة افتراضية، دون توليد قصة بنموذج أو اعتبار ترتيب الملفات سجلا زمنيا.
الخلاصة السريعة
افصل ترتيب العرض عن ترتيب حدوث الوقائع، وسم أي رابط لم يثبت بوصفه احتمالا؛ قصة متماسكة لا تكفي لإثبات الزمن أو هوية الشيء في الصور.
- تفرق الدراسة المذكورة بين وصف صورة ووصف تسلسل وقصة؛ لا نعرض نتائجها ضمانا لتحقق رواية مساعد بعينه. [1]
- في المثال تظهر ورقة مسطحة وأخرى مثلثة وثالثة عليها أثر طي؛ ترتيب هذه الحالات في المرفقات لا يثبت أيها صور أولا.
- ثبت علاقة الصور بالورقة والحدث نفسيهما قبل ربط تغيراتها؛ قد تكون صور أشياء مختلفة أو مراحل أعيدت، لا خطوات حدثت مرة واحدة.
- إذا توفر دليل ترتيب مناسب، اذكر مصدره ونطاقه؛ إثبات أن لقطة سبقت أخرى لا يثبت سبب التغيير أو نية الشخص بينهما.
متى يتحول الوصف إلى رواية؟
تعرض الدراسة ثلاثة مستويات: وصف صور منفردة، ووصف صور في تسلسل، وقصة للصور المتتابعة. [1] نقتصر على هذا التمييز؛ لا ننقل مقاييس الدراسة أو نستنتج أن كل قصة مولدة توثق ما حصل فعلا.
في نشاطنا الافتراضي، تحتوي الصورة أ على ورقة مسطحة، وب على شكل مثلث من الورق، وج على ورقة مفتوحة يظهر فيها خط طي. قول «هذه ورقة عليها خط» يصف الحالة المعلنة في ج. أما «فك الطفل المثلث بعدما أخطأ» فيضيف فعلا وشخصا وسببا لم يقدمها هذا الوصف.
هل ترتيب المرفقات ترتيب التصوير؟
يمكن أن يقدم المستخدم أ ثم ب ثم ج ليشرح طيا ثم فتحا. ويمكن أن تصل الملفات ج ثم أ ثم ب بسبب طريقة اختيارها. لا نساوي الموضع الأول في المحادثة بأقدم وقت تصوير. حتى تسمية ملف «الخطوة الثانية» تحتاج إلى معرفة هل هي تسمية تعليمية أم توثيق لحدث حقيقي.
نقترح تسجيل ترتيب العرض كما وصل، وإبقاء ترتيب الحدث غير متحقق إذا لم يقدم دليل مناسب. فإذا كان المطلوب قصة خيالية، يستطيع الكاتب اقتراح ترتيب معقول مع بيان أنه اختاره. وإذا كان المطلوب وصف عمل حدث، لا نغير هذا النوع من الطلب إلى قصة توحي بالتوثيق.
هل نتابع الورقة نفسها؟
تشابه الورق لا يكفي وحده لإثبات أن أ وب وج تخص القطعة نفسها. قد يشرح المعلم الطي بورقتين مختلفتين. وقد تفتح القطعة ثم تطوى مرة أخرى، لذلك لا يلزم من الشكل المثلث أن كل ورقة مسطحة سبقته أو أن كل أثر طي جاء بعد هذه اللقطة تحديدا.
نطلب ما يربط الصور بالحدث المقصود إذا كان هذا الربط أساس الإجابة، ونحفظ ما لا يزال مجهولا. لا نبني سجل تقدم الشخص من تغير شكل مجهول العلاقة. يمكن وصف الحالات الثلاث دون ادعاء هوية مستمرة أو معرفة ما فعله شخص لم يظهر في المواد التي حددناها.
ماذا يبقى بعد تأكيد الترتيب؟
لو أكد مرجع مناسب أن أ ثم ب ثم ج صور للورقة نفسها في النشاط نفسه، نستطيع نسبة هذا الترتيب إليه. لا يثبت ذلك وحده أن الفتح كان بسبب خطأ أو أن الطفل أحب النتيجة. يحتاج سبب الفعل أو شعور صاحبه إلى دليل آخر يناسب السؤال.
نقترح بطاقة تفصل الحالة المرئية وترتيب العرض والترتيب المؤكد ومصدر الربط. لم نجمع صورا أو نقارن تواريخ أو نختبر مساعدا. يوضح النشاط متى تكون جملة «ثم حدث كذا» أقوى من المعطيات التي أخذناها منها، وكيف نحافظ على فائدة التسلسل دون تحويل الاحتمال إلى خبر.
المصادر ومتابعة القراءة
- Visual Storytelling—NAACL2016 (يفتح في نافذة جديدة)aclanthology.org
أُعدّ هذا المقال بصياغة عربية أصلية بالاستناد إلى المصادر أعلاه، وهو مدخل تمهيدي إلى الموضوع. اقرأ منهجية المحتوى وحدوده.