جودة البيانات لمشروع ذكاء اصطناعي تعتمد على الغرض من استخدامها. يصف إطار جودة البيانات الحكومي البريطاني الجودة بملاءمة البيانات للغرض؛ قد تختلف الاحتياجات والمعايير بين استخدام وآخر. [1]
الخلاصة السريعة
ابدأ بالسؤال الذي تريد من البيانات أن تخدمه، ثم حدد ما يلزمها ومعيار قبوله. لا تجعل كثرة الصفوف أو خلوها من الفراغ حكما عاما بأنها مناسبة لكل مهمة.
- ملاءمة البيانات للغرض تعتمد على احتياجات المستخدم؛ الجودة ليست حكما واحدا صالحا لكل استعمال. [1]
- في المثال، صور الشرائط وألوانها لا توفر تلقائيا قراءات طول موثقة بالسنتيمتر؛ لكل مهمة معلومات مطلوبة.
- اكتب ما تفحصه ووحدته وفترته ومعيار القبول، ثم سجل النتيجة؛ اختيار الفحص يختلف عن الادعاء أنه اجتاز.
- رتب الإصلاحات بحسب أثرها في السؤال، واحفظ حدود الاستخدام؛ قبول البيانات لفحص معين لا يثبت أداء النموذج.
لماذا لا نكتفي بوصف البيانات بأنها جيدة؟
يؤكد الإطار أن البيانات قد لا تكون ملائمة بالقدر نفسه لكل الأغراض. [1]
نقترح كتابة جملة محددة بجانب مجموعة البيانات: «نراجع صور شرائط ورقية لتمييز الألوان المسجلة». هذه الجملة تعين الشيء والخاصية والسؤال. إذا تغير الهدف إلى الطول بالسنتيمتر، تغيرت المعلومات التي نبحث عنها. لا يجيب عدد الملفات وحده عن وجود القياسات المطلوبة أو صحة إسنادها إلى الشرائط.
كيف تختلف حاجتان للمجموعة نفسها؟
نفترض مجموعة تعليمية من صور شرائط مع حقل لون راجعه مصدر المثال، لكنها لا تحتوي قراءات طول موثقة. هذه مجموعة افتراضية ولم نلتقط صورا أو ندرب مصنفا. يوضح الجدول حاجتين مختلفتين دون الحكم بأنها تكفي لبناء نموذج ناجح.
وجود اللون في كل سجل لا ينشئ حقل الطول، ولا يجعل الصورة دليلا على قياس بالسنتيمتر إذا لم نعرف كيف أخذ القياس. وحتى لمهمة اللون، نحتاج مراجعة ملاءمة الصور والحالات للمطلوب بدلا من إعلان الكفاية لأن عمود اللون ممتلئ. هذا تطبيق منطقي على المعلومات المتاحة في المثال، لا تقييم تجريبي لدقة مصنف.
| السؤال المقترح | المعلومة التي نراجعها |
|---|---|
| تمييز اللون المسجل | الصورة وإسناد اللون الصحيح للشريط |
| تقدير الطول بالسنتيمتر | قراءات طول موثقة ووحدتها وربطها بالصورة |
كيف نجعل حكمنا قابلا للفحص؟
نقترح بطاقة عمل لكل شرط: ما الخاصية المطلوبة، وكيف نراجعها، وما نطاق البيانات والفترة والوحدة، وما معيار القبول. مثلا، نحتاج إسناد كل قراءة طول إلى الشريط الصحيح ووحدة متفق عليها. لا نختار حدا رقميا عاما لكل مشروع؛ نبرر المعيار بحسب الاستخدام ونترك ما لم يقس غير محسوم.
نحفظ تاريخ الصور إذا كانت المهمة تصف حالة في وقت معين، ونوثق القياسات الغائبة أو المتعارضة. ثم نسجل دليل المراجعة ونتيجتها. وجود خانة اسمها «تم الفحص» لا يكفي إذا لم نعرف ماذا فحصت ومتى وبأي قاعدة، ولا نستبدل خطة مكتوبة بادعاء تنفيذها.
أي مشكلة نعالج أولا وما حدود النتيجة؟
إذا أردنا تدريب مهمة طول ولم توجد قياسات موثقة، فإن تنسيق اسم الصورة وحده لا يملأ هذا النقص. نرتب العمل بما يخدم السؤال: الحصول على المعلومة المطلوبة وربطها وتعريف وحدتها، ثم مراجعة الشروط الأخرى. وقد تبقى المجموعة مفيدة لغرض أبسط إذا صرحنا بحدودها وراجعنا متطلباته.
قبول فحص البيانات لا يساوي نجاح النموذج؛ نحتاج لاحقا تقييما مناسبا للمهمة على بياناته. المقال يشرح اختيار أسئلة الجودة قبل ذلك، ولم ينفذ مراجعة لمجموعة حقيقية. نعرض الشروط التي اجتازت فعلا في العمل حين توجد أدلتها، ونذكر ما ينقص، بدلا من ختم عام «جودة عالية» يخفي السؤال المقصود.
المصادر ومتابعة القراءة
أُعدّ هذا المقال بصياغة عربية أصلية بالاستناد إلى المصادر أعلاه، وهو مدخل تمهيدي إلى الموضوع. اقرأ منهجية المحتوى وحدوده.