الحيرة تكشف بيانات التدريب

المقصود

يمكن أن تساعد الحيرة في تحديد ما إذا كان نصٌّ ما قد ورد ضمن بيانات تدريب النموذج.

“the more uncertainty the model has in predicting what comes next in a given dataset, the higher the perplexity.”

📕 من كتاب: AI Engineering بقلم Chip Huyen

يُظهر ذلك أن الحيرة يمكن أن تكون إشارة عملية للكشف عن انتماء النص إلى بيانات التدريب.

لا يثبت ذلك دقةً مثالية في الكشف، ولا يستبعد الإيجابيات الكاذبة والسلبيات الكاذبة.