تقيس الحيرة عدم اليقين التنبؤي

المقصود

تزداد الحيرة عندما يكون لدى النموذج قدر أكبر من عدم اليقين بشأن ما سيأتي بعد ذلك في مجموعة البيانات.

“the more uncertainty the model has in predicting what comes next in a given dataset, the higher the perplexity.”

📕 من كتاب: AI Engineering بقلم Chip Huyen

يُثبت اتجاه العلاقة بين عدم اليقين والحيرة.

لا يوضح كيفية حساب الحيرة في كل سياق.