Token · وحدة يعالجها النموذج
تقسم النماذج المحتوى إلى وحدات صغيرة تسمى توكنات. قد يمثل التوكن حرفًا أو جزءًا من كلمة أو مقطعًا آخر.
مثال من الحياة اليومية
سؤالك والإجابة المولدة كلاهما يستهلك توكنات. وقد يختلف عدّ النص نفسه بين النماذج.
متى ستصادفه
عدد التوكنات مهم لرسوم الاستخدام وحدود الإدخال والإخراج.
ما الذي تنتبه له
لا يوجد تحويل ثابت إلى كلمات أو أحرف. للصور والصوت حساب خاص. أما توكن الوصول المستخدم للمصادقة فهو معنى آخر للكلمة.
مصطلحات ومصادر مرتبطة
أُعدت من المصادر العامة أدناه. الأمثلة لتوضيح المفهوم. المراجعة: 2026-10-15.