تعالج نماذج Gemini وغيرها من نماذج الذكاء الاصطناعي التوليدي الإدخالات والمخرجات بدقة تُعرف باسم الرمز المميّز.
يشرح هذا الدليل كيفية الحصول على نوافذ السياق لنماذج معيّنة، بالإضافة إلى كيفية احتساب الرموز المميّزة لحالات استخدام مثل إدخال النص والدردشة والإدخالات المتعدّدة الوسائط وتعليمات النظام والأدوات.
لمحة عن الرموز المميّزة
يمكن أن تتألف الرموز المميّزة من أحرف فردية مثل z أو كلمات كاملة مثل cat. يتم تقسيم الكلمات الطويلة
إلى عدة رموز مميزة. تُسمى مجموعة الرموز المميزة التي يستخدمها النموذج "المفردات"، وتُسمى عملية تقسيم النص إلى رموز مميزة
إنشاء الرموز المميزة.
في نماذج Gemini، يعادل الرمز المميّز 4 أحرف تقريبًا. 100 رمز مميّز يساوي حوالي 60-80 كلمة إنجليزية.
عند تفعيل الفوترة، يتم تحديد تكلفة المكالمة الواردة إلى Gemini API جزئيًا من خلال عدد الرموز المميّزة للإدخال والإخراج، وبالتالي قد يكون من المفيد معرفة كيفية احتساب الرموز المميّزة.