نوافذ السياق والرموز في الذكاء الاصطناعي: شرح بسيط

نوافذ السياق و الرموز المميزة هما مفهومان أساسيان في الذكاء الاصطناعي، خاصة في نماذج اللغات الكبيرة (LLMs). سيؤدي فهم هذين المفهومين إلى فهم سبب "نسيان" نماذج الذكاء الاصطناعي لأجزاء من المحادثة بمجرد تطويرها بما فيه الكفاية، وكذلك سبب إساءة تفسير المطالبات المعقدة من قبل النموذج.

ما هي التوكنات؟

في الذكاء الاصطناعي، الرمز المميز هو وحدة البيانات التي قد تمثل حرفًا أو كلمة أو عبارة. يمكنك اعتبارها لبنات بناء تستخدمها النماذج لإنشاء إجاباتها. عادة، في اللغة الإنجليزية، يعادل كل رمز رمزي في اللغة الإنجليزية 4 أحرف، على الرغم من أن هذه ليست قاعدة. اللغات الأخرى لديها معادلات مختلفة للرموز الرمزية وقد يعتمد ذلك أيضاً على أنظمة الذكاء الاصطناعي نفسها.

مثال على الرموز المميزة:

• كلمات كاملة ("منزل"، "قطة"، "رائع")
• أجزاء الكلمات ("un-" "توقع-" "-ed")
• الأحرف الفردية (خاصة لعلامات الترقيم مثل "." أو "?")
• المسافات بين الكلمات

على سبيل المثال، يمكن تقسيم جملة "أحب تعلم الذكاء الاصطناعي!" إلى رموز مثل

"I"
"الحب"
"التعلُّم"
"حول"
" الذكاء الاصطناعي"
“!”

لماذا تعتبر الرموز مهمة؟

تساعد الرموز أنظمة الذكاء الاصطناعي على معالجة اللغة بكفاءة أكبر. فهي لا تحاول فهم كل كلمة قد تدخلها، ولكن بدلاً من ذلك تعمل بمفردات محدودة من الرموز. وهذا يجعل مهمتهم أكثر سهولة في التعامل معها.

ما هي نافذة السياق؟

نوافذ السياق هي الحد الذي ستحتفظ فيه بعض النماذج في الذاكرة بالمعلومات التي تقدمها في المحادثة، لتقوم بعد ذلك بالإجابة عليها.

تمثّل نافذة السياق مقدار النص (الذي يُقاس بالرموز) الذي يمكن لنموذج الذكاء الاصطناعي "رؤيته" والنظر فيه في آنٍ واحد عند توليد استجابة. وهي تشمل:

• سؤالك أو طلبك الحالي
• الرسائل السابقة في المحادثة
• أي مستندات أو معلومات قمت بمشاركتها
• الردود السابقة للذكاء الاصطناعي

ما أهمية نوافذ السياق؟

نوافذ السياق مهمة بمعنى أنها تؤثر على جودة المخرجات/الإجابة. لنفترض أن الذكاء الاصطناعي لديه نافذة سياق مكونة من 8000 رمز (6 آلاف كلمة تقريبًا)، يمكنه فقط النظر في هذا القدر من السياق لتوليد الإجابة. كل شيء خارج نافذة السياق هذه سيكون غير مرئي بشكل فعال للذكاء الاصطناعي.

بعض الفوائد العملية لفهم هذه المفاهيم:

• إذا قمت بتحليل المستند، قد تحتاج إلى تلخيصها داخل نافذة السياق، وتقسيمها إلى أقسام أصغر ثم تحليلها والتركيز على الأجزاء المهمة
• بالنسبة لـ الكتابة الإبداعيةلنفترض أنك تعمل على قصة، قد ترغب في تتبع مقدار نافذة السياق المستخدمة، وتحديث المحادثة من وقت لآخر وتلخيص الفصول السابقة لضمان الاستمرارية مع حفظ الرموز.
• بالنسبة لـ الترميز المشاريع، فأنت تريد التأكد من تقديم السياق الضروري فقط لتحقيق هدفك. بصفتك شخصًا كان يبرمج بالذكاء الاصطناعي، من السهل أن تتكاسل وتقدم معلومات أكثر من اللازم أو أقل من اللازم عن المشكلة التي تحاول حلها. ولكن هذا لا يؤدي إلى أفضل النتائج، بل قد يعيقك أكثر من أي شيء آخر.

استراتيجيات العمل مع نوافذ السياق

1. كن موجزاً: تواصل بوضوح ولكن بكفاءة لتوفير الرموز المميزة.
2. تحديد أولويات المعلومات: قم بتضمين التفاصيل الأكثر أهمية أولاً.
3. لخص عندما يكون ذلك ممكناً: بدلاً من لصق مستند كامل، فكر في مشاركة ملخص بالنقاط الرئيسية.
4. التنظيف: في المحادثات الطويلة، ضع في اعتبارك البدء من جديد عندما يصبح السياق مزدحماً بالمعلومات غير ذات الصلة.
5. نظّم أسئلتك: تساعد الأسئلة المنظمة والمحددة بشكل جيد الذكاء الاصطناعي على فهم احتياجاتك دون الحاجة إلى أسئلة إضافية ذهاباً وإياباً.

الخاتمة

تعتبر الرموز ونوافذ السياق من المفاهيم المهمة التي يجب تعلمها عند محاولة العمل مع الذكاء الاصطناعي. سيساعدك فهمها على التواصل مع نماذج الذكاء الاصطناعي بشكل أفضل، والعمل بأقصى إمكاناتها وضمن قيودها. مع تقدم تكنولوجيا الذكاء الاصطناعي، تزداد نوافذ السياق اتساعًا وتصبح معالجة الرموز أكثر كفاءة، ولكن تظل هذه المفاهيم في صميم كيفية تفاعلنا مع الذكاء الاصطناعي اللغوي.