الوحدة 5: التجزئة والتمثيلات المتجهية
فهم كيفية تحويل النص إلى أرقام وتمثيله في الفضاء المتجهي.
الأهداف التعليمية
- ✅ فهم تجزئة BPE وWordPiece وSentencePiece
- ✅ شرح قيود نافذة السياق والحلول
- ✅ وصف فضاءات التمثيلات المتجهية وتطبيقاتها
الفصول
- خوارزميات التجزئة: BPE، WordPiece، SentencePiece
- نوافذ السياق: الحدود، النماذج ذات السياق الطويل، التجزئة
- فضاءات التمثيلات المتجهية: التمثيلات المتجهية، التشابه، التصور