ضبط Phi-3 باستخدام QLoRA
ضبط نموذج اللغة Phi-3 Mini من مايكروسوفت باستخدام QLoRA (التكيف الكمي منخفض الرتبة).
يساعد QLoRA في تحسين فهم المحادثات وتوليد الردود.
لتحميل النماذج في 4bits باستخدام transformers وbitsandbytes، يجب تثبيت accelerate وtransformers من المصدر والتأكد من أن لديك أحدث إصدار من مكتبة bitsandbytes.
أمثلة
- تعرف أكثر من خلال هذا الدفتر التوضيحي
- مثال على ضبط دقيق باستخدام Python
- مثال على ضبط دقيق باستخدام Hugging Face Hub وLORA
- مثال على ضبط دقيق باستخدام Hugging Face Hub وQLORA
إخلاء المسؤولية:
تمت ترجمة هذا المستند باستخدام خدمات الترجمة الآلية المعتمدة على الذكاء الاصطناعي. بينما نسعى لتحقيق الدقة، يرجى العلم أن الترجمات الآلية قد تحتوي على أخطاء أو معلومات غير دقيقة. يجب اعتبار المستند الأصلي بلغته الأصلية المصدر الرسمي والموثوق. للحصول على معلومات حساسة أو هامة، يُوصى بالاستعانة بترجمة بشرية احترافية. نحن غير مسؤولين عن أي سوء فهم أو تفسير خاطئ ينشأ عن استخدام هذه الترجمة.