نموذج لغوي للتدقيق النحوي والإملائي

فارس بن صالح القنيعير

2023/07/17

وعليكم السلام ورحمة الله وبركاته



على حد علمي لا أعرف نموذج مدرب مفتوح المصدر ودقيق لتدقيق الإملاء والنحو العربي، توجد بعض النماذج لتصحيح التشكيل ليس دقيقة جداً. قد تستفيد من نموذج لغوي أساس (base/foundational model) لتعيد تدريبه على مهمة التدقيق اللغوي، أو تبني النموذج من الصفر. كما توجد خوارزميات غير شبكية مثل conditional random fields، لكن لا أدري ما الأفضل.



توجد مجموعة بيانات للتصحيح اللغوي العربي من مشروع QALB، يمكن التواصل مع المجموعة البحثية من هنا للحصول عليها:

http://nlp.qatar.cmu.edu/qalb

عهود سعيد الزهراني

2024/01/17

لبناء نموذج للتدقيق اللغوي، يمكنك النظر في الاستفادة من نموذج مدرب (pre-trained model) وتعديله لتناسب احتياجاتك الخاصة. هذا يمكن أن يكون أكثر كفاءة من بناء نموذجك من الصفر، خاصةً إذا كنت تملك حدودًا زمنية.



يمكنك استخدام مثل هذه النماذج المدربة مسبقًا في مجال معالجة اللغات الطبيعية (NLP)، مثل BERT أو GPT، وتعديلها لتناسب مجال التدقيق اللغوي. يمكن أن يشمل التعديل تدريب النموذج الجديد على مجموعة بيانات تحتوي على أمثلة للأخطاء اللغوية التي ترغب في التركيز عليها.

فارس بن صالح القنيعير

2023/07/17

وعليكم السلام ورحمة الله وبركاته



على حد علمي لا أعرف نموذج مدرب مفتوح المصدر ودقيق لتدقيق الإملاء والنحو العربي، توجد بعض النماذج لتصحيح التشكيل ليس دقيقة جداً. قد تستفيد من نموذج لغوي أساس (base/foundational model) لتعيد تدريبه على مهمة التدقيق اللغوي، أو تبني النموذج من الصفر. كما توجد خوارزميات غير شبكية مثل conditional random fields، لكن لا أدري ما الأفضل.



توجد مجموعة بيانات للتصحيح اللغوي العربي من مشروع QALB، يمكن التواصل مع المجموعة البحثية من هنا للحصول عليها:

http://nlp.qatar.cmu.edu/qalb