يرجى تقديم سيرتك الذاتية باللغة الإنجليزية، والإشارة إلى مستوى إتقانك للغة الإنجليزية. تربط Mindrift المتخصصين بفرص عمل في مجال الذكاء الاصطناعي قائمة على المشاريع للشركات التقنية الرائدة، مع التركيز على اختبار أنظمة الذكاء الاصطناعي وتقييمها وتحسينها. المشاركة تكون قائمة على المشاريع وليست توظيفًا دائمًا.
ماذا تتضمن هذه الفرصة؟
نحن نبني مجموعة بيانات لتقييم وكلاء البرمجة المدعومين بالذكاء الاصطناعي—مدى جودة تعامل النموذج مع المهام الواقعية التي ينفذها المطورون. ستقوم بإنشاء مهام صعبة ومعايير تقييم في بيئات محاكاة واقعية:
– بناء بيئات تطوير واقعية: شركة افتراضية تتضمن قاعدة شيفرة وبنية تحتية وسياقًا (تذاكر، توثيق، محادثات) يعكس تاريخ تطوير يمكن تصوره
– إنشاء مهام من حالات وسيطة لهذه البيئات: صياغة الطلب (Prompt)، وتحديد معنى “الحل”، وضمان إمكانية إتمام المهمة بواسطة وكيل ذكاء اصطناعي
– كتابة اختبارات للتحقق من حلول الوكيل: قبول جميع الطرق الصحيحة ورفض الطرق غير الصحيحة، دون تشدد زائد أو تساهل مفرط
– تحسين المهام والاختبارات بناءً على ملاحظات ضمان الجودة (QA): مراجعة مخرجات الوكيل، تحليل حالات الفشل، ثم تحسين التقييم حتى يصبح عادلاً وموثوقًا
ما هذه الفرصة ليست
– ليست أعمال ترميز/توسيم البيانات
– ليست هندسة الصياغات (Prompt Engineering)
– ليست كتابة الكود من الصفر: الوكيل يكتب معظم الشيفرة، وأنت تُرشد وتقيّم
ما الذي نبحث عنه
– خبرة 5 سنوات أو أكثر في تطوير البرمجيات
– التقنية الأساسية: Python (FastAPI)، JavaScript/TypeScript (React)، Docker، Postgres، Kafka، Redis
– خبرة في كتابة الاختبارات (اختبارات وظيفية واختبارات تكامل)
– إتقان اللغة الإنجليزية (B2+)
لماذا هذه المهمة صعبة؟
تتمتع النماذج الرائدة بالفعل بقدرات قوية في البرمجة. ومع ذلك، فإن إنشاء مهام تُعد تحديًا حقيقيًا لأفضل النماذج أمرٌ صعب. ستحتاج إلى فهم عميق لنقاط فشل النماذج وللسيناريوهات التي تميّز الحل القوي من الحل الضعيف. وبما أن المهام قد يكون لها العديد من الحلول الصحيحة، فإن كتابة اختبارات تقبل جميع الإجابات الصحيحة وترفض غير الصحيحة أصعب مما قد يبدو.
طريقة العمل
قدّم الطلب → اكمل/اكمل المؤهلات التقييمية → انضم إلى مشروع → أنهِ المهام → تحصل على الأجر
تقدير الجهد
تُقدّر مهام هذا المشروع بأنها ستستغرق 20 ساعة لإنجازها، اعتمادًا على التعقيد. هذا تقدير وليس جدولًا ثابتًا: أنت تحدد متى وكيف تعمل. يجب أن تسلم المهام قبل الموعد النهائي وتستوفي معايير القبول لاعتمادها.
المقابل
حتى ما يعادل 50 دولارًا في الساعة، وفقًا لمستواك وتيرتك. تُقدّر كل مهمة بحوالي 20 ساعة؛ أنت تحدد جدولك الزمني بنفسك.
To apply for this job, please visit the application page
