DanLevy.net

كيف توظف مهندس ذكاء اصطناعي دون أن تحترق

وظف للحكم الذي يظهر باستمرار

العرض التوضيحي يعمل. السيرة الذاتية مذهلة. الجميع يغادر المقابلة متحمسين.

ثم يسأل شخص ما: ماذا يحدث إذا أصدر النظام نفس استرداد المبلغ مرتين؟

الصمت إجابة باهظة الثمن.

التوظيف في مجال الذكاء الاصطناعي صعب لأن الجزء المرئي من العمل ينتهي مبكرًا. نافذة محادثة تجيب بفقرات سلسة تبدو وكأنها منتهية. لا شيء فيها يخبرك ما إذا كان النظام يحترم الصلاحيات، أو ينجو من مهلة زمنية، أو يكلف لكل تذكرة أكثر من الإنسان الذي كان من المفترض أن يساعده.

لست بحاجة للفوز في جدال حول “رؤوس الانتباه”. أنت بحاجة إلى أدلة كافية لتقرر من سيتولى هذه القرارات نيابة عنك.

وظّف من أجل الحكم الكامن خلف العرض التوضيحي. اجعل هذا الحكم قابلاً للملاحظة قبل أن تقدم العرض.

إليك العملية التي سأتبعها لمهندس يُدمج الذكاء الاصطناعي في منتج: اكتب النتيجة، افتح قطعة عمل حقيقية واحدة، ادفع مقابل جلسة عمل قصيرة، وسجّل ما رأيته بالفعل. أدوار البحث والبنية التحتية تحتاج تمارين مختلفة. ابدأ من الوظيفة.


اكتب الوظيفة قبل أن تشتري السيرة الذاتية

“نحتاج مهندس ذكاء اصطناعي” عبارة مفيدة بقدر “نحتاج شخصًا جيدًا في التعامل مع المال.” محاسب؟ مدير مالي؟ الشخص الذي يخبر المؤسس أن يتوقف عن شراء النطاقات؟

اختر المشكلة التي توظف شخصًا ليتبناها.

العمل الذي تحتاجهالدليل الذي تبحث عنه
البحث أو تطوير النموذجالتجارب، الخطوط الأساسية، اختيارات البيانات، وحساب صادق لما لم ينجح
هندسة تطبيقات الذكاء الاصطناعيسير عمل مفيد، عمليات التكامل، التقييم، ومعالجة الأخطاء
بنية تحتية للذكاء الاصطناعيالنشر، السعة، المراقبة، التحكم في التكاليف، والاسترداد تحت الحمل
التقييم والجودةحالات اختبار تمثيلية، تسجيل دفاعي، وتشخيص الانحدارات
هندسة منتجات الذكاء الاصطناعيأبحاث المستخدمين، تصميم سير العمل، التبني، وإثبات أن الميزة حسّنت المهمة

يمكن لشخص واحد تغطية عدة صفوف. توقع عمق متساوٍ في جميع الخمسة هو كيف يتحول الوصف الوظيفي إلى قائمة أمانيات براتب مرفق.

اكتب نتيجة التسعين يومًا الأولى قبل أن تفتح المقابلات. على سبيل المثال:

تحديد ما إذا كان مساعد صياغة الدعم يقلل وقت المعالجة دون زيادة أخطاء السياسات. قدّم نموذجًا تجريبيًا مقاسًا، ومسار مراجعة بشرية، وتوصية بالتوسع أو المراجعة أو التوقف.

هذا يعطي المرشح شيئًا ليعترض عليه، وهذه هي النقطة. مرشح قوي سيسأل كيف يُقاس وقت المعالجة، ومن يملك السياسة، وهل تحقق أحد من جودة الإجابات البشرية الحالية. ضعيف سيقول إن الأمر يبدو مثيرًا.

إذا لم يستطع أحد في فريقك تقييم الدليل الفني، فاستعن بممارس خارجي للتقييم — واسأل ما إذا كان يأمل في بيعك التنفيذ لاحقًا. وإلا سينتهي الأمر بالمرشح ليكون المرجع الفني الخاص به، وهو تضارب مصالح بوضعية أفضل.

اطلب منهم فتح غطاء المحرك

صاحب عمل مشهور يخبرك أين عمل شخص ما. العرض التوضيحي يخبرك أن شيئًا ما عمل مرة واحدة، على كمبيوتر محمول، وفي مزاج جيد. لا يخبرك أي منهما بما يمكن لهذا الشخص أن يتولى مسؤوليته في فريقك.

اطلب مشروعًا واحدًا يمكنهم التحدث عنه بالكامل:

“خذني في جولة عبر شيء قمت بشحنه شخصيًا. ما الذي كنت مسؤولاً عنه، وما الذي تعطل، وما الذي تغير بفضل الأدلة؟”

ثم تابع قرارًا واحدًا عبر المسار الكامل. ما هو النهج الأول؟ ما الذي قاموا بقياسه؟ أي بديل رفضوه، ولماذا؟ ما الذي ساهم به زميل الفريق؟ ما الذي سيفعلونه بشكل مختلف الآن؟

اطلب أثرًا: سجلاً منقى من تشغيل فاشل، تقرير تقييم، مستند تصميم، اختبار، جولة سريعة في الكود. الأثر هو مجرد سجل لما فعله النظام في طريقه إلى إجابته — كل استدعاء أداة، كل إعادة محاولة، كل ابتلاع صامت. هو الفرق بين قراءة المقال ورؤية العمل.

المرشح الذي يرفض تسليم بيانات عملاء صاحب عمل سابق هو ناجح في الاختبار، ليس راسبًا فيه.

خذ مثالاً معاد بناؤه بدلاً من ذلك، أو استخدم التمرين المشترك أدناه. “أرني الأدلة” يجب ألا تتحول أبدًا إلى “أحضر لنا أسرار شخص آخر.”

للمرشح في بداية مسيرته المهنية، الأدلة أصغر وهذا جيد. قم بمواءمة النطاق المتوقع والإشراف مع الدور. أنت تختبر الفهم والملكية، وليس الوصول إلى علامات تجارية مشهورة.

خمسة أسئلة تستحق وقت المقابلة

هذه محفزات للتحقيق، وليست أسئلة تافهة. إذا كان حفظ الإجابة كافيًا للنجاح، فالسؤال لا يفعل شيئًا.

1. “كيف ستعرف ما إذا كان هذا الوكيل قد تحسن؟”

استمع إلى النجاح المحدد بلغة الوظيفة: التذاكر التي تم حلها بشكل صحيح، المسودات التي يرسلها الوكيل فعليًا، التصعيدات التي لم تكن بحاجة إلى حدوث. ثم اسأل أي الإخفاقات قد يخفيها متوسط الدرجات، وما الذي سيقارنون به الإصدار الجديد.

الإجابة الجيدة تجعل القياس قابلاً للفحص. اطلب منهم رسم ثلاث حالات اختبار على الفور وقول من يقرر ما إذا كانت كل حالة قد نجحت. إذا كان النموذج يصحح الإجابات، اسأل كيف يتحققون من المصحح. “إنها سجلت 94%” ليس قياسًا إذا كان نفس التشغيل يسجل 82% يوم الثلاثاء.

دليل أنثروبيك لتقييمات الوكيل يرسم التمييز الذي ينتمي إلى مقابلتك: سجل ما فعله الوكيل ليس هو نفسه النتيجة. الوكيل الذي يبلغ “لقد أصدرت استردادًا” هو جملة، وليس استردادًا.

2. “انتهت مهلة الأداة بعد تقديم استرداد. ماذا الآن؟”

“إعادة المحاولة” هو رد الفعل الخطأ. قد تكون الأموال قد ذهبت بالفعل.

استمع للتحقق من حالة المعاملة قبل التصرف، مفتاح التماثل (idempotency key) بحيث تقع المحاولة الثانية على الأولى، ومسار تصعيد عندما تكون الحالة غير معروفة حقًا. اسأل من يرى الفشل وكيف يستأنف العمل بعده. المفردات أقل أهمية من ما إذا كان تصميمهم يمكنه تحصيل رسوم من عميل مرتين مقابل خطأ واحد.

3. “ماذا يمكن لهذا النظام أن يقرأ، يغير، وينفق؟”

اسأل عن الحدود: أي السجلات يمكنه قراءتها، وأي الإجراءات يمكنه تنفيذها، وأين يجب أن يوافق إنسان، وما الذي يمنع حلقة من التشغيل طوال الليل على بطاقتك الائتمانية.

ثم اسأل أين يتم فرض هذا الحد. التعليمات التي تطلب من النموذج توخي الحذر هي جدار ناري مصنوع من نص سياسة — النية موجودة، لكن التنفيذ ليس كذلك. اطلب منهم رسم الحدود واقتراح اختبار يحاول تجاوزها.

أدرج تعرّض البيانات أثناء وجودك هناك: ما يغادر إلى مزود النموذج، وما يُكتب في السجلات، ومن يمكنه قراءة تلك السجلات. “نحن نسجل كل شيء” هو حديث امتثال ينتظر الحدوث.

4. “أي جزء ستبنيه بدون LLM؟”

المهندس القادر يمكنه إزالة الذكاء الاصطناعي من جزء من اقتراحه الخاص. قواعد الأهلية، الحسابات، وفحوصات الإذن لها تطبيقات مملة لا تهذي أبدًا. تفسير ما يعنيه عميل محبط ليس كذلك.

اسأل ما يقدمه النموذج لك في سير العمل هذا بالتحديد وما الدليل الذي يبرر سطح الفشل الإضافي. إذا كان كل مربع في الرسم البياني يحتاج إلى وكيل، فاطلب رسمًا بيانيًا أصغر.

5. “أخبرني عن نهج تخليت عنه.”

استمع للملاحظة التي غيرت رأيهم. أراد المستخدمون البحث، وليس الدردشة. النموذج الأغلى خفض التكلفة الإجمالية للمناولة. الميزة لم تكن تستحق الإطلاق وقد قالوا ذلك.

النتيجة السلبية الصريحة تتفوق على قصة نجاح مصقولة، لأن قصة النجاح نادرًا ما تكشف عن قاعدة قرار. اسأل عما توقفوا عن فعله، وكم من الوقت استغرقهم للتوقف.

ادفع مقابل جلسة عمل صغيرة

استخدم تمرينًا محدودًا ومدفوعًا على بيانات اصطناعية. أرسل الملخص ومعايير التقييم مسبقًا — أنت توظف للحكم، وليس للقدرة على التعرض للكمين. دَع الأشخاص يستخدمون الأدوات التي سيستخدمونها في الوظيفة، بما في ذلك الذكاء الاصطناعي، ثم اطلب منهم شرح والتحقق من أي شيء يخرج.

جلسة توضيحية مدتها 90 دقيقة لمهندس تطبيقات:

أنت ترث مساعد دعم يقوم بصياغة الردود واقتراح استردادات. إليك اثنتي عشرة تذكرة اصطناعية، وثيقة سياسة قصيرة، وأربع عمليات تشغيل مسجلة. إجابة واحدة تستشهد بسياسة تقاعدنا عنها في مارس. طلب استرداد واحد ينتهي بفترة زمنية. تذكرة واحدة تطلب معلومات عميل آخر. أوصِ بما إذا كنا نوسع التجربة، وأرني تحسينًا صغيرًا أو اختبارًا واحدًا.

خمس عشرة دقيقة لتوضيح الهدف، وخمس وأربعون دقيقة للتعمق، وثلاثون دقيقة لشرح التوصية. قدم لهم بيئة مجهزة حتى لا يكون التمرين اختبارًا سريًا لـ npm install. استوعب احتياجات الوصول، وحافظ على ظروف متكافئة عبر المرشحين.

أنت تراقب الأسئلة التي يطرحونها، والأدلة التي يفتحونها، والمخاطرة التي يصلون إليها أولاً. هل يلاحظون أن اثنتي عشرة تذكرة لا يمكنها إثبات الموثوقية؟ هل يمكنهم تسليم إصلاح ضيق واحد دون الادعاء بأن النظام جيد الآن؟ هل يمكنهم قول ما يجب أن يحدث الأسبوع القادم؟

المرشح الذي يضيف اختبارًا فاشلًا لاسترداد مكرر ربما يكون قد أخبرك أكثر من الذي سلم واجهة دردشة جميلة.

استخدم نفس الأسئلة الأساسية ونفس معايير التقييم للجميع في الدور — هذا هو الهيكل الأساسي وراء دليل المقابلات المنظمة لمكتب إدارة الموظفين الأمريكي، وهو موجود حتى تقارن لجنتك المرشحين بدلاً من المشاعر. حافظ على التمرين قريبًا من الوظيفة الحقيقية. الخط الفاصل بين عينة عمل واستشارة مجانية أرق مما يعتقد معظم مديري التوظيف، والمرشحون يمكنهم رؤيته من عبر الغرفة.

بطاقة التقييم للتوظيف

انسخ هذا في مستند المقابلة. اتفق على المستوى المطلوب لكل بُعد قبل أن تقابل أي شخص، لأن المستوى يتحرك بمجرد أن يعجبك أحدهم. يُقيّم كل مُقابل بشكل مستقل قبل جلسة الاستخلاص ويُرفق ملاحظة ملموسة بكل تقييم.

استخدم 1 = غير مدعوم أو معيب جوهريًا، 2 = قابل للتطبيق مع إرشاد كبير، 3 = سليم ضمن نطاق الدور، 4 = حكم سليم مع تحقق موثق. استخدم N/O = لم يُلاحظ عندما لا تُنتج المقابلة أدلة. N/O هو فجوة يجب سدها، وليس صفرًا يمكن تجاوز بمتوسط.

البُعدالأدلة التي تحقق ٣النتيجة / الأدلة الملاحظة
الحكم التقنييختار تصميمًا متناسبًا ويشرح بديلًا مرفوضًا___ / ___
الحكم على المنتجيحدد نتيجة مستخدم، وخط أساس، وسببًا للتوقف___ / ___
التقييميقترح حالات تمثيلية ويتحقق من النتائج، وليس فقط إجابات سلسة___ / ___
الانضباط الإنتاجييتعامل مع الفشل الجزئي، والاسترداد، والمراقبة، والتكلفة، وزمن الاستجابة___ / ___
الأمانيحدد البيانات الحساسة ويشرح حدود الوصول والإنفاق القابلة للتنفيذ___ / ___
التواصليذكر عدم اليقين بوضوح ويشرح العواقب لصانع القرار___ / ___
الملكيةيفصل عمله عن عمل الفريق ويتابع الأعطال حتى الحل___ / ___

هذه أداة مساعدة في اتخاذ القرار، وليست مؤشرًا مُوثقًا لأداء الوظيفة. قم بمعايرتها وفقًا لدورك، وتحقق منها مقابل ما يحدث فعليًا بعد انضمام الأشخاص — وإلا فأنت تُضبط حكمًا لم تُسجّل نقاطه مطلقًا.

بالنسبة لشخص سيمتلك الإنتاج بمفرده، أريد أدلة سليمة في كل بُعد أساسي. يجب ألا يُخفي مجموع قوي ضعفًا غير محلول في الأذونات أو الاسترداد؛ فهذان هما اللذان سيكلفانك لاحقًا. بالنسبة لمهندس متطور، دوّن الدعم الذي سيحتاجه واسم الشخص الذي سيقدمه.

اختتم جلسة الاستخلاص بثلاث جمل: ما الذي يمكن لهذا الشخص امتلاكه؟ ما الدعم الذي سيحتاجه؟ ما الذي ما زلنا غير متأكدين منه؟ مجموعة لا تستطيع الإجابة على هذه على وشك أن تخوض محادثة مدتها أربعون دقيقة حول الحضور التنفيذي.

الأعلام الحمراء تستحق سؤالًا إضافيًا

كن حذرًا عندما لا يستطيع المرشح فصل مساهمته عن مساهمة الفريق، أو يعتبر كل مشروع سابق نجاحًا غير منقطع، أو يجيب على أسئلة القياس بصفات. “دقة عالية” تحتاج إلى مقام.

دخان آخر: تظهر الوكلاء في التصميم قبل فهم المشكلة؛ لا سقف لتكلفة التشغيل؛ استرداد الأعطال يخص فريقًا آخر؛ الأمان يعيش بالكامل في الموجه.

استفسر مرة واحدة بسيناريو ملموس قبل أن تستنتج أي شيء. المصطلح غير المألوف ليس مفهومًا مفقودًا، وكثير من المهندسين الأقوياء تعلموا الأفكار تحت أسماء مختلفة. امنح الفضل عندما يلتقط شخص خطأه في منتصف الإجابة. رفض التحديث بعد رؤية أدلة متناقضة هو الخطوة المؤهلة للاستبعاد — أما الحاجة إلى لحظة هادئة للتفكير فليست كذلك.

هل أنت قلق بالفعل بشأن الموظف الجديد؟ راجع العمل أولاً

مشروع ذكاء اصطناعي متعثر لا يثبت أنك وظفت المهندس الخطأ. ربما كانت المهمة مستحيلة، أو البيانات غير قابلة للاستخدام، أو ربما وعدت القيادة باستقلالية كاملة في خطاب رئيسي قبل أن يقيس أحد الجودة.

قبل أن تطلب إعادة كتابة، احفظ الكود، والتكوين، ونتائج التقييم، والسجلات ذات الصلة تحت ضوابط وصول مناسبة. ثم حدد الحسابات والخدمات ومفاتيح API التي تسيطر عليها الشركة فعليًا — هذا هو المكان الذي تكتشف فيه الفرق أن خط الأنابيب بأكمله يعمل على حساب الفوترة الشخصي لشخص واحد.

احصل على قراءة مستقلة لبعض سير العمل النموذجية. ما الذي يعمل؟ ما الذي يفشل؟ أي الادعاءات قابلة للتكرار؟ قيّد الإجراءات الخطرة بينما السلوك غير المؤكد قيد التحقيق، وافرز العمل إلى احتفاظ وإصلاح واستبدال.

اطلب خطة استرداد قصيرة مع اختبارات قبول، وأصحاب محددين، وتاريخ قرار. “نحن بحاجة إلى إطار جديد” هو اقتراح للفحص، وليس تشخيصًا.

امنح الموظف الجديد الإذن بتخييب آمال خارطة الطريق

لا ينجح أي من هذا إذا كانت شركتك تعاقب الحكم الذي أمضيت للتو ستة أسابيع في اختياره.

المهندس الذي يقول “الموافقة البشرية تبقى على هذه الخطوة” أو “النموذج التجريبي لا يبرر التوسع بعد” يحتاج إلى قائد يمكنه سماع ذلك أمام الآخرين. وظّف من أجل الأدلة ثم ادفن النتائج غير المريحة، وستكون قد بنيت آلة باهظة الثمن لإنتاج الإجابات التي أردتها بالفعل.

لذا، للدور التالي في مجال الذكاء الاصطناعي: اكتب النتيجة، واستخدم بطاقة التقييم، وشاهد المرشح وهو يتعمق في شيء غير كامل.

أنت تريد الشخص الذي يستطيع أن يُريك لماذا النظام جاهز — والذي سيُخبرك، بصوت عالٍ، في اليوم الذي لا يكون فيه جاهزًا.