سؤال «ما هي أفضل … في …؟»
سألنا عن أفضل المطاعم والمقاهي والأفران والفنادق والعيادات والصالونات والنوادي والمحلات في 53 ثنائية من مدينة ومهنة، بالإنكليزية، وبالعربية في خمس مدن. كل جواب يذكر لائحة قصيرة. عددنا كم من الشركات المدرجة لدينا في تلك المدينة والمهنة ظهرت في أي لائحة، من أي مساعد، بأي لغة.
سؤال «ماذا تعرف عن…؟»
سألنا عن كل شركة باسمها ومدينتها، كما يفعل الزبون. ثم قرأ نموذج Claude من دون أدوات كل جواب إلى جانب سجلّنا وصنّفه: صحيح، صحيح جزئياً، «لا أعرف»، أو خطأ (شركة أو مكان أو مهنة أخرى).
ما أخطأت فيه الأجوبة
بعض الأجوبة التي صُنّفت خطأً. تحقّقنا من كل منها على الموقع الإلكتروني للشركة نفسها. نصفها من دون أسماء: المقصود هو الذكاء الاصطناعي، لا الشركة.
- جرّاح تجميل للوجه في النبطية وُصف بأنه طبيب قلب يُجري تمييل الشرايين ويزرع الدعامات.
- شركة تركيب ألواح شمسية في الدورة وُصفت بأنها «حانة وملهى ليلي يوناني لبناني أسطوري».
- موزّع قطع غيار سيارات في صيدا وُصف بأنه معرض عائلي للبلاط والأدوات الصحية والتدفئة.
- نادٍ خاص للتدريب الشخصي في بيروت وُصف بأنه مطعم وبار كوكتيل راقٍ في شارع سهر، مع قواعد للّباس.
- أكاديمية لتدريب المحاسبة في الحدث وُصفت بأنها «حانة ومطعم، لا مكتب محاسبة».
- شركة مزوّدة لخدمة الإنترنت وُصفت بأنها متجر نظارات فاخر ومركز للعناية بالعيون في الحمرا.
العربية والإنكليزية
العربية لم تساعد. حين سُئل Gemini بالعربية عن الشركات الصغيرة الـ150 نفسها، ومن ذاكرته، وصف 39% منها خطأً، مقابل 36% بالإنكليزية. وحين سألناه بالعربية عن أفضل الأماكن في خمس مدن، مع البحث، ذكر 8% من الشركات المدرجة لدينا هناك، مقابل 10% بالإنكليزية، علماً أن مطابقتنا للأسماء المكتوبة بالحروف العربية تُحصي أقل من الواقع.
ماذا يستطيع صاحب العمل أن يفعل
- اسأل مساعداً بنفسك: «ماذا تعرف عن [اسمك] في [مدينتك]، لبنان؟» ودوّن ما يخطئ فيه.
- اكتب بوضوح، على موقعك وعلى ملفك في Google Business Profile، ماذا تعمل وأين وكيف يتواصل معك الزبائن. المساعدون الذين يبحثون على الإنترنت يقرؤون هذه أولاً.
- كن مدرجاً حيث يبحث المساعدون: الخرائط والأدلّة والصحافة. الإدراج المجاني في Lebanese Businesses واحد منها.
كيف أجرينا الدراسة
الشركات. 600 شركة اختيرت عشوائياً من بين 8,639 مدرجة في Lebanese Businesses ومعروفة المدينة: 500 شركة صغيرة و50 شركة كبيرة و50 شركة ناشئة، موزّعة على 81 مهنة و156 بلدة، مع عدد قليل فقط من كل مهنة.
الأسئلة. «ماذا تعرف عن [الاسم] في [المدينة]، لبنان؟» (بالإنكليزية للجميع، وبالعربية لـ150 شركة صغيرة) و«ما هي أفضل [المهنة] في [المدينة]، لبنان؟» لـ53 ثنائية.
المساعدون. Google Gemini 3.5 Flash (gemini-3.5-flash) عبر واجهة Gemini البرمجية، مع أداة بحث Google ومن دونها. Claude Haiku 4.5 من Anthropic (claude-haiku-4-5-20251001) من دون بحث على الإنترنت. طُرح كل سؤال مرة واحدة في محادثة جديدة، بين 2026-10-08 22:06 و2026-10-08 22:32 (بتوقيت UTC). لم نسأل ChatGPT: ننشر فقط ما قسناه.
التقييم. قارن نموذج Claude Sonnet من دون أدوات كل جواب بسجلّنا (الاسم والمهنة والمدينة والوصف والموقع)، وعدّد ادعاءات الجواب قبل الحكم. «خطأ» يعني أن الجواب يناقض السجل: نوع آخر من الأعمال أو مكان آخر أو جهة أخرى.
تحقّق يدوي. فتحنا الموقع الإلكتروني للشركة نفسها لـ62 جواباً صُنّف خطأً. في 51 منها طابق الموقع سجلّنا لا جواب الذكاء الاصطناعي. في 2 منها كان الذكاء الاصطناعي محقاً وأخطأ التقييم؛ و9 لم يمكن التأكد منها (الموقع لا يعمل، أو الجواب مبهم لا خاطئ).
الحدود. قد تكون سجلاتنا خاطئة أيضاً، والتحقق اليدوي هو ما يبيّن كم يحدث ذلك. الأسماء المكتوبة بالحروف العربية داخل الأجوبة العربية تُطابَق بدقّة أقل، لذا قد تكون أرقام «الأفضل» بالعربية أدنى من الواقع. تطبيق Gemini وClaude.ai قد يجيبان بشكل مختلف عن النماذج نفسها عبر الواجهة البرمجية، والأجوبة تتغيّر من أسبوع لآخر.
البيانات. الأرقام الإجمالية في ai-report.csv. الأجوبة الخام تذكر أسماء الشركات، لذا نشاركها مع الصحافيين والباحثين عند الطلب عبر صفحة التواصل.