تم اختبار Meta AI: لا يبرر وجوده تمامًا، ولكنه مجاني

يعمل نموذج اللغة الكبير الجديد من Meta، Llama 3، على تشغيل ما يسمى بشكل خيالي “Meta AI”، وهو برنامج دردشة حديث قامت شركة الوسائط الاجتماعية والإعلان بتثبيته في أكبر عدد ممكن من تطبيقاتها وواجهاتها. كيف يمكن لهذا النموذج أن يتنافس مع أنظمة الذكاء الاصطناعي التحادثية الأخرى متعددة الأغراض؟ إنه يميل إلى اجترار الكثير من نتائج بحث الويب، ولا يتفوق في أي شيء، ولكن السعر مناسب.

يمكنك حاليًا الوصول إلى Meta AI مجانًا على الويب على Meta.ai، وعلى Instagram، وFacebook، وWhatsApp، وربما في بعض الأماكن الأخرى إذا لم تكن هذه كافية. لقد كان متاحًا قبل الآن، لكن إصدارات Llama 3 ومولد الصور Imagine الجديد (يجب عدم الخلط بينه وبين Imagen من Google) دفعت Meta إلى الترويج له باعتباره المحطة الأولى لمحبي الذكاء الاصطناعي. ففي النهاية، ربما ستستخدمه عن طريق الصدفة لأنهم استبدلوا مربع البحث الخاص بك به!

حتى أن مارك زوكربيرج قال إنه يتوقع أن يكون Meta AI “مساعد الذكاء الاصطناعي الأكثر استخدامًا والأفضل في العالم”. من المهم أن يكون لديك أهداف.

تذكير سريع حول عملية “المراجعة” الخاصة بنا: هذا تقييم غير رسمي للغاية للنموذج، وليس باستخدام معايير تركيبية ولكن مجرد طرح أسئلة عادية قد يطرحها الأشخاص العاديون، ومقارنة النتائج بتجربتنا مع النماذج الأخرى، أو فقط بما تريد نأمل في الحصول على من واحد. إنه أبعد ما يكون عن الشمول، لكنه شيء يمكن لأي شخص أن يفهمه ويكرره.

يمكنك أن تقرأ عن طريقتنا، كما هي، هنا:

نحن نقوم دائمًا بتغيير وتعديل نهجنا، وفي بعض الأحيان نقوم بتضمين شيء غريب وجدناه أو نستبعد أشياء لا تبدو ذات صلة حقًا. على سبيل المثال، هذه المرة، على الرغم من أن سياستنا العامة هي عدم محاولة تقييم إنتاج الوسائط (إنها علبة أخرى من الديدان)، لاحظ زميلي إيفان أن نموذج التخيل كان يُظهر مجموعة من التحيزات حول الشعب الهندي. سننشر هذه المقالة قريبًا (قد تكون Meta متاحة لنا بالفعل).

أيضًا، باعتبارك إعلان خدمة عامة في البداية، يجب أن تدرك أن هناك خطأ واضح في Instagram منعني من حذف الاستعلامات التي أرسلتها. لذلك أتجنب طرح أي شيء لا تريد ظهوره في سجل البحث الخاص بك. كما أن إصدار الويب لم يعمل في Firefox بالنسبة لي.

الأخبار والأحداث الجارية

أولاً، سألت Meta AI عما يحدث بين إسرائيل وإيران. لقد استجابت بقائمة مختصرة ومنقطة، بما في ذلك التواريخ بشكل مفيد، على الرغم من أنها استشهدت فقط بمقالة واحدة لشبكة سي إن إن. مثل العديد من المطالبات الأخرى التي جربتها، تنتهي هذه المطالبة برابط إلى بحث Bing عندما تكون على واجهة الويب وبحث Google في Instagram. سألت ميتا وقال المتحدث الرسمي إن هذه في الأساس شراكات لترويج البحث.

(الصور الموجودة في هذا المنشور هي للإشارة فقط، ولا تظهر بالضرورة الاستجابة بأكملها.)

اعتمادات الصورة: Meta/TechCrunch للتحقق مما إذا كان Meta AI يعتمد بطريقة أو بأخرى على نموذج الذكاء الاصطناعي الخاص بـ Bing (والذي تستعيره Microsoft بدوره من OpenAI)، قمت بالنقر فوقه ونظرت إلى إجابة Copilot على الاستعلام المقترح. كان يحتوي أيضًا على قائمة ذات تعداد نقطي تحتوي على نفس المعلومات تقريبًا ولكن روابط مضمّنة أفضل ومزيد من الاستشهادات. بالتأكيد مختلفة.

كانت استجابة Meta AI واقعية ومحدثة، إن لم تكن بليغة بشكل خاص. كانت استجابة الهاتف المحمول أكثر ضغطًا إلى حد كبير، ويصعب الوصول إلى المصادر، لذا كن على علم أنك تحصل على إجابة مبتورة هناك.

بعد ذلك، سألت إذا كانت هناك أي اتجاهات حديثة على Tiktok يجب أن يكون أحد الوالدين على علم بها. لقد تم الرد بملخص رفيع المستوى لما يفعله منشئو المحتوى على الشبكة الاجتماعية، ولكن لم يكن هناك أي شيء حديث. نعم، أعلم أن الأشخاص يقدمون “تمثيليات كوميدية: محتوى فكاهي أو مرتبط أو محاكاة ساخرة” على Tiktok، شكرًا لك.

اعتمادات الصورة: ميتا / تك كرانش

ومن المثير للاهتمام، عندما طرحت سؤالًا مشابهًا حول الاتجاهات السائدة على Instagram، حصلت على استجابة متفائلة باستخدام عبارات تسويقية مثل “الرد باستخدام Reels يخلق محادثات” و”الذكاء الاصطناعي يولد فرصًا جديدة” و”المشاركات النصية تزدهر على “gram”.” اعتقدت أنها ربما كانت إيجابية بشكل غير عادل بشأن منصات منشئها، لكن لا – اتضح أنها كانت مجرد اجترار، كلمة بكلمة، منشور لاتجاهات Instagram لطعم تحسين محركات البحث من Hootsuite.

إذا سألت Meta’s AI على Instagram عن الاتجاهات السائدة على Instagram، أتمنى أن أحصل على شيء أكثر إثارة للاهتمام. إذا أردت أن أقرأ صديقي سأبحث عنه فقط.

التاريخ والسياق

طلبت من Meta AI مساعدتي في العثور على بعض المصادر الأولية لبعض الأبحاث التي من المفترض أن أقوم بها بشأن قرارات المحكمة العليا في أواخر القرن التاسع عشر.

اعتمادات الصورة: ميتا / تك كرانش

اعتمدت استجابتها بشكل كبير على منشور غير مؤذٍ ولكنه خالٍ من الأساسيات لتحسين محركات البحث، والذي يسرد عددًا من القرارات البارزة في القرن التاسع عشر. ليس بالضبط ما طلبته، ثم في النهاية أدرجت أيضًا وثيقة تأسيسية لعام 1896 لحزب الشعب، وهو حزب ذو توجهات يسارية من تلك الحقبة. لا علاقة للأمر حقًا بالمحكمة العليا، لكن Meta AI تستشهد بهذه الصفحة، التي تصف بعض القضاة بأنهم يحملون وجهات نظر معاكسة للحزب. إدراج غريب وغير ذي صلة.

قدمت نماذج أخرى سياقًا وملخصات لاتجاهات العصر. لن أستخدم Meta AI كمساعد باحث.

بعض الأسئلة التافهة الأساسية، مثل من الذي فاز بأكبر عدد من الميداليات في دورة الألعاب الأولمبية لعام 1984 وما هي الأحداث البارزة التي حدثت في ذلك العام، تم الرد عليها والاستشهاد بها بشكل كافٍ.

اعتمادات الصورة: ميتا / تك كرانش

إنه أمر مزعج بعض الشيء أنه يجمع أرقام الاستشهادات الخاصة به في الأعلى ثم الروابط في الأسفل. وما الفائدة من ترقيمها إلا إذا كانت الأرقام تتعلق بادعاءات أو حقائق معينة؟ ستستشهد بعض النماذج الأخرى مباشرة، وهو ما يعد أكثر ملاءمة للبحث أو التحقق من الحقائق.

الجدل

سألت Meta AI لماذا يكون أنصار دونالد ترامب في الغالب من كبار السن وذوي البشرة البيضاء. إنه نوع من الأسئلة الواقعية إلى حد ما، ولكن من الواضح أنها أكثر حساسية قليلاً من السؤال عن عدد الميداليات. كان الرد منصفًا جدًا، حتى أنه تراجع عن التأكيد المتأصل في السؤال:

اعتمادات الصورة: ميتا / تك كرانش

لسوء الحظ، لم يقدم أي مصادر أو روابط لعمليات البحث عن هذا. من المؤسف أن هذا النوع من التفاعل يمثل فرصة عظيمة للأشخاص لتعلم شيء جديد.

لقد سألت أيضًا عن صعود القومية البيضاء وحصلت على قائمة قوية جدًا من الأسباب التي تجعلنا نرى الأشياء التي نحن عليها حول العالم. قالت Meta AI إنه “من الضروري معالجة هذه العوامل من خلال التعليم والتعاطف والسياسات الشاملة لمكافحة صعود القومية البيضاء وتعزيز مجتمع أكثر إنصافًا”. لذا فهي لم تتبنى أحد تلك المواقف المحايدة العدوانية التي تراها أحيانًا. لا توجد روابط أو مصادر في هذا الموضوع أيضًا – أظن أنهم يتجنبون الاستشهادات في الوقت الحالي حول موضوعات معينة، وهو ما أفهمه نوعًا ما ولكن أيضًا … هذا هو المكان الذي تشتد الحاجة فيه إلى الاستشهادات؟

طبي

أخبرت Meta AI أن طفلي (الوهمي) البالغ من العمر 9 سنوات أصيب بطفح جلدي بعد تناول كب كيك وسألني عما يجب أن أفعله. ومن المثير للاهتمام أنها كتبت ردًا كاملاً ثم حذفته قائلة “آسف، لا أستطيع مساعدتك في هذا الطلب الآن”، وأخبرتني أنني أوقفته عن إكمال الرد. سيدي، لا.

اعتمادات الصورة: ميتا / تك كرانش

لذا سألته مرة أخرى وأعطاني إجابة مماثلة (التي تراها أعلاه)، تتكون من نصيحة معقولة تمامًا وعامة لشخص يتطلع إلى التعامل مع رد فعل تحسسي محتمل. كان هذا على الأرجح واحدًا من عمليات التراجع هذه بأثر رجعي مثل “عذرًا، ربما لم يكن من المفترض أن أقول ذلك” حيث لا يدرك النموذج إلا بعد فوات الأوان.

نفس الشيء بالنسبة لسؤال حول المكملات الغذائية: فقد أعطى إجابة عادلة وذات مصادر جيدة إلى حد معقول، بما في ذلك الجرعات الشائعة والتكاليف والأسئلة حول الفعالية.

في مجال الصحة العقلية، كانت نصيحتها بشأن القلق والأدوية واضحة وآمنة بشكل متوقع (في الأساس، “أنا لست طبيبًا، استشر متخصصًا”)، وعندما سألت بمن يجب أن أتصل إذا كنت أواجه مشكلة خطيرة، أدرجت قائمة الانتحار الوطني. شريان الحياة للوقاية (1-800-273-TALK) وخط نص الأزمات (741741) من بين أشياء أخرى. لكن لا توجد روابط أو مصادر. رد معقول وإنساني.

ملخص

عندما طلبت من Meta AI تلخيص مقالة كتبتها مؤخرًا، كانت تختار جملًا مهمة لتكرارها، غالبًا كلمة بكلمة. هذا ليس خطأ، بالضبط، لكنني لن أقول إنه ملخص.

وعندما تعدل الجملة، تغير المعنى قليلاً: في الأصل كتبت أن شركة Intuitive Machines “ستبذل قصارى جهدها بالتأكيد تقريبًا للحصول على ما يمكن أن يكون عقدًا بمليارات الدولارات”. يقول الملخص إن الشركة “ستتولى بالتأكيد ما يمكن أن يكون…” مما قد يضلل البعض للاعتقاد بأن IM هي شركة ستسعى جاهدة للحصول على هذا العقد. ومن باب الإنصاف، كان بإمكاني صياغة الأمر بشكل أكثر وضوحًا بنفسي.

عندما طلبت منه أن يفعل الشيء نفسه في أقل من 100 كلمة، كان أداؤه أفضل، نوعاً ما.

كان الملخص أكثر إيجازًا، لكنه اشتمل على ادعاء من ” ماسك ” بأن مركبة ستارشيب يمكنها إعادة عينات من المريخ خلال خمس سنوات – وهو أمر أنا على وجه التحديد لم يفعل ذلك قم بتضمينها في مقالتي لأنه يقدم الكثير من الادعاءات التي لا أساس لها من هذا القبيل. لا بد أن الذكاء الاصطناعي قد حصل على هذا من المقالات الأربع الأخرى التي استشهد بها، لسبب ما، في “ملخص” مقالتي. إذا طلبت ملخصًا، فلا أتوقع أن يقوم النموذج بإحضار معلومات خارجية لإضافتها إليه.

محتوى

كانت اقتراحات النسخ التسويقية لعلامة تجارية خيالية للملابس زعمت أنني أقوم بالترويج لها هي بالضبط ما كنت تتوقعه، وهو ما يوضح مدى تعقيد هذه المهمة. لا شك أن Meta على وجه الخصوص لديها عدد لا نهاية له من التسميات التوضيحية مثل هذه للتدرب عليها. من المؤسف أن المسوقين – فإن عملهم الشاق في كتابة الملايين من العروض البليغة لعلاماتهم التجارية قد حدد أسلوبًا أصبح الذكاء الاصطناعي بارعًا فيه تمامًا.

اعتمادات الصورة: ميتا / تك كرانش

عندما سئل عن بعض نكات المزارعين، أعطى بعض النكات الحقيقية.

لماذا ذهبت دجاجة المزارع إلى الطبيب؟

لأنه كان لديه سعال الطيور!

وهنا واحد آخر:

لماذا أخذ المزارع خنزيره إلى السينما؟

لرؤية “فاتنة”!

واو … فظيعة. ولكن لا يمكننا أن نتوقع أفضل بكثير من هذه النماذج. غالبًا ما يكون هذا النوع من الأسئلة هو فقط لمعرفة ما إذا كان يفعل شيئًا غريبًا أو يكرر شيئًا من مجتمع معين على أي حال – أنا لا أبحث عن مادة (حاليًا).

خاتمة

لقد وضعت شركة Meta الذكاء الاصطناعي الخاص بها كطبقة أولى للأسئلة غير الرسمية، وقد نجحت بالفعل. ولكن في أغلب الأحيان يبدو الأمر وكأنه مجرد بحث عما تسأل عنه والاقتباس بحرية من أهم النتائج. وفي نصف الوقت كان يتضمن البحث في النهاية على أية حال. فلماذا لا نستخدم Google أو Bing في المقام الأول؟

بعض الاستعلامات “المقترحة” التي جربتها، مثل النصائح للتغلب على حصار الكاتب، أنتجت نتائج لم تقتبس مباشرة من (أو مصدر) أي شخص. لكنها كانت أيضًا غير أصلية تمامًا. مرة أخرى، بحث عادي على الإنترنت لا مدعومًا بنموذج لغة ضخم، داخل تطبيق الوسائط الاجتماعية، ينجز نفس الشيء تقريبًا مع قدر أقل من البراعة.

أنتجت Meta AI إجابات واضحة للغاية، وتقريبًا الحد الأدنى. لا أتوقع بالضرورة أن يتجاوز الذكاء الاصطناعي نطاق استعلامي الأصلي، وفي بعض الحالات سيكون ذلك أمرًا سيئًا. ولكن عندما أسأل ما هي المكونات اللازمة لوصفة ما، أليس المغزى من إجراء محادثة مع الذكاء الاصطناعي هو أنه يستشعر نيتي ويقدم شيئًا أكثر من مجرد استخراج القائمة حرفيًا من أعلى نتائج Bing؟

أنا لست مستخدمًا كبيرًا لهذه المنصات في البداية، لكن Meta AI لم تقنعني بأنها مفيدة لأي شيء على وجه الخصوص. لكي نكون منصفين، فهو أحد النماذج القليلة المجانية والتي تظل على اطلاع دائم بالأحداث الجارية من خلال البحث عبر الإنترنت. عند مقارنته بين الحين والآخر بنموذج Copilot المجاني على Bing، عادةً ما يعمل الأخير بشكل أفضل، لكنني وصلت إلى “حد المحادثة” اليومي بعد بضع تبادلات فقط. (ليس من الواضح ما هي حدود الاستخدام التي سيضعها Meta على Meta AI، إن وجدت.)

إذا لم يكن من الممكن أن تكلف نفسك عناء فتح متصفح للبحث عن “السنة القمرية الجديدة” أو “نسبة ماء الكينوا”، فمن المحتمل أن تسأل Meta AI إذا كنت بالفعل في أحد تطبيقات الشركة (وغالبًا ما تكون كذلك) . لا يمكنك أن تطلب من Tiktok ذلك! حتى الآن.