ننقل لكم في مدونة مؤسسة إشراق العالم مقالاً بعنوان “قامت Google بفهرسة محادثات Claude لأن Anthropic لم تمنع محادثاتك الخاصة من محركات البحث
“ يفيدك في تنفيذ تجربتك في تحسين SEO موقعك ومتجرك الإلكتروني.
للأسف، تسمع بين الحين والآخر عن محتوى يتم فهرسته وعرضه على Google ومحركات البحث الأخرى. في كثير من الأحيان لا تكون المشكلة بالضرورة مع محرك البحث ولكن مع الموقع الذي يستضيف تلك المعلومات ويحتفظ بها. غالبًا ما لا تقوم هذه المواقع بتعيين آليات الحظر المناسبة لإبلاغ Google ومحركات البحث الأخرى بأنه لا ينبغي فهرسة المحتوى وعرضه ضمن نتائج البحث.
وهذا ما حدث مؤخرًا مع ظهور محادثات كلود من Anthropic في Google وBing ومحركات البحث الأخرى.
مزيد من التفاصيل. أوضحت قصة Wired التي تحمل اسم Private Claude Chats Exposition in Google وBing Search Results كيف تم العثور على الدردشات الخاصة لكلود على الويب على Google وBing ومحركات البحث الأخرى. تضمنت الدردشات مناقشات تتعلق بالسياسة والصحة والمزيد، وكلها محادثات حساسة جدًا. وأوضح وايرد أن “كلود يسمح للمستخدمين بمشاركة “لقطات” من الدردشات مع أشخاص آخرين عن طريق إنشاء عنوان URL عام لسلسلة محادثات روبوتية محددة”.
وأضاف Wired: “ترجع أسباب فهرسة بعض عناوين URL هذه بواسطة محركات البحث الرئيسية إلى الوظائف الأساسية لمواقع الويب، ومحركات البحث، والتصادم بين الاثنين عندما يدخل الذكاء الاصطناعي التوليدي في هذا المزيج”.
تكمن المشكلة الأساسية في أنه إذا قمت بحظر كل من استخدام توجيه robots.txt واستخدام noindex في تلك الصفحة، فلن تتمكن محركات البحث مثل Google وBing من رؤية علامة noindex نظرًا لأن برامج الزحف لن تتمكن من الوصول إلى الصفحة باستخدام التوجيه.
تنفيذ أمر الموقع ل [site:claude.ai/share] سيعيد مئات الدردشات من كلود خلال عطلة نهاية الأسبوع، ولكن تمت إزالة هذه النتائج الآن.
قال جلين غابي على X إنه يتمنى لو تحدث هؤلاء الصحفيون إلى أحد كبار المسئولين الاقتصاديين قبل تغطية القصة. “إنها مليئة بالمعلومات السيئة. إذا قمت بحظر الصفحة عبر ملف robots.txt وnoindex، فلن يتمكن Google وBing من رؤية علامة noindex لأنهما لا يستطيعان الزحف إلى الصفحة ورؤية العلامة في HTML،” أوضح بشكل صحيح.
هذه ليست معلومات جديدة. تحتوي وثائق Google الخاصة على إشعار ضخم في أعلى الصفحة مكتوب عليه باللون الغامق والأحمر:
“هام: لكي تكون قاعدة noindex فعالة، يجب ألا يتم حظر الصفحة أو المورد بواسطة ملف robots.txt، ويجب أن يكون بإمكان الزاحف الوصول إليها بطريقة أخرى. إذا تم حظر الصفحة بواسطة ملف robots.txt أو إذا لم يتمكن الزاحف من الوصول إلى الصفحة، فلن يرى الزاحف قاعدة noindex مطلقًا، وسيظل من الممكن أن تظهر الصفحة في نتائج البحث، على سبيل المثال، إذا كانت الصفحات الأخرى مرتبطة بها.”
ماذا قال جوجل. يفهم نيد أدريانس، المتحدث باسم Google من جانب فريق بحث Google، كيفية عمل ذلك. وقال لـ Wired: “لا يتحكم Google ولا أي محرك بحث آخر في الصفحات التي يتم نشرها للعامة على الويب، وتم فهرسة هذه الصفحات عبر العديد من محركات البحث”. وأضاف: “نحن نمنح أصحاب المواقع ضوابط واضحة ليقرروا ما إذا كان من الممكن الزحف إلى الصفحات أو فهرستها، ونحترم دائمًا تلك التوجيهات”.
لسبب ما، لم يقدم Microsoft Bing وAnthropic أي تعليق إلى Wired حول هذه المشكلة.
لماذا نهتم. يوضح هذا أهمية استشارة أحد مُحسنات محركات البحث (SEO) الذي يفهم كيفية التأكد من فهرسة الصفحات الصحيحة وظهورها في البحث وربما الأهم من ذلك أن الصفحات التي لا تريد ظهورها في بحث Google أو Bing غير قابلة للاكتشاف ولا تظهر في نتائج البحث.
إن التحكم في رؤية المحتوى الخاص بك هو SEO 101، وللأسف، نرى هذه المشكلة تتكرر مرارًا وتكرارًا مع إتاحة المعلومات الحساسة وإتاحتها على الويب.
كن العلامة التجارية توصي منظمة العفو الدولية.
تعرف على مكان ظهور علامتك التجارية في بحث الذكاء الاصطناعي، وأين يفوز المنافسون، وما يلزم لتصبح الإجابة التي يوصي بها الذكاء الاصطناعي.
شاهد رؤية الذكاء الاصطناعي الخاصة بك
Search Engine Land مملوكة لشركة Semrush. نحن لا نزال ملتزمين بتوفير تغطية عالية الجودة لموضوعات التسويق. ما لم يُذكر خلاف ذلك، تمت كتابة محتوى هذه الصفحة بواسطة موظف أو مقاول مدفوع الأجر لشركة Semrush Inc.
🚀 انطلق الآن لتحسين SEO موقعك ومتجرك الإلكتروني
إذا كنت ترغب في رفع ترتيب موقعك في نتائج Google، وزيادة الزيارات المجانية، وبناء باك لينك قوي عبر شبكة مواقع موثوقة، فاطلع على باقات تحسين محركات البحث من إشراق.
اكتشاف المزيد من مؤسسة اشراق العالم لتقنية المعلومات-خدمات مواقع ومتاجر الإنترنت
اشترك للحصول على أحدث التدوينات المرسلة إلى بريدك الإلكتروني.