مرحبًا يا من هناك.
أريد أن أضيف ملاحظة سريعة حول ما رأيناه للتو مع Airbnb وكيف تعمل مواقع البحث مثل Bing و Baidu
و Google بالفعل.
ربما لاحظت الآن أن وكيل المستخدم الذي اشترته Google هو ، حسنًا ، ما تستخدمه Google لفهرسة مواقع الويب.
ماذا يعني ذلك؟
حسنًا ، Google بالطريقة التي يعمل بها ، تذكر ، هي محرك بحث.
ما يفعله هو محاولة اكتشاف جميع مواقع الويب على الويب وفهرستها.
وهذا يعني ، إنشاء قاعدة بيانات أساسية لجميع صفحات الويب هذه بحيث عندما أتناول وصفات الحساء من Google ، تعطيني Google
موقعًا إلكترونيًا يحتوي على وصفات الحساء.
حاليا.
كيف تعرف المواقع التي تحتوي على وصفات حساء؟
حسنًا ، إنه يستخدم Googlebot وهذه هي الطريقة التي بدأ بها Google.
ما فعلوه هو أن لديهم برنامج زاحف يقوم بالزحف إلى مواقع الويب وقراءة مواقع الويب ، نوعًا ما يشبهنا على
وشك القيام بكشط الويب لفهم ما يدور حوله موقع الويب.
إذا ذكر موقع الويب كلمة وصفات حساء أو كان يحتوي على نص مختلف متعلق بوصفات الحساء ، حسنًا ، سيقول Googlebot
أن هذا الموقع يتحدث عن وصفات الحساء.
لذلك عندما يبحث أندريه عن وصفات الحساء ، أعلم أن هذه المواقع هي التي نريد أن نعرضها عليهم.
وهذا ما تفعله كل من Google و Bing و Baidu.
لديهم روبوتات خاصة بهم وهم يزحفون باستمرار إلى مواقع الويب لمعرفة موقع الويب الأكثر صلة الذي يجب تقديمه
للمستخدم.
لذا فإن Airbnb هنا تقول ، مرحبًا Googlebot ، عندما تزحف إلى موقع الويب الخاص بي ، لا تزحف إلى أي من هذه الأشياء
لأنني لا أريدك أن تفعل ذلك.
لكن أي شيء آخر غير موجود هنا ، يمكنك الزحف إليه.
الآن ، إذا نظرت هنا بالفعل ، فهذا ليس كل شيء على Airbnb لأن Airbnb تريد من Google الزحف إلى موقع
الويب ، أليس كذلك؟
إذا كنت أبحث عن منازل لقضاء العطلات في كوستاريكا ، فإن Airbnb تهتم بأن تنشر Google رابط Airbnb في الجزء
العلوي من البحث.
لذا فإن ما لا يسمحون به هنا هو في الغالب شيء خاص بالمستخدم لا ينبغي لـ Google الوصول
إليه ، مثل الحجوزات أو المدفوعات.
ولكن هناك الكثير من نقاط النهاية الأخرى التي يُسمح بالفعل لبرنامج Googlebot بالبحث فيها.
على سبيل المثال ، يُسمح لـ Googlebot على الأرجح بإلقاء نظرة على جميع المنازل المتاحة في كوستاريكا
وترتيبها فعليًا بحيث عندما أكتب في كوستاريكا إيجار منزل ، حسنًا ، سيقول Googlebot
، مرحبًا ، لدى Airbnb رابط إلى كوستاريكا منازل ، سنقدم ذلك لهذا المستخدم.
لذلك أي شيء غير موجود في هذه القائمة ، حسنًا ، يُسمح لنا باستخدامه.
أحد الأشياء الصعبة هو أننا نرى أن هذا يسمح هنا.
ما يسمح به هذا يعني أنه يقول ، مهلاً ، التقويم هنا هو في الواقع نقطة نهاية غير مسموح بها.
ومع ذلك نسمح بداخل التقويم.
هذا مجلد يمكنك الوصول إليه فقط ، ولكن إذا لم يتم ذكره هنا.
لذلك إذا لم يتم ذكر أي شيء هنا في هذه القائمة ، فهذا مسموح به.
على سبيل المثال ، Airbnb ، نقطة مائلة مسموح بها لأن ذلك لم يكن مدرجًا في القائمة.
إذا ربما قمت بالنقر فوق الخبرات ، فهذا مسموح به لأن تجارب القطع المائلة هذه لم تكن مدرجة في القائمة.
لذا فإن موقع الويب يحتوي إما على روبوتات. ملف robots.txt لأنه ربما لا يريد تمرير أشياء معينة
أو إذا لم يكن يحتوي على ملف نصي قوي أو يتركه فارغًا ، فهذا يعني ، مهلاً ، لا أهتم بـ Google.
يمكنك ترتيب موقع الويب الخاص بي ، يمكنك الزحف إلى موقع الويب الخاص بي.
هذا جيد أيضًا.
ولهذا السبب كان لدى Airbnb معلومات مختلفة هنا.
كان لدينا خصيصًا لـ Googlebot ، لـ Bing bot ، لجميع محركات البحث هذه ، ولكن أيضًا لأي
شخص آخر ، ربما المبرمجين مثلنا الذين يريدون كشط موقع الويب.
ها أنت ذا.
نتعلم سرًا كيفية عمل Google ومحركات البحث الأخرى.
رائع ، أليس كذلك؟
حسنا.
دعنا نعود إلى الموضوع المطروح.