بحث Google يتحدث بصراحة عن صعوبات الزحف إلى الإنترنت بالكامل
الغرض الرئيسي من محرك بحث Google هو جعله حتى يتمكن الناس من العثور على أي شيء ترغب فيه قلوبهم على الإنترنت ، ويقوم بذلك عن طريق الزحف عبر كل بوصة من المتدرب يمكنه الوصول إليه وإدراج جميع عناوين URL التي تريدها. يجد. تحدث تعليق حديث على Reddit عن الإحباط الذي يمكن أن يحدث عند استخدام أدوات تحسين محركات البحث (SEO) بسبب حقيقة أن هذا هو الشيء الذي قد ينتهي به الأمر بالفشل في العثور على جميع الروابط ذات الصلة لموقع معين.
مع كل هذا وقد قيل الآن بعيدًا عن الطريق ، من المهم ملاحظة أن John Mueller ، أحد المدافعين عن البحث في Google ، تحدث مؤخرًا عن كيف أنه من المستحيل العثور على كل عنوان URL فردي على الويب. ببساطة ، الويب هو مكان كبير جدًا لجعل هذا ممكنًا ، وذكر مولر أيضًا أن هناك عددًا لا حصر له من عناوين URL الفريدة عبر الإنترنت مع مراعاة جميع الأشياء وأخذها في الاعتبار.
هناك أيضًا قيود مادية تمنع الزحف إلى كل عنوان URL. نظرًا لأنه من المحتمل أن يكون عدد عناوين URL غير محدود ، فلا توجد قاعدة بيانات في العالم يمكنها تخزين كل منها. تحتاج برامج الزحف أيضًا إلى الكثير من الموارد إذا أرادوا العثور على مثل هذه الكمية الكبيرة من عناوين URL ، وقد يكون هذا مكلفًا أيضًا لأصحاب المواقع لأنهم سيضطرون إلى البدء في إنفاق الكثير على أشياء مثل تحسين محركات البحث.
جزء كبير من الإنترنت مليء أيضًا بالمعلومات غير المهمة وغير المفيدة التي لن يهتم بها أي شخص. قد تضيع برامج زحف الويب الكثير من الموارد في محاولة الحصول على عناوين URL هذه التي لا يريدها أحد بشكل خاص في المقام الأول ، لذلك غالبًا ما يصدرون أحكامًا ويحاولون التركيز على الصفحات التي قد تكون ذات صلة وثيقة بدرجة عالية. هذه القيود هي التي تجعل من المستحيل الزحف إلى الإنترنت بالكامل ، رغم أن ذلك قد يكون مفيدًا للبعض.
Vector created by upklyak freepik