تسجيل الدخول تلقائيا Google ويب الزاحف

Question

وأود أن تكتشف تلقائيا جوجل وغيرها من الزواحف وسجل لهم في موقع الويب الخاص بي ASP.NET. وقد وجدت أي شخص طريقة يمكن الاعتماد عليها للقيام بذلك؟ الجزء الدخول أمر سهل، ولكن لكشف موثوق بها هي القضية الحقيقية.

والتحيات.

Answer 1

وانظروا إلى وكيل المستخدم. وينبغي أن يكون غوغلبوت. وهناك طريقة أكثر موثوقية هي القيام البحث العكسي للadddress IP. وسوف اقول لكم ما اذا كان هو بوت جوجل أم لا. فما استقاموا لكم فاستقيموا استخدام كلتا الطريقتين. ولكن ملاحظة: سوف يتباطأ موقعك لأنك سوف تفعل بحث عكس لكل زائر

http://www.google.com /support/webmasters/bin/answer.py؟hl=en&answer=80553

Answer 2

وهذا يبدو وكأنه فكرة سيئة حقا لعدة أسباب، وليس أقلها هو أن جوجل سوف تخزين نسخ من صفحات موقعك، ذلك أنه حتى لو لم يكن المصادقة على موقع الويب الخاص بك، وسوف تكون قادرا على رؤية محتوى صفحات الويب وغيرها من الوثائق خدم من وراء جزء محمي من موقع الويب الخاص بك.

وبقدر ما كشف عن برامج زحف الويب يذهب، وأود أن لا أثق بأي عامل المستخدم. وربما كنت قد تجميع قائمة من عناوين IP الزواحف تنشأ من، ولكن بمجرد جوجل تضيف عنوان IP آخر، سوف تكون ينكر أن الزاحف من الدخول.

ويقوم بعمل بحث DNS عكسي على كل طلب للتأكد من اختصاص الزائر googlebot.com كما اقترح على الموقع التحقق من برنامج Googlebot يمكن أن يكون أداء ضربة كبيرة إذا كان موقعك مشغول.

Answer 3

وأنت لا تحتاج إلى القيام البحث العكسي على كل طلب. تخزين نتائج البحث العكسي. أنا فقط ذهبت من خلال سجلات بلدي، وأنا أرى المسافات الطويلة من برنامج Googlebot القادمة من نفس IP. غير موثوق به أن السلوك ولكن في أي التخزين المؤقت الحدث يجب أن تكون استراتيجية سليمة.

Answer 4

ويمكنك بسهولة توجيه جوجل لمؤشر، ولكن ليس تخزين صفحات موقعك باستخدام علامة تعريف منع الأرشفة. وبهذه الطريقة يمكنك الحصول على فوائد من كونها قابلة للبحث من دون الكشف عن المحتوى الخاص بك.

وانظر هذه الصفحة في جوجل مشرفي المواقع لمزيد من المعلومات

http://www.google.com /support/webmasters/bin/answer.py؟hl=en&answer=156412