مشکل خطای دسترسی به robots.txt
سلام وقت بخیر
یه مشکلی برای سایت ما پیش اومده ( احتمالا بعد از انتقال به هاستینگ جدید ).
گوگل فایل robots.txt رو در حالتی که دامنه با www. هست رو میشناسه و مشکلی نداره اما بدون www. همون فایل رو از robot tester چک می کنیم ، میگه چنین فایلی نیست و خطای 404 میده
چون سایت بدون www بوده ، الان کلی ارور گرفتیم ،
روی مروگر در هر دو حالت فایل روبات بالا میاد و مشکلی نداره ، مشکل سر دسترسی ربات های گوگل به این فایل هست.
دوستانی که در این زمینه اطلاعاتی دارن ، ممنون میشم راهنمایی کنید.
پاسخ : مشکل خطای دسترسی به robots.txt
نقل قول:
نوشته اصلی توسط
digixtal
سلام وقت بخیر
یه مشکلی برای سایت ما پیش اومده ( احتمالا بعد از انتقال به هاستینگ جدید ).
گوگل فایل robots.txt رو در حالتی که دامنه با www. هست رو میشناسه و مشکلی نداره اما بدون www. همون فایل رو از robot tester چک می کنیم ، میگه چنین فایلی نیست و خطای 404 میده
چون سایت بدون www بوده ، الان کلی ارور گرفتیم ،
روی مروگر در هر دو حالت فایل روبات بالا میاد و مشکلی نداره ، مشکل سر دسترسی ربات های گوگل به این فایل هست.
دوستانی که در این زمینه اطلاعاتی دارن ، ممنون میشم راهنمایی کنید.
اگر از ssl استفاده می کنید آن را غیرفعال و تست کنید .
پاسخ : مشکل خطای دسترسی به robots.txt
نقل قول:
نوشته اصلی توسط
gharibion
اگر از ssl استفاده می کنید آن را غیرفعال و تست کنید .
نه اس اس الی فعال نداریم .
پاسخ : مشکل خطای دسترسی به robots.txt
ادرس سایت تون رو ذکر کنید بررسی کنیم راهنمایی بیشتر بشه
پاسخ : مشکل خطای دسترسی به robots.txt
اعلان های مربوط به فایل robots.txt چندان اهمیت ندارد حالا که چه اخطار باشند چه خطا. این را قبل از هر چیز گفتم که چندان نگران مسئله نباشید.
اما در خصوص رفع مشکل، آیا شما خودتان بدون www به فایل مورد نظر دسترسی دارید؟
آیا www روی وب سایت شما یک c name ساده است یا اینکه خودتان ساب دامنه و زون مستقل براش ایجاد کردید؟
آیا هیچ رول جهت فورس www در فایل تنظیمات وب سرور (مثلا اگر آپاچی هستید htaccess) دارید؟
پاسخ : مشکل خطای دسترسی به robots.txt
نقل قول:
نوشته اصلی توسط
CodeBox
اعلان های مربوط به فایل robots.txt چندان اهمیت ندارد حالا که چه اخطار باشند چه خطا. این را قبل از هر چیز گفتم که چندان نگران مسئله نباشید.
اما در خصوص رفع مشکل، آیا شما خودتان بدون www به فایل مورد نظر دسترسی دارید؟
آیا www روی وب سایت شما یک c name ساده است یا اینکه خودتان ساب دامنه و زون مستقل براش ایجاد کردید؟
آیا هیچ رول جهت فورس www در فایل تنظیمات وب سرور (مثلا اگر آپاچی هستید htaccess) دارید؟
این مورد باعث افت شدید در گوگل شده بود ، فکر می کنم مشکل از سمت هاستینگ بود که با تغییر هاستت حل شد
ممنون از شما
پاسخ : مشکل خطای دسترسی به robots.txt
فایل ربات بر خلاف گفته برخی دوستان ، جزو یکی از مهمترین فایل هاست ...
خداروشکر ، به ظر که مشکلتون برطرف شده .