URLs restricted by robots.txt ليست مشكلة

URLs restricted by robots।txt ليست مشكلة

السلام عليكم و رحمة الله و بركاته

قبل قليل دخلت للكوكل ويب ماستر تول لاجد عبارة URLs restricted by robots.txt و امامها رقم لمجموعة من الروابط التي يقول كوكل انه واجه مشكلة معها اثناء زحفه.
This page lists URLs from your site that Googlebot had trouble crawling. Googlebot found these pages either in your Sitemap or by following links from other pages during a discovery crawl. Choose a category of errors to view:

لكن الحمد لله وجدت توضيح من كوكل نفسه يشير الى انها ليست مشكلة و هذا المذكور في التوضيح.
و احببت مشاركتكم بالنتيجة في حالة واجهها احد في المستقبل।

What are URLs restricted by robots.txt errors?


Google was unable to crawl the URL due to a robots.txt restriction. This can happen for a number of reasons. For instance, your robots.txt file might prohibit the Googlebot entirely; it might prohibit access to the directory in which this URL is located; or it might prohibit access to the URL specifically. Often, this is not an error. You may have specifically set up a robots.txt file to prevent us from crawling this URL. If that is the case, there's no need to fix this; we will continue to respect robots.txt for this file.
If a URL redirects to a URL that is blocked by a robots.txt file, the first URL will be reported as being blocked by robots.txt (even if the URL is listed as Allowed in the robots.txt analysis tool).


من الرابط التالي لطفا
http://www.google.com/support/webmasters/bin/answer.py?hl=en&answer=35235

و الترجمة تعني ان ال Googlebot واجهت منع من ارشفة هذه الملفات رغم امكانية ارشفتها, و ان التنبيه هذا ليس بمشكلة يجب اصلاحها ان كان المنع من قبلنا, و ان كوكل ستستمر باحترام المنع و لن تؤرشف الصفحات الممنوعة.


متمنيا ان تستفادوا من الموضوع.



مع
اجمل تحية