پ) موقعيت ايندكس صفحه ها Error
اين صفحه هاي همانگونه كه از نامش پيداست، با رباتهاي خزنده گوگل به ايراد خوردهاند و گوگل آنهارا ايندكس نكرده ميباشد. اين رخداد بخاطر عارضه ها گوناگوني چهره مي دهد كه آنها را بازنگري خواهيم كرد:
سئو سايت
(Server error (5xx: چهره دادن خطاهاي خصوصي 500 كه كليه از سمت سرور ميباشند. مثل هنگامي كه سرور وب سايت شما انقطاع شدهاست.Redirect error: فيس دادن يك خطاي ريدايركت. مثل وقتي كه ريدايركتهاي پياپي انجام ميشود و خزنده گوگل سردرگم مي گردد. يا اين كه هنگامي كه ريدايركت به ورقهاي صورت بپذيرد كه url طولاني يا اين كه خالي داراست!Submitted URL blocked by robots.txt: شما در نقشه وبسايت گفتهايد اين صفحه ها بايستي بوسيله گوگل ايندكس شوند ولي خودتان آن ها را در فولدر robots.txt براي خزندههاي گوگل بلاك كردهايد!Submitted URL marked noindex: اين ارور هم شبيه آيتم بالايي ميباشد. زماني شما با قرار دادن يك كاغذ در نقشه وبسايتتان از گوگل ميخواهيد آن را ايندكس نمايد، ديگر نبايد به وسيله تگ noindex آن برگه را بلاك فرماييد.خطاي 404: اين نادرست وقتي صورت ميدهد كه سرور نميتواند مرجع درخواستي را پيدا نمايد و براي ايندكس شدن در گوگل ارسال نمايد.Soft 404: زماني كه برگهاي وجود نداشته باشد البته سرور به نادرست كاغذ ديگري (با محتواي معدود و غير قابل به كارگيري) را اكران دهد، در كنسول جستجوي گوگل خطاي 404 soft فيس ميدهد.درخواست غير مجاز 401: شما از رباتهاي خزنده گوگل منظورايد كاغذاي را ايندكس نمايند كه گوگل بخاطر نياز به لاگين يا اين كه هر ادله ديگري به آن كاغذ دسترسي ندارد.Submitted URL has crawl issue: شما درخواست ايندكس ورقهاي را داشتهايد كه گوگل به علت عارضه ها نامشخصي به آن دسترسي ندارد. براي حل اينطور مشكلات ميبايست از ابزار URL Inspection tool گوگل وبمستر به كارگيري فرمائيد. درصورتي كه شيوه فعاليت با اين ابزار را بلد نيستيد، نياز وجود ندارد نگران باشيد به دليل آنكه درپي همين نوشتهيعلمي كاركرد آن را فراگيري خواهيم رويت كرد.چهگونه خطاهاي Crawl Errors گوگل وبمستر تولز را رفع كنيم؟بدون شك بخوانيد: چهطور خطاهاي Crawl Errors گوگل وبمستر تولز را رفع كنيم؟
ت) حالت ايندكس صفحه ها Valid whith warnings
صفحاتي كه با حالت Warning يا اين كه اخطار مواجه ميگردند، گوگل آن ها را ايندكس نموده است. منتها اين صفحه ها دارنده چند اخطارها مي باشند كه شما مي بايست آن ها را باز نگري نماييد.
اين شرايط برخلاف شرايطهاي قبل كه عارضه ها مختلفي داشتند، صرفا به يك علت صورت ميدهد. و آن Indexed, though blocked by robots.txt هست. بدين معنا كه با وجود اينكه شما در پوشه robots.txt گفته بوديد، اين صفحه هاي نبايد ايندكس شوند، ولي گوگل آنانرا ايندكس نموده است!
خب اينجا اين سوال پيش ميايد كه چرا بايستي رخداد چهره دهد؟ گوگل دراين مورد ميگويد ما مدام به مرادهاي شما در پوشه robots.txt احترام ميگذاريم اما گهگاه ممكن مي باشد بخاطر وجود كدهاي غلط متوجه نشويم كه شما از ما چه درخواستي كردهايد.
شما درين مواقع مي توانيد از ابزار robots.txt tester گوگل وبمستر استعمال نمائيد، اشتباهات و اشتباهات فولدر robots.txt را بيابيد و آن ها حل فرمائيد. براي اينكه شناخت بيشتري با robots.txt به دست بياوريد و روش استعمال از كدهاي درست دراين فولدر را حافظه بگيريد، مي توانيد نوشتهي علمياي كه قبلن در وبسايت نوين با تيتر پوشه Robots.txt چه چيزي است و چه طور مياقتدار آن را توليد؟ منتشر گرديده بود را بخوانيد.