ربات های خزنده گوگل برای خزش (crawling) در سرتاسر دنیای اینترنت و URLهای متفاوت مورد به کار گیری قرار می گیرند. در خصوصی مقالهها آموزش سئو، غرض ما تعریف و تمجید و تشریح همت خزنده گوگل، شیوهی ایندکس صفحات وبسایت در گوگل و در غایت کیفیت نشانه دادن نتایج به مخاطبان است. در آخر نیز به کلیه سوال های و کامنتهای شما در زمینهی خزش یا این که کراول خزنده گوگل، ایندکس صفحه ها تارنما و جايگاهی وبسایت بوسیله گوگل جواب خوا هیم داد. برای شناخت با خزنده گوگل و التفات آن تا انتهای این نوشته ی علمی با آکادمی گرشا یاروهمدم باشید.
نکته: در برخی از مقاله ها، بجای کلمه و واژه خزش از کراول (یا این که کرول) و برای واژه خزنده، از کراولر (یا این که کرولر) به کارگیری می نمایند.
موتور جستجوی گوگل چهطور فعالیت مینماید؟
با فرض بر اینکه با گوگل و دیگر موتورهای کاوش شناخت دارید یک راست به سراغ نحوهی کار گوگل و اثر خزنده گوگل بر جستجوهای آن میرویم. مجموعاًَ گوگل برای نشانه دادن یک شیت در نتایج خویش برای یوزرها، ۳ مرحلهی تحت را اجرا می دهد:
خزش در تارنماها و URLهای متفاوت به وسیله خزنده گوگل
ایندکس (Index) صفحه ها خزش گردیده
مرتبهبندی و اکران محتوا به یوزرها مطابق الگوریتمهای توسعه یافته
طریقی خزش خزنده گوگل
روش عمل خزش ربات خزنده گوگل به این شکل است کهاین ربات یا این که نرم افزار به هر لینکی که بر راز راهش قرار میگیرد وارد می شود و از یک محتوا یا این که URL به محتوا و URL دیگر میرود. بطور کلی میتوان اظهار کرد وظیفهی خزنده گوگل پژوهش و بازبینی محتواهای URLهای متفاوت می باشد. از جمله فرض نمایید شما یک نوشتهی علمی در دل تارنما خویش دارید که داخل آن لینکسازی داخلی یا این که حتی فرنگی انجام یافته است. خزنده گوگل با ورود به محتوای شما، از اولیهِ محتوا تا انتهای محتوای شمارا بازبینی مینماید و کلیات و جزئیات آن را بر پایه ی الگوریتمهای منحصر گوگل رندر (Render) و برای به عبارتی URL ذخیره مینماید. در این در بین در زمان بازبینی محتوای به عبارتی شیت، در شکل واکنش با یک یا این که یک سری لینک و پیوند در دل محتوا، خزنده از روش به عبارتی لینکها به صفحه های مقصود میرود و در URLهای تازه نیز محتوای صفحه های را بازبینی و این توشه برای URL هدف ذخیره مینماید. این چرخه همیشه و در عمقهای متفاوت تکرار میشود تا خزنده گوگل با محتواهای جدید وب سایتهای گوناگون آشنا شود و موجب ایندکس شدن صفحات و محتواهای نو خواهد شد. به نظر می رسد که خزنده گوگل فضولترین ربات فقید باشد و قصد دارد سر از فعالیت کل تارنماها و URLها در بیاورد. البته خیر، خزنده گوگل کنجکاوی پیش فعالانه و هدفمند داراست.
طریق ایندکس صفحات وبسایت در گوگل
پس از کنجکاوی هدفمند رباتهای خزنده گوگل، مرحلهی ایندکس وارد فرایند کاری گوگل می گردد. خزندهها پس از جمعآوری کلیه اطلاعات دردسترس در یک URL با ارسال داده ها رندر گردیده به گوگل، URL جدید با محتوای نو را وارد مقر دادههای تعالی گوگل مینماید. بهاین مرحله که موجب تصویب و ذخیره صفحه ها وبسایت در گوگل می شود، ایندکس میگویند. گوگل بعد از ایندکس با دقت به الگوریتمهایش، مبادرت به طبقهبندی و گروهبندی URLها بر اساس واحد سنجش و فاکتورهای متفاوت مینماید. یکیاز این طبقهبندیها بر طبق محتواهای مرتبط است. شاید این گفته جالبخیس و قابل فهم و شعورخیس باشد که با ایندکس شدن یک صفحه، آن کاغذ تحت عنوان یک کتاب در کتابخانهی بلندمرتبه، بزرگ و بی نقطه نهایی گوگل قرار میگیرد. کتابی که در کاوشهای یوزرها و با تمرکز به نیاز آن ها، بوسیله گوگل معرفی میگردد. البته گوگل چرا بین صفحات متعدد تمایز قائل میشود؟ چرا به یک محتوا مانند فرزند فروغ و روشنایی چشمی و ته تغاری نگاه مینماید و به محتوای دیگر تحت عنوان فرزند اولیه و گران قدر؟ اینجاست که باید به مرحلهی سوم گوگل وارد شویم. مرحلهی که علامت می دهد گوگل حقیقتا در میان فرزندانش (صفحات گوناگون وبسایتهای مختلف) تفاوتی قائل نمیشود.
کیفیت سکوبندی صفحه ها تارنما در حاصل گوگل
جواب این عنوان صرفا یک چیز است: الگوریتمهای توسعه یافته و بغرنج که بوسیله هوش مصنوعی ( اما شاید هم طبیعی) گوگل ایفا می شود.سئو در مشهد پس از مرحله کنجکاوی خزنده گوگل و ایندکس صفحه ها در مقر دادهی گوگل، گوگل با آزمایش، احتساب توسعه یافته، مقایسه ظریف و اعمال چندین فاکتور مفید برای شناسایی مرتبطترین، مجاورتترین و شایسته ترین صفحات برای جواب مخاطبان مبادرت مینماید. هرچه یک برگه و محتوای آن برای جواب یک کاوش یا این که کوئری (Query) بی نقصخیس و ظریفخیس باشد، رتبهی بهتری نزد گوگل خواهد گرفت. ولی گوگل درین بین تنها به تعیین اولیهی هوش تصنعی و مصنوعی و خزندههای خویش اکتفا نمینماید. اینجاست که معین میگردد گوگل در بین صفحه ها مختلف تفاوت قائل نمیشود. گوگل با آزمایش صفحه های جدید و نو سایتهای گوناگون به ویژه سایتهای نوپای دنیای اینترنت، اخلاق مخاطبان و یوزرها را نسبت به آن ها میسنجد. دراین بین هر شیت و محتوایی که رضایت خیال بیشتر مخاطبان را جلب نماید، نزد گوگل منزلت رفیعخیس و رتبه بالاتری را می گیرد. ولی هنوز نکات اساسی دیگری در ارتباط خزش خزنده گوگل، ایندکس و سکوبندی صفحات سایت وجود داراست. نکاتی که هر سئوکار بایستی داده ها کافی در باب آنها داشته باشد. در سوژه SERP گوگل و سکودهی گوگل سوال های بسیاری وجود دارد که توضیح آن فارغ مقولهی این نوشتهعلمی میباشد. اما هر سوالی که شما در کامنتها در این زمینه بپرسید، در سریعترین زمان به آن جواب داده گردد
تحقیق صفحه ها ایندکس گردیده در گوگل
اولی پرسش و شاید بدون شوخیترین پرسش این هست که آیا صفحه ها سایت شما در گوگل ایندکس گردیدهاند یا این که نه؟
طبق تصویر گوگل تعداد URLهای ایندکس گردیده مرتبط با دامنهی شمارا اکران می دهد. اما در شرایطی که جدید محتوایی ایجاد کرد و منتشر کردهاید توقع نداشته باشید رایا پارس که سریعا صفحهی تازه شما در گوگل ایندکس خواهد شد. به ویژه درصورتیکه محتوانویسی سایت نو احداث را آغاز کرده باشید. برای تشخیص آنکه خزنده گوگل در صفحات وبسایت خزیده و آنهارا ایندکس کرده یا این که خیر، میتوان از گوگل سرچ کنسول نیز بهره مند شد.
چرا صفحه های سایت در جستجوهای گوگل اکران داده نمی شود؟
یکی ازاز دیگر از مهمترین سوال های در زمینه ی خزنده گوگل و ایندکس صفحه ها وبسایت، چرایی عدم اکران صفحه های قدیمی و حتی تازه در نتایج گوگل میباشد. what is seo ادله این امر ممکن میباشد یکیاز مورد ها پایین باشد:
در صورتیکه وب سایت شما جدید شروع به فعالیت نموده است، احتمالا هنوز توسط خزندهها شناسایی نشده است یا این که در باکس شنی (Sand Box) گوگل آیتم تست قرار گرفته میباشد.
محتوای شما نو منتشر گردیده و هنوز ایندکس نشده میباشد. در مواقعی ممکن میباشد به جهت محدودیت بودجه خزش، مقالهها وب سایت شما دیرتر ایندکس شوند.
هیچ لینکی به شیت متبوع داده نشده و نشانی URL آن نیز در سایت مپ نیست.(ورقه یتیم یا این که Orphan Page)
روش خزش بر روی رباتهای خزنده گوگل بسته میباشد. (از روش متا تگ robots)
وجود هیبتهای لاگین و عضویت برای مشاهده محتوای وبسایت
تنظیم نبودن وردپرس برای خواندن مطالب وبسایت بوسیله خزنده گوگل
خزش به وسیله خزندهها در تارنما شما به دلایل متعدد دشوار و نا ممکن میباشد. (مثلا محتوا از روش فایل جاوااسکریپی غیراستاندارد بارگذاری میشود)
استفاده از فریمورک های جاوا اسکریپت و رندر سمت کلاینت (CSR)، فرآیند خزش خزنده گوگل را کُند (پردازش دو مرحله ای) و گاها مختل مینماید.
بعضی صفحات یا این که تمام وبسایت شما به وسیله گوگل پنالتی گردیدهاست.
هر مورد از مورد ها بالا راهکارهای مخصوص به خویش داراست. گاهی برطرف کردن این ایرادها وا رفته و به سادگی شکل می گیرد و گاهی بسیار طاقت فرسا میگردد. به عنوان مثال در صورتیکه نحوه خزش بر روی خزنده گوگل بسته گردیده باشد به راحتی میاقتدار با تگ و کدنویسی ساده اینراه را آماده ایجاد کرد. البته در شکل پنالتی شدن سایت، بازگشتن به جستجوهای گوگل بسیار طاقت فرسا و گاهی نا ممکن است. گوگل سرچ کنسول راجعبههای بخش اعظمی به خزش و ایندکس صفحه ها یاری مینماید. یکیاز این مفاد ساخت سایت مپ برای وب سایت میباشد. سایت مپ یاری شایانی به خزندهها جهت خزش در سرتاسر وب سایت مینمایند. پس هیچ گاه از ساخت سایت مپ غافل نشوید. همینطور در گوگل سرچ کنسول میتوانید به راحتی صفحات ایندکس گردیده را مشاهده کنید. و هم اینکه بصورت دستی صفحه ها مدنظر خویش را سریعخیس ایندکس نمایید.
ایندکس دستی (Indexing) صفحه های وبسایت
شیوه های زیادی جهت تسریع روند ایندکس صفحه های وبسایت وجود دارد. ولی متداولترین آن ایندکس دستی به امداد گوگل سرچ کنسول میباشد. در این روش از گوگل بصورت مستقیم درخواست می کنید که خزنده گوگل را به URL مدنظر شما بفرستد و مبادرت به خزش و ایندکس ورقه نماید. برای انجام ایندکس دستی روند زیر را دنبال فرمائید:
نام نویسی در گوگل سرچ کنسول
تصویب وب سایت در گوگل سرچ کنسول
URL شیت مدنظر خودتان را اسکن نمایید.
وارد گوگل سرچ کنسول گردیده و وارد بخش URL Inspection گردید
در قاب بالای ورقه URL کپی گردیده را عینا قرار دهید
در صفحه نو در قسمت URL is not on Google سمت چپ بر روی Request Indexing کلیک فرمایید.
یک سری ثانیه شکیبایی نمائید تا پیغام پذیرش Indexing requested مواجه گردید.