طرق ارتقاء بودجه خزش یا crawl budget
درپی با ترفند های seo بودجه خزش و یا شیوه های افزایش نرخ بودجه خزش آشنا می شوید. کافیست تک تک موارد زیر را روی سایت فعلی خود رعایت فرمایید تا گوگل میزان دارایی بیشتری برای خزیدن در صفحات شما در لحاظ بگیرد.
حذف صفحه های کپی
یکی از مواردی که سبب ساز کاهش و از در میان رفتن میزان دارایی خزش وب سایت شما می شود، وجود صفحه ها تکراری در وب سایت است. یکی اصلی ترین اشتباهاتی که سئوکاران ایفا میدهند، برچسب گذاری های گوناگون و بدون طراحی برنامه هست. این برچسب ها صفحه ها مجزایی را به آموزش سئو مشهد وجود می آورند که در بیشتر مواقع محتوای تکراری دارا هستند. همین استدلال منجر به وجود داخل شدن صفحات نسخه برداری یا duplicate content در سایت گردد.
در هر صورت وجود صفحات کپی در سایت سبب ساز میشود تا دارایی خزش شما صرف تفحص یکسری شیت تکراری و بی قیمت در وب سایت گردد. برای پرهیز از اینکار استارت این صفحات را نوایندکس کرده، بعد اقدام به حذفشان فرمائید. در نهایت برای دوری از به وجود وارد شدن صفحه های 404، آنها را ریدایرکت 301 کنید. در نوشتهی علمی \\\\\\\\\\\\" آموزش ریدایرکت 301 \\\\\\\\\\\\" به شما آموزش های موردنیاز را داده ایم.
هجران از ایندکس صفحات پارامتری
یکیاز دیگر از صفحاتی که بودجه خزش مارا مصرف می کند، صفحاتی هست که URL پارامتری دارا هستند. این صفحه ها در وبسایت های فروشگاهی بیشتر دیده میشود. به عنوان مثال هنگامی که در باکس جستجو یا فیلتر جستجو موضوعی را سرچ می کنید، یک آدرس تازه به فرمت زیر نمایش داده می شود:
website.com/cats/big?color=red
این آدرس ها صفحاتی را نشان می دهد که از لحاظ محتوایی بها چندانی آموزش سئو در مشهد نداشته و ضرورتی هم برای ایندکس شدن آنان وجود ندارد. برای دوری از ایندکس شدن این مدل از صفحات، باید از تگ کنونیکال به کار گیری نمایید تا به ربات های گوگل بفهمانید که به جای خزش این کاغذ، به ورقه مهم آن بروند.
لینک و پیوند سازی خارجی
لینک سازی خارجی یکی از اقدامات اصلی در seo کلاه خاکستری می باشد که به ارتقاء اعتبار و اقتدار سئو سایت شما امداد زیادی می کند. اما در حالتی که سایتتان را به تازگی فعالسازی کرده اید، عالی است سراغ این تکنیک نروید. استارت سایتتان را seo داخلی فرمایید و بعد از 2 الی 3 ماه به سراغ لینک بیلدینگ بروید.
پیوند سازی خارجی موجب میشود، زمانی که ربات های خزنده در اکنون خزش وب سایت های دیگر هستند، پیوند سایت شما را نیز مشاهده کنند. در منفعت به وب سایت شما نیز آمده و برای بار دیگر آن را خزش می کنند.
حذف صفحه ها زامبی
صفحه های زامبی یا همان زامبی پیج ها به صفحاتی گفته می شود که از نظر محتوایی قیمت چندانی برای گوگل و استفاده کننده ندارند. اساسا این صفحه ها کمتر از 200 واژه محتوا داشته یا بازدید بالایی ندارند. وجود صفحه های زامبی در یک وب سایت اقتدار سئو آن را کاهش داده و از طرفی میزان دارایی خزش را نیز مصرف می کنند. برای شناسایی این صفحه ها میتوانید از طریق سرچ کنسول، نادر بازدید ترین محتواها را پیدا کرده و آنهارا حذف و ریدایرکت نمایید.
ساخت محتوای منظم
همان طور که گفتیم ساخت محتوای مستمر در وبسایت، باعث میشود تا گوگل تارنما شمارا به عنوان یک وب سایت و فعال شناسایی کند. از طرفی ساخت و ساز محتوا در وبسایت در واقع نوعی تقاضای خزش به ربات های گوگل است. وقتی که در روزهای خاص و در یک ساعت معلوم محتوایی را در سایت قرار بدهید، ربات های خزنده به طور خود کار در همان ساعتها برای خزش مجدد به سایت شما مراجعه می کنند.
بهبود ساختار داخلی وب سایت
یکی از سایر از خط مش های ارتقا بودجه خزش سایت، بهبود ساختار داخلی سایت هست. همانگونه که گفتیم لینک سازی داخلی موجب ارتقا قدرت یک محتوا میشود. حال زمانی که ربات های خزنده در درحال حاضر تفحص یک محتوا میباشند، به پیوند های داخلی آن نیز مراجعه می کنند. درصورتیکه لینک و پیوند سازی داخلی وبسایت شما نقص داشته باشد، در واقع بودجه خزش سایتتان را هدر داده اید. لینک سازی داخلی وبسایت را تحقیق کنید؛ در شرایطیکه که به صفحه ها 404 یا ریدایرکت های پی در پی می روند، آنهارا اصلاح فرمایید.
تشکیل داد سایت مپ
وبسایت مپ یا نقشه تارنما یک پوشه متنی با فرمت xml میباشد که روی هاست شما قرار میگیرد. دراین پوشه متنی شما لیست کاملی از آدرس صفحاتی که میخواهید ایندکس خواهد شد را قرار می دهید. به امداد این فایل، ربات های خزنده با سرعت بیشتری یک وب سایت را خزش و ایندکس می کنند. در حالتیکه که برای ایجاد کرد نقشه وب سایت خود اقدام نکرده اید، نوشته ی علمی \\\\\\\\\\\\" یادگرفتن ثبت سایت مپ گوگل \\\\\\\\\\\\" را تفحص کنید.
ارتقا سرعت تارنما
یکی ازاز سایر از مواردی که به ارتقا بودجه خزش وب سایت یاری می کند، افزایش سرعت تارنما میباشد. زمانی که سرعت صفحه های تارنما شما کم باشد، با نقص ایندکس نشدن صفحاتتان روبرو خواهید شد. برای دوری از این مورد می توانید به کمک تکنیک هایی که در نوشته ی علمی \\\\\\\\\\\\" ارتقاء سرعت وب سایت وردپرسی \\\\\\\\\\\\" گفته ایم، سرعت سایتتان را افزایش بدهید.
خرید سرور منحصر به فرد
همان گونه که گفتیم یکی عواملی که دارایی خزش وبسایت شمارا مشخص می کند، منابع هاست شما میباشد. چنانچه میخواهید از کاهش crawl budget هجران فرمایید، خوب می باشد از هاست منحصر امداد بگیرید.
مدیریت صفحه های غیر قابل ایندکس
اکثری از صفحه ها وب سایت شما غیر قابل ایندکس بوده ولی در دسترس ربات های خزنده قرار میگیرند. در واقع با این عمل موتورهای جستجو درگیر غربالگری صفحه ها تارنما شما میگردند و میزان دارایی خزش سایتتان صرف این فعالیت خواهد شد. ولی کدام صفحه ها غیر قابل ایندکس میباشند؟
تغییر مسیرها یا ریدایرکت ها(3xx)
صفحاتی که پیدا نمیشوند و خطای آن ها به صورت 4xx می باشد.
صفحاتی که از سمت سرور مبتلا مشکل شده اند و ارور 5xx آرم می دهند.
صفحاتی که ایندکسپذیر نیستند یعنی دارای تگ noindex میباشند.
مدیر لینکهای شکسته یا ریدایرکت شده
منظور از لینک های شکسته، لینک هایی می باشد که به صفحاتی ارجاع می شوند که وجود ندارد. پیوند های ریدایرکت شده نیز، آدرس هایی میباشند که به URL های دیگر هدایت میشوند. زنجیره زمانبر از ریدایرکت ها و لینک و پیوند های شکسته، موتورهای جستجو را به بن بست می رساند.
شما می بایست تا حد امکان تعداد ریدایرکت های وقتگیر را کاهش داده و لینک و پیوند های شکسته را نیز اصلاح فرمایید. با این عمل ضمن افزایش سرعت بارگذاری صفحه ها، بودجه خزش سایتتان را نیز مدیر کرده اید.
چطور میزان دارایی خزیدن سایتمان را به حساب آوردن کنیم؟
برای مطالعه میزان دارایی خزش یک وبسایت، بهتر است به سرچ کنسول آن رجوع کنید. برای این عمل آغاز ما یحتاج میباشد که سایتتان را در سرچ کنسول ثبت کرده باشید. در صورتیکه هنوز این شغل را نکرده اید، نوشتهعلمی \\\\\\\\\\\\" ثبت وب سایت در سرچ کنسول \\\\\\\\\\\\" به شما یاری خواهد کرد. به دنبال برای پژوهش بودجه خزش سایتتان، فرآیند پایین را طی نمائید:
وارد نصیب تنظیمات سرچ کنسول شوید.
طبق تصویر پایین، در بخش Crawling روی موردی گشودن گزارش (Open Report) کلیک نمائید.
موقتا به شیت ای هدایت میشوید که می توانید جزئیات بیشتر را ملاحظه کنید.
بخش های مختلف Crawl stats در سرچ کنسول
قسمت اولیه
طبق تصویر پایین، میتوانید تعداد درخواستها، میزان دانلودها و همچنین میانگین زمان پاسخگویی تارنما را ملاحظه کنید.
نصیب دوم
Host status گزارش خطاهای هاست را در 90 روز قبل علامت میدهد.
قسمت سوم
بخش سوم به Crawl requests breakdown مربوط میباشد و شامل 4 قسمت می شود:
By response
این قسمت ترازو صفحات خزیده شده را نماد میدهد؛ مشکلاتی نظیر ارور 404 و تعداد صفحه ها سلامت دراین نصیب نمایش داده می شود. با کلیک روی هر بخش میتوانید جزئیات بیشتری را ملاحظه کنید.
بدین نکته توجه نمایید که هر چه تعداد صفحه های OK 200 بیشتر باشد، سایت شما در حالت بهتری قرار دارد.
By file type
در این نصیب می توانید نوع صفحات کرال شده را مشاهده کنید.
By purpose
تعداد دفعات کرال صفحه های سابق و جدید وب سایت را علامت میدهد.
By Googlebot type
نوع ربات هایی که صفحه های سایت شمارا کرال کرده اند را مشخص می کند.
در پایان
در این مقاله به شما گفتیم که بودجه خزش یا کرال باجت چیست و چه اهمیتی برای تارنما شما داراست. همانطور که در بخش تاثیر کرال باجت بر سئو گفتیم اگرکه نتوانید به بهترین شکل، بودجه خزش وبسایت را افزایش بدهید و آن را مدیر فرمائید، با مشکلاتی در سئو تارنما خود مواجه خواهید شد. بنابراین میتوانید با استعمال تکنیک هایی که گفته شد، میزان دارایی خزش سایتتان را مدیر کرده و نرخ آن را ارتقاء دهید. اگر که دراین باره نیاز به مشاوره تخصصی داشتید، با مشاوران ما در وب تماس بگیرید.
طرق ارتقاء بودجه خزش یا crawl budget
درپی با ترفند های seo بودجه خزش و یا شیوه های افزایش نرخ بودجه خزش آشنا می شوید. کافیست تک تک موارد زیر را روی سایت فعلی خود رعایت فرمایید تا گوگل میزان دارایی بیشتری برای خزیدن در صفحات شما در لحاظ بگیرد.
حذف صفحه های کپی
یکی از مواردی که سبب ساز کاهش و از در میان رفتن میزان دارایی خزش وب سایت شما می شود، وجود صفحه ها تکراری در وب سایت است. یکی اصلی ترین اشتباهاتی که سئوکاران ایفا میدهند، برچسب گذاری های گوناگون و بدون طراحی برنامه هست. این برچسب ها صفحه ها مجزایی را به آموزش سئو مشهد وجود می آورند که در بیشتر مواقع محتوای تکراری دارا هستند. همین استدلال منجر به وجود داخل شدن صفحات نسخه برداری یا duplicate content در سایت گردد.
در هر صورت وجود صفحات کپی در سایت سبب ساز میشود تا دارایی خزش شما صرف تفحص یکسری شیت تکراری و بی قیمت در وب سایت گردد. برای پرهیز از اینکار استارت این صفحات را نوایندکس کرده، بعد اقدام به حذفشان فرمائید. در نهایت برای دوری از به وجود وارد شدن صفحه های 404، آنها را ریدایرکت 301 کنید. در نوشتهی علمی \\\\\\\\\\\\" آموزش ریدایرکت 301 \\\\\\\\\\\\" به شما آموزش های موردنیاز را داده ایم.
هجران از ایندکس صفحات پارامتری
یکیاز دیگر از صفحاتی که بودجه خزش مارا مصرف می کند، صفحاتی هست که URL پارامتری دارا هستند. این صفحه ها در وبسایت های فروشگاهی بیشتر دیده میشود. به عنوان مثال هنگامی که در باکس جستجو یا فیلتر جستجو موضوعی را سرچ می کنید، یک آدرس تازه به فرمت زیر نمایش داده می شود:
website.com/cats/big?color=red
این آدرس ها صفحاتی را نشان می دهد که از لحاظ محتوایی بها چندانی آموزش سئو در مشهد نداشته و ضرورتی هم برای ایندکس شدن آنان وجود ندارد. برای دوری از ایندکس شدن این مدل از صفحات، باید از تگ کنونیکال به کار گیری نمایید تا به ربات های گوگل بفهمانید که به جای خزش این کاغذ، به ورقه مهم آن بروند.
لینک و پیوند سازی خارجی
لینک سازی خارجی یکی از اقدامات اصلی در seo کلاه خاکستری می باشد که به ارتقاء اعتبار و اقتدار سئو سایت شما امداد زیادی می کند. اما در حالتی که سایتتان را به تازگی فعالسازی کرده اید، عالی است سراغ این تکنیک نروید. استارت سایتتان را seo داخلی فرمایید و بعد از 2 الی 3 ماه به سراغ لینک بیلدینگ بروید.
پیوند سازی خارجی موجب میشود، زمانی که ربات های خزنده در اکنون خزش وب سایت های دیگر هستند، پیوند سایت شما را نیز مشاهده کنند. در منفعت به وب سایت شما نیز آمده و برای بار دیگر آن را خزش می کنند.
حذف صفحه ها زامبی
صفحه های زامبی یا همان زامبی پیج ها به صفحاتی گفته می شود که از نظر محتوایی قیمت چندانی برای گوگل و استفاده کننده ندارند. اساسا این صفحه ها کمتر از 200 واژه محتوا داشته یا بازدید بالایی ندارند. وجود صفحه های زامبی در یک وب سایت اقتدار سئو آن را کاهش داده و از طرفی میزان دارایی خزش را نیز مصرف می کنند. برای شناسایی این صفحه ها میتوانید از طریق سرچ کنسول، نادر بازدید ترین محتواها را پیدا کرده و آنهارا حذف و ریدایرکت نمایید.
ساخت محتوای منظم
همان طور که گفتیم ساخت محتوای مستمر در وبسایت، باعث میشود تا گوگل تارنما شمارا به عنوان یک وب سایت و فعال شناسایی کند. از طرفی ساخت و ساز محتوا در وبسایت در واقع نوعی تقاضای خزش به ربات های گوگل است. وقتی که در روزهای خاص و در یک ساعت معلوم محتوایی را در سایت قرار بدهید، ربات های خزنده به طور خود کار در همان ساعتها برای خزش مجدد به سایت شما مراجعه می کنند.
بهبود ساختار داخلی وب سایت
یکی از سایر از خط مش های ارتقا بودجه خزش سایت، بهبود ساختار داخلی سایت هست. همانگونه که گفتیم لینک سازی داخلی موجب ارتقا قدرت یک محتوا میشود. حال زمانی که ربات های خزنده در درحال حاضر تفحص یک محتوا میباشند، به پیوند های داخلی آن نیز مراجعه می کنند. درصورتیکه لینک و پیوند سازی داخلی وبسایت شما نقص داشته باشد، در واقع بودجه خزش سایتتان را هدر داده اید. لینک سازی داخلی وبسایت را تحقیق کنید؛ در شرایطیکه که به صفحه ها 404 یا ریدایرکت های پی در پی می روند، آنهارا اصلاح فرمایید.
تشکیل داد سایت مپ
وبسایت مپ یا نقشه تارنما یک پوشه متنی با فرمت xml میباشد که روی هاست شما قرار میگیرد. دراین پوشه متنی شما لیست کاملی از آدرس صفحاتی که میخواهید ایندکس خواهد شد را قرار می دهید. به امداد این فایل، ربات های خزنده با سرعت بیشتری یک وب سایت را خزش و ایندکس می کنند. در حالتیکه که برای ایجاد کرد نقشه وب سایت خود اقدام نکرده اید، نوشته ی علمی \\\\\\\\\\\\" یادگرفتن ثبت سایت مپ گوگل \\\\\\\\\\\\" را تفحص کنید.
ارتقا سرعت تارنما
یکی ازاز سایر از مواردی که به ارتقا بودجه خزش وب سایت یاری می کند، افزایش سرعت تارنما میباشد. زمانی که سرعت صفحه های تارنما شما کم باشد، با نقص ایندکس نشدن صفحاتتان روبرو خواهید شد. برای دوری از این مورد می توانید به کمک تکنیک هایی که در نوشته ی علمی \\\\\\\\\\\\" ارتقاء سرعت وب سایت وردپرسی \\\\\\\\\\\\" گفته ایم، سرعت سایتتان را افزایش بدهید.
خرید سرور منحصر به فرد
همان گونه که گفتیم یکی عواملی که دارایی خزش وبسایت شمارا مشخص می کند، منابع هاست شما میباشد. چنانچه میخواهید از کاهش crawl budget هجران فرمایید، خوب می باشد از هاست منحصر امداد بگیرید.
مدیریت صفحه های غیر قابل ایندکس
اکثری از صفحه ها وب سایت شما غیر قابل ایندکس بوده ولی در دسترس ربات های خزنده قرار میگیرند. در واقع با این عمل موتورهای جستجو درگیر غربالگری صفحه ها تارنما شما میگردند و میزان دارایی خزش سایتتان صرف این فعالیت خواهد شد. ولی کدام صفحه ها غیر قابل ایندکس میباشند؟
تغییر مسیرها یا ریدایرکت ها(3xx)
صفحاتی که پیدا نمیشوند و خطای آن ها به صورت 4xx می باشد.
صفحاتی که از سمت سرور مبتلا مشکل شده اند و ارور 5xx آرم می دهند.
صفحاتی که ایندکسپذیر نیستند یعنی دارای تگ noindex میباشند.
مدیر لینکهای شکسته یا ریدایرکت شده
منظور از لینک های شکسته، لینک هایی می باشد که به صفحاتی ارجاع می شوند که وجود ندارد. پیوند های ریدایرکت شده نیز، آدرس هایی میباشند که به URL های دیگر هدایت میشوند. زنجیره زمانبر از ریدایرکت ها و لینک و پیوند های شکسته، موتورهای جستجو را به بن بست می رساند.
شما می بایست تا حد امکان تعداد ریدایرکت های وقتگیر را کاهش داده و لینک و پیوند های شکسته را نیز اصلاح فرمایید. با این عمل ضمن افزایش سرعت بارگذاری صفحه ها، بودجه خزش سایتتان را نیز مدیر کرده اید.
چطور میزان دارایی خزیدن سایتمان را به حساب آوردن کنیم؟
برای مطالعه میزان دارایی خزش یک وبسایت، بهتر است به سرچ کنسول آن رجوع کنید. برای این عمل آغاز ما یحتاج میباشد که سایتتان را در سرچ کنسول ثبت کرده باشید. در صورتیکه هنوز این شغل را نکرده اید، نوشتهعلمی \\\\\\\\\\\\" ثبت وب سایت در سرچ کنسول \\\\\\\\\\\\" به شما یاری خواهد کرد. به دنبال برای پژوهش بودجه خزش سایتتان، فرآیند پایین را طی نمائید:
وارد نصیب تنظیمات سرچ کنسول شوید.
طبق تصویر پایین، در بخش Crawling روی موردی گشودن گزارش (Open Report) کلیک نمائید.
موقتا به شیت ای هدایت میشوید که می توانید جزئیات بیشتر را ملاحظه کنید.
بخش های مختلف Crawl stats در سرچ کنسول
قسمت اولیه
طبق تصویر پایین، میتوانید تعداد درخواستها، میزان دانلودها و همچنین میانگین زمان پاسخگویی تارنما را ملاحظه کنید.
نصیب دوم
Host status گزارش خطاهای هاست را در 90 روز قبل علامت میدهد.
قسمت سوم
بخش سوم به Crawl requests breakdown مربوط میباشد و شامل 4 قسمت می شود:
By response
این قسمت ترازو صفحات خزیده شده را نماد میدهد؛ مشکلاتی نظیر ارور 404 و تعداد صفحه ها سلامت دراین نصیب نمایش داده می شود. با کلیک روی هر بخش میتوانید جزئیات بیشتری را ملاحظه کنید.
بدین نکته توجه نمایید که هر چه تعداد صفحه های OK 200 بیشتر باشد، سایت شما در حالت بهتری قرار دارد.
By file type
در این نصیب می توانید نوع صفحات کرال شده را مشاهده کنید.
By purpose
تعداد دفعات کرال صفحه های سابق و جدید وب سایت را علامت میدهد.
By Googlebot type
نوع ربات هایی که صفحه های سایت شمارا کرال کرده اند را مشخص می کند.
در پایان
در این مقاله به شما گفتیم که بودجه خزش یا کرال باجت چیست و چه اهمیتی برای تارنما شما داراست. همانطور که در بخش تاثیر کرال باجت بر سئو گفتیم اگرکه نتوانید به بهترین شکل، بودجه خزش وبسایت را افزایش بدهید و آن را مدیر فرمائید، با مشکلاتی در سئو تارنما خود مواجه خواهید شد. بنابراین میتوانید با استعمال تکنیک هایی که گفته شد، میزان دارایی خزش سایتتان را مدیر کرده و نرخ آن را ارتقاء دهید. اگر که دراین باره نیاز به مشاوره تخصصی داشتید، با مشاوران ما در وب تماس بگیرید.