بودجه خزش چیست؟ چطور Crawl Budget را مدیریت کنیم؟

اگر تا به حال درباره بودجه خزش چیزی نشنیده‌اید، تبریک می‌گوییم، سایت شما در معرض خطر جدی ایندکس نشدن است!

قبل از هر چیز اجازه دهید مکالمه آشنایی که در ذهن خیلی از سئوکارها تکرار می‌شود را به نوشتار تبدیل کنیم:

سئوکار: من هر وقت که محتوای جدیدی تو سایتم می‌زارم یا یک بخشی رو به‌روزرسانی می‌کنم، تازه بعد چند هفته متوجه می‌شم که گوگل این تغییرات رو هنوز ایندکس نکرده!

گوگل: مگه نگفتم بودجه سایت‌ات رو بیهوده سرِ ریدایرکت‌ها و صفحات 404 هدر نده!

سئوکار: کدوم بودجه؟

گوگل: همون بودجه ای که باید برای ایندکس کردن صفحات ازش استفاده می‌کنم، بودجه خزش.

سئوکار: مگه خزش هم بودجه داره؟ از کجا بفهمم چه کارهایی باعث می‌شه بودجه خزش سایتم کم شه؟

این‌جاست که داستان شکل گیری مفهومی به نام Crawl Budget برای ما شروع می‌شود.

تاثیر نرخ خزش در سئو

بودجه خزش Crawl Budget در سئو چه مفهومی دارد؟

بودجه کراول به تعداد صفحاتی گفته می‌شود که ربات‌های گوگل طی یک دوره زمانی مشخص (مثلاً یک روز) در سایت شما ایندکس می‌کنند. بودجه سایت شما، معمولاً بر اساس بزرگی و تعداد لینک‌های ورودی به آن مشخص می‌شود.

بودجه یا نرخ خزش در واقع میزان توجهی است که خزنده‌های گوگل به سایت شما دارند. این توجه هر‌چه بیشتر باشد، تعداد بیشتری از صفحات سایت شما کراول و ایندکس می‌شوند.

حتماً شما هم دارید به این فکر می‌کنید که چطور بیشترین توجه گوگل را جذب سایت خود کنید… ولی لطفاً هیچ عجله نکنید، بهینه سازی نرخ خزش موضوع جذاب و مهمی است ولی برای درست انجام دادن آن نیاز داریم تا با سازوکار Crawl Budget بیشتر آشنا شویم.

چرا موتورهای جستجو برای سایت‌ها نرخ کراول در نظر می‌گیرند؟

اجازه دهید چند قدم به عقب برداریم و درباره ماموریت اصلی گوگل حرف بزنیم:

رساندن بهترین محتوا به دست کاربر

برای این‌که گوگل بتواند این ماموریت سخت ولی ارزشمند را انجام دهد، نیاز دارد که به هر سایت نمره بدهد و بر اساس این نمره‌بندی، بهترین را انتخاب و در اختیار کاربر قرار دهد. اولین قدم برای نمره دهی چیست؟

اولین قدم این است که گوگل وارد آن سایت‌ها شود (به آن‌ها خزش کند!)

نرخ خزش یا CRAWL BUDGET چیست؟

پس می‌توانیم اینطور نتیجه بگیریم که:

اختصاص دادن بودجه برای خزش، گوگل را قادر می‌کند تا بتواند در میزان خزش اولویت بندی کند. هر‌چه این اولویت‌بندی بهتر صورت گیرد، فضای عادلانه تری برای رقابت سایت‌های مختلف در فضای اینترنت به وجود می‌آید.

نظر گوگل در مورد بودجه خزش چیست؟

اجازه دهید با نگاه خود گوگل مفهوم نرخ خزش را برای شما توضیح دهیم:

«اول از هر چیز باید بگم که نرخ خزش موضوعی نیست که باعث نگرانی شما بشه. اگر قرار را بر این بزاریم که محتوا بلافاصله بعد از انتشار کراول و ایندکس می‌شه، پس نگرانی درباره نرخ خزش منطقی نیست.

اگر تعداد صفحات سایت شما به چند صد عدد می‌رسه، کراول شدن کامل این صفحات امری بدیهی و روتینه. اینکه مشخص کنیم چه محتوایی در چه زمانی کراول بشه موضوعیه که باید دغدغه سایت‌های بزرگ با تعداد صفحات بالا باشه.»

گوگل به این توضیح بسنده نکرده و برای موشکافی دقیق‌تر این مفهوم، ما را با دو معیار جدید آشنا می‌کند.

بودجه مورد نیاز هر سایت چطور تعیین می‌شود؟

گوگل با استفاده از دو فاکتور Crawl Limit و Crawl Demand، بودجه مورد نیاز هر سایت را مشخص می‌کند:

مفاهیم اصلی بودجه خزش و ارتباط آن به سئو تکنیکال
  1. Crawl limit / host load: منابع سرور سایت ما چه تعداد خزش را می‌تواند تحمل کند؟

همان‌طور که می‌دانید هر بار که گوگل یک صفحه را کراول می‌کند، یک درخواست مبنی بر دسترسی به منابع سایت به سمت سرور فرستاده می‌شود. اگر این درخواست‌ها بیش از حد از طرف ربات‌های گوگل ارسال شود، منابع سرور سایت نمی‌توانند به همه این درخواست‌ها پاسخ دهند و در نتیجه سایت از کار می‌افتد (یا به اصطلاح down می‌شود). گوگل از کجا می‌فهمد ظرفیت خزش سایت ما چقدر است؟ به 2 طریق:

  • نشانه‌های باگ سرور: درخواست‌های ربات‌های گوگل مبنی بر خزش چند بار توسط سرور با مشکل روبرو شده اند
  • تعداد سایت‌های فعال در هاست: اگر سایت شما در حال اجرا بر روی یکی از هاست‌های اشتراکی است و صدها سایت دیگر فعال در این‌هاست وجود دارند و سایت شما از نظر محتوا و صفحات بزرگ است، در این صورت نرخ کراول شما محدودیت زیادی خواهد داشت.

اگر در این گروه قرار دارید، بهتر است از هاست‌های اختصاصی استفاده کنید تا هم نرخ خزش شما افزایش پیدا کند و هم سرعت لود صفحات بهبود داده شود.

       2. Crawl demand / crawl scheduling: کدام یک از صفحات، ارزش کراول شدن (یا دوباره کراول شدن) را دارد؟

این ارزش بر اساس فاکتورهای زیر اندازه‌گیری می‌شود:

  • محبوبیت صفحه: چه تعداد لینک داخلی و خارجی با کیفیت به این صفحه داده شده و در چه تعداد عبارت کلیدی جایگاه دارد؟
  • تازگی محتوا: محتوای صفحه چند وقت یک‌بار به‌روزرسانی می‌شود
  • نوع صفحه: برای مثال صفحه دسته بندی را با صفحه شرایط و ضوابط مقایسه کنید. احتمال تغییر محتوا در کدام یک بیشتر مشهود است

برای آشنایی بیشتر با مفهوم تازگی محتوا می‌توانید به مقاله الگوریتم freshness گوگل مراجعه کنید.

چرا باید به Crawl Budget اهمیت چند برابری بدهید؟

شاید برای شما هم پیش آمده باشد که بخشی از محتوای سایت خود را به‌روزرسانی می‌کنید ولی بعد از این‌که آن را منتشر کردید، گوگل چند هفته بعد این تغییر را کراول و ایندکس کرده!

در مواردی حتی این تغییرات همیشه از چشم گوگل پنهان می‌مانند و هیچ وقت ایندکس نمی‌شوند. مشکل کجاست؟

نرخ خزش سایت شما با مشکل روبرو است. با مقایسه دو حالت زیر خیلی خوب متوجه اهمیت بودجه سالم سایت خود می‌شوید:

  • سناریوی بهترین حالت بودجه خزش: وقتی یک صفحه به سایت خود اضافه می‌کنید، توقع دارید که گوگل به‌طور هوشمندانه و سریعی آن صفحه را ایندکس کند، بدون این‌که شما درخواست fetch کردن آن صفحه را به گوگل بدهید. هر‌چه این فرآیند سریع تر اتفاق بیافتد، سریع تر می‌توانید از محتوای صفحات تازه اضافه شده به سایت (یا به‌روز شده) بهره ببرید.
  • سناریوی بدترین حالت بودجه خزش: اگر در حال هدر دادن نرخ کراول سایت خود باشید، ربات‌های گوگل نمی‌توانند به صورت موثری سایت شما را کراول کنند. مثلاً ممکن است توجه خود را بیشتر بر روی صفحاتی از سایت قرار دهند که هیچ اهمیتی برای شما ندارند.

این یعنی ممکن است بعضی از صفحات هدف شما هیچ وقت توسط گوگل شناخته نشوند. اگر گوگل این صفحات را نشناسد، نمی‌تواند آن‌ها را کراول و ایندکس کند و در این وضعیت، دریافت ترافیک ارگانیک با استفاده از نتایج گوگل امری غیر ممکن خواهد بود.

می‌بینید که این سناریو به کجا دارد می‌رسد؟ سئو سایت شما ممکن است در خاموشی تمام به گند کشیده شود!

حالا اجازه دهید با معرفی چند روش از این سناریوی فاجعه آفرین جلوگیری کنیم.

تاثیر ایندکس و کراول در سئو سایت

 8 اشتباه جبران ناپذیر برای این‌که بودجه خزش سایت خود را به بدترین شکل بهینه کنید!

«بهینه‌سازی بودجه خزش» به زبان ساده یعنی این‌که مطمئن شویم هیچ بودجه ای از سایت ما هدر نمی‌رود و هر خزشی که الگوریتم‌های گوگل برای سایت ما انجام می‌دهد با هدف خاصی (مثل ایندکس یک صفحه لندینگ مهم) مصرف شوند.

خوشبختانه ما بودجه کراول سایت‌های زیادی را بررسی کردیم و می‌توانیم با اطمینان بگوییم که بیشتر آن‌ها از مشکلات مشابهی رنج می‌برند. مشکلات ساده ولی در عین حال مهمی که می‌تواند سایت شما را با کمبود بودجه روبرو کند.

دلایل رایج تلف شدن بودجه خزش عبارتنند از:

  1. وجود پارامترهای فیلتر محصولات در URL: آدرس صفحات فروشگاهی گاهی اوقات دارای پارامترهایی هستند که کاربر برای فیلتر کردن محصول از آن‌ها استفاده می‌کند. به عنوان مثال آدرس https://www.example.com/toys/cars?color=white . مطمئن شوید که این پارامترها برای گوگل قابل دسترسی و کراول نیست چون در غیر این‌صورت باید برای ایندکس آن بودجه اضافه صرف شود.
  2. محتوای تکراری Duplicate: صفحاتی که محتوای آن‌ها کاملاً مشابه یا خیلی شبیه هم باشند را محتوای تکراری می‌گویند. محتوای کپی شده، صفحات با عنوان‌های یکسان، و صفحات برچسب تکراری از جمله رایج ترین آن‌هاست. محتوای کپی معمولاً از لحاظ اولویت ایندکس شدن در جایگاه پایینی قرار دارند پس استفاده بودجه برای ایندکس آن‌ها منطقی نیست.
  3. محتوای بی کیفیت: صفحاتی که محتوای کم ارزش یا کمی در آن‌هاست، باید تا جای ممکن یا در سایت قرار نگیرند یا اگر می‌گیرند برای گوگل قابل دسترسی نباشند. این صفحات می‌توانند مانند خوره بودجه سایت شما تمام کنند ولی هیچ ارزشی به سایت شما اضافه نکنند!
  4. لینک‌های شکسته یا ریدایرکت شده: لینک‌های شکسته یا ریدایرکت شده می‌توانند مانند زنجیره‌ای بی نهایت از لینک‌ها ربات‌های گوگل را سردرگم کنند. هر‌چه این سردرگمی بیشتر باشد، بودجه بیشتری هدر می‌رود. تا جای ممکن یا از آن‌ها استفاده نکنید یا طبق اصول و به شکلی درستی از آن‌ها بهره ببرید.

توصیه می‌کنیم باری درک عمیق تر این دو مفهوم، مقالات لینک شکسته چیست و ریدایرکت 301 چیست را خوب مطالعه کنید.

  1. URL های اشتباه در سایت مپ سایت: نقشه سایت شما مهم‌ترین کروکی دسترسی برای ربات‌های گوگل است. اگر سایت مپ شما پر از صفحات Broken یا Redirected باشند، گوگل به اشتباه آن‌ها را کراول می‌کند. توصیه می‌کنیم تا جای ممکن ریدایرکت‌های 3xx، 4xx یا 5xx را در نقشه xml سایت قرار ندهید. به طور پیوسته نقشه xml  سایت خود را چک کنید تا مطمئن شوید:
  • صفحات بی ارزش و کم اهمیت در آن نیست.
  • صفحات هدف در آن حضور دارد.
  1. صفحاتی با سرعت لود پایین: صفحاتی که سرعت لود پایینی دارند، یا هیچ وقت لود نمی‌شوند اثر منفی بر روی Crawl Budget سایت شما می‌گذارند. چون که این اتفاق این سیگنال را به گوگل می‌دهد که سرورهای سایت نمی‌توانند درخواست ربات‌های هوشمند گوگل را به خوبی انجام دهند. در نتیجه گوگل نرخ خزش را کاهش می‌دهد تا درخواست‌ها به درستی صورت بگیرند.
  2. تعداد زیادی صفحات غیر قابل ایندکس: اگر سایت شما صفحات غیرقابل ایندکس زیادی دارد، عملاً دارید گوگل را سرگرم کراول کردن آن‌ها می‌کنید. برخی از صفحات سایت غیر قابل ایندکس نیست.
  3. ساختار لینک سازی غیراصولی: اگر ساختار کلی لینک‌سازی داخلی سایت شما غیر اصولی باشد، ممکن میزان توجه گوگل به درستی در بخش‌های مختلف سایت تقسیم نشود.

مثلاً اگر 10 لینک به صفحه پرسش و پاسخ دادید ولی تنها 5 لینک به صفحه دسته‌بندی محصولات دادید، یعنی صفحه پرسش و پاسخ نیاز به توجه بیشتری از سوی گوگل دارد. حتماً می‌دانید که این کار اشتباه محض است! چون صفحه دسته‌بندی اهمیت بیشتری نسبت به پرسش و پاسخ دارد. یکی از موضوعات مهمی که در سئو کلاه سفید مطرح می‌شود، لینک‌سازی داخلی است. برای این‌که خوب بفهمید منظور ما از لینک‌سازی اصولی چیست به مقاله لینک سازی سئو کلاه سفید بروید.

اشتباهات جبران ناپذیر برای افزایش اعتبار دامنه و نرخ بودجه سایت

مهم‌ترین سوالاتی که کاربران درباره نرخ خزش سایت پرسیده اند (ولی کسی جواب آن‌ها را نداده!)

در این بخش مهم‌ترین سوالاتی که در فضای وب درباره نرخ خزش پرسیده شده ولی تا به حال کسی به آن‌ها پاسخ نداده را به عنوان یک نتیجه‌گیری برای شما قرار دهیم. جواب بعضی از آن‌ها در محتوای مقاله موجود است ولی در این جا می‌خواهیم به طور مختصر و مفید  آن‌ها را بررسی کنیم:

1. چطور نرخ خزش سایت ام رو زیاد کنم؟

گوگل به طور واضحی بیان کرده که ارتباط مستقیمی بین اعتبار صفحه Page Authority و بودجه خزش وجود دارد. یعنی هر‌چه یم صفحه اعتبار بیشتری داشته باشد، بودجه بیشتری هم برای کراول در اختیار دارد. پس اگر می‌خواهید بودجه بیشتری داشته باشید، باید اعتبار صفحه یا دامنه خود را تقویت کنید. برای تقویت اعتبار دامنه خود بهترین نقطه شروع این است که سری به مقاله افزایش اعتبار دامنه بزنید تا به طور کامل با روش‌ها و تکنیک‌های افزایش اعتبار دامنه آشنا شوید.

2. سرعت سایت و تعداد ارور‌ها چه تاثیری در Crawl Budget دارد؟

از نظر گوگل یک سایت پر سرعت نشانه سالم بودن سرور‌های آن است. همانطور که در بخش Crawl Limit گفتیم، سلامت سرور‌ها یکی از نشانه‌های بیشتر بودن نرخ خزش است. برعکس این قضیه هم درست است؛ یعنی اگر درخواست به سمت سرور، ارورهای زیادی داشته باشد، نرخ خزش پایین می‌آید.

3. آیا خزش یک فاکتور تاثیر گذار در سئو است؟

تعداد بالای نرخ خزش تاثیری در بهبود جایگاه در صفحه نتایج ندارد. گوگل از 200 فاکتور برای ارزیابی کیفیت سایت‌ها استفاده می‌کند و با این‌که نرخ کراول برای گرفتن جایگاه امری ضروری است ولی جزئی از فاکتورهای رتبه دهی نیست.

4. آیا می‌توان از تگ کنونیکال برای خزش بهتر سایتم استفاده کنم؟

خوب است در همین‌جا به تمایز بین خزش و ایندکس اشاره کنیم. استفاده از تگ کنونیکال به ربات‌های گوگل سیگنالی مبنی بر ایندکس نکردن صفحه مورد نظر می‌دهد. ولی باید به این نکته توجه کنید که درک این مسئله از نظر گوگل نیازمند خزش است و می‌توانیم بگوییم که استفاده از تگ کانونی در میزان خزش تاثیری ندارد. پیشنهاد می‌کنیم برای درک بهتر مقاله تگ canonical چیست را مطالعه کنید.

حالا نوبت به نظرات ارزشمند شما می‌رسد. شما چه تجربه ای از نرخ خزش سایت خود داشته‌اید؟ مشکلاتی که Crawl Budget برای شما به وجود آورده را چطور حل کرده‌اید؟ شاید به اشتراک گذاری تجربه شما بتواند زندگی یک سئوکار دیگر را نجات دهد. 

امین اسماعیلی

امین اسماعیلی هستم، فارغ التحصیل مقطع کارشناسی ارشد از دانشگاه تهران و مدیر فنی آژانس خلاقیت وبسیما. از سال 91 تمرکز خود را بر روی مباحث روز سئو و طراحی سایت قرار داده و پس از کسب تجربه و دانش ارزشمند تصمیم گرفتم تا ثمره آن را با دیگران به اشتراک بگذارم.

پرسش و پاسخ

پس از پاسخ گویی توسط کارشناسان، از طریق پیامک به شما اطلاع رسانی میشود

دیدگاه شما را با چه تصویری در سایت نمایش دهیم؟
امتیاز شما به این محتوا ارسال دیدگاه
مهری ساحلی 28 بهمن 1402

عالی

علی خادمی 26 دی 1401

عالی بود

مینو تشکری 17 بهمن 1400

سلام
اینکه تعداد زیادی از صفحات سایت رو ریدایرگت ۴۱۰ بکنیم، روی بودجه خزش و همچنین ایندکس نشدن بقیه صفحات تاثیری می ذاره. و اگه تاثیر منفی می ذاره باید چی کار کرد؟

تحریریه آکادمی 20 بهمن 1400

با سلام
اگر این کار به درستی انجام شود و صفحات نامرتبط و غیرارزشمند را حذف کنیم، خیر تاثیری نخواهد داشت.

اسفندیاری 31 تیر 1400

سلام سوالی داشتم
چطوری مانع خزش ربات های گوگل برای بخش(پارامترهای فیلتر محصولات در URL) بشیم؟
url خاصی باید در فایل robots بنویسیم؟

آکادمی وبسیما 1 مرداد 1400

سلام دوست عزیز
با کد زیر همه آدرس‌های مربوط به Parameters را مسدود می‌کنید. برای حالت‌های خاص و پیچیده باید از بخش URL Parameters در سرچ کنسول اقدام کنید.
Disallow: *?*
برای اطلاعات بیشتر پیشنهاد می‌کنم مقاله مربوط به ساخت فایل Robots.txt را مطالعه کنید.

علی زارع 6 خرداد 1400

عذرخواهی میکنم این سوال رو فراموش کردم بپرسم !
آیا تعداد زیاد sitemap با url های بازم زیاد 🙂 میتونه این بودجه رو بیش از حد مصرف کنه
البته به نظر خودم که میتونه و سعی کردم قبل از ارسال این پیام یک سری از این نقشه ها رو حذف کنم و اگر مطمئن بشوم که مشکل ساز هست که اکثرشون رو حذف کنم. واینکه با حذف نقشه سایت ممکنه آدرس های ایندکس شده از گوگل حذف بشه؟

آکادمی وبسیما 8 خرداد 1400

تعداد سایت مپ یا آدرس های قرار گرفته در آن مشکل ساز نیست. مهم این است که چه آدرس هایی در نقشه سایت شما معرفی شده باشند. اگر صفحاتی هستند که نوایندکس، ریدایرکت یا کنونیکال شده اند بهتر است از نقشه سایت شما حذف شوند.

علی زارع 6 خرداد 1400

وقت بخیر
در ابتدا بابت مطلب مفیدتون تشکر میکنم
شما فرمودین که “تعداد زیادی صفحات غیر قابل ایندکس” باعث کاهش بودجه خزش می شود
من صفحات noindex زیاد دارم و مربوط به صفحات پرسش و پاسخ هستند که عمدتا ارزش زیادی ندارند ولی امکان حذف آنها وجود ندارد و به همین علت آنها رو noindex کریدم. اگر این روش باعث می شود بودجه خزش مصرف شود از نظر شما راه حل این مشکل چی میتونه باشه>

آکادمی وبسیما 8 خرداد 1400

سلام دوست عزیز
اگر از تگ noindex استفاده کرده باشید و برای این صفحات لینک سازی داخلی زیادی انجام نشده باشد مشکلی برای سایت شما ایجاد نخواهد شد. فقط دقت کنید که آدرس این صفحات در نقشه سایت شما درج نشده باشد.

علی احمدی 26 اردیبهشت 1400

سلام به شما
تو مقاله‌ی بالا گفتید که حتما URL فیلترهای مختلف رو که براتون مهم نیستن رو Noindex کنیم.
توی Robots ببندیم کفایت می‌کنه؟

آکادمی وبسیما 27 اردیبهشت 1400

سلام علی عزیز
محدود کردن دسترسی از طریق این فایل ممکن است تاثیر مثبت داشته باشد ولی در مواردی گوگل این دستورات را نادیده می‌گیرد. بهترین راهکار داشتن تگ noindex در خود صفحه است. پیشنهاد می‌کنیم مقاله فایل Robots.txt چیست را مطالعه کنید.

سید محمد 26 اردیبهشت 1400

سلام
یه سری صفحاتی که بدون جایگاه در گوگل هستند ( یا جایگاه پایینی دارن) و ما یو آر الشون را عوض میکنیم یا اصلا لندینگ تارگتمون برای سئو را عوض میکنیم را باید چیکار کنیم؟
اگر ریدایرکت کنیم که از بودجه خزش استفاده میکنن

فکر کنم بهترین راه حذف دائمی شون باشه! بهترین روش برای حذفشون چیه ؟

آکادمی وبسیما 27 اردیبهشت 1400

سلام دوست عزیز
اگر شما آدرس را تغییر دادید و محتوا همان است بهترین راه کار ریدایرکت 301 است. تغییر آدرس یک یا چند صفحه تاثیر آنچنانی بر بودجه خزش یک سایت ندارد.
اگر محتوا به طور کلی فاقد ارزش بوده و دیگر در سایت شما موجود نیست بهترین انتخاب کد 410 است. برای اطلاعات بیشتر مقاله http status codes را مطالعه کنید.

رضا مشهدی 26 اردیبهشت 1400

«اول از هر چیز باید بگم که نرخ خزش موضوعی نیست که باعث نگرانی شما بشه. اگر قرار را بر این بزاریم که محتوا بلافاصله بعد از انتشار کراول و ایندکس میشه، پس نگرانی درباره نرخ خزش منطقی نیست.

اگر تعداد صفحات سایت شما به چند صد عدد میرسه، کراول شدن کامل این صفحات امری بدیهی و روتینه. اینکه مشخص کنیم چه محتوایی در چه زمانی کراول بشه موضوعیه که باید دغدغه سایت های بزرگ با تعداد صفحات بالا باشه.»

سلام ببخشید موضع بالا که مطرح کردید یعنی بودجه خزش بیشتر برای سایت های بزرگ و با تعداد صفحه بالا هستش درسته ؟
برای سایت های کوچیکی که 100 تا 200 تا محتوا دارن که اهمیتی نداره درسته ؟

آکادمی وبسیما 26 اردیبهشت 1400

بله کاملا درست فرمودید، خود گوگل هم بارها روی این موضوع تاکید کرده

شیرین یحیایی 26 دی 1399

سلام برای افزایش بودجه خزش ریدایرکت 310 بهتر نتیجه داره یا 401

برایریایت فروشگاهی که متاسفانه صفحات تکراری دارند مثلا یک مدل موبایل با چند رم و حافظه که برای کاربرها در دسته ها بصورت جدا جدا نمایش داده میشه چکار باید کرد

مثلا
موبایلa30 32گیگ و رم 3
موبایل a30 64 گیگ و رم 4

آکادمی وبسیما 27 دی 1399

سلام دوست عزیز
نمیتوان به طور قطعی گفت که کدام روش تاثیر بیشتری بر بودجه خزش دارد ولی استفاده از آنها بستگی مستقیم با هدف شما دارد. کاربرد 401 و 310 کاملا متفاوت است.
در یک فروشگاه اینترنتی که محصولات با تغییرات جزئی ارائه میشوند بهترین روش تجمیع آنها در یک محصول و استفاده از ویژگی ها برای تعریف یک محصول متغیر است با این کار از تولید صفحات و محتوای تکراری جلوگیری میشود.

ابوالفضل ملاکی 16 آبان 1399

برای وب سایتی که صفحات زیادی ندارد و همچنین ماهیانه کمتر از 15 مقاله منتشر می‌کند هم بودجه خزش معنا و مفهوم دارد؟

آکادمی وبسیما 17 آبان 1399

سلام دوست عزیز
بودجه خزش فقط برای ایندکس محتوای جدید نیست. بازبینی و به روزرسانی محتوا و بررسی آن توسط گوگل نیز اهمیت بالایی دارد. به عنوان مثال با اضافه شدن نظرات کاربران به صفحه نیازمند بررسی و ایندکس مجدد هستیم. یا با اضافه شدن هر مقاله به سایت، محتوای صفحات چندین و دسته و برچسب هم تغییر میکند. در نتیجه مدیریت آن اهمیت بالایی خواهد داشت.

آرمان بابایی 31 اردیبهشت 1399

سلام در ابتدای مقاله اشاره کردید که مگه نگفتم بودجه سایت ات رو بیهوده سرِ ریدایرکت ها و صفحات 404 هدر نده!

در حالی که ما کلی زامبی پیج داریم و نیاز داریم ریدایرکت شان کنیم در این حالت چطور ایرادی ندارد؟

آکادمی وبسیما 31 اردیبهشت 1399

سلام دوست عزیز
اگر صفحات شما زامبی و فاقد جایگاه و ارزش هستند میتوانید آنها را با استفاده از کد 401 به جای 301 برای همیشه از نتایج جستجو حذف کنید.

سیروان 1 اردیبهشت 1399

سلام.
چند سوال در مورد صفحات بی ارزش سایت دارم که بودجه کراول هم ممکن است مصرف کند. این صفحات فاقد بازدید و رتبه مناسبی هستند
با این صفحات بی ارزش و قدیمی چیکار کنیم؟ نوایندکس یا کلا حذف؟ در کل پیشنهاد شما را میخام بدونم.
با حذف یا نو ایندکس ارزش صفحات باقیمانده بالاتر میره؟

آکادمی وبسیما 2 اردیبهشت 1399

سلام دوست عزیز
اگر صفحات شما فاقد ارزش محتوایی هستند و از نظر معنایی با سایر صفحات سایت مرتبط نیستند بهتر است آنها را حذف کنید. با حذف صفحات اضافی در بودجه خزش سایت شما صرفه جویی شده و از طرف دیگر لینک سازی های داخلی سایت هدفمند میشود. بهبود لینک سازی داخلی میتواند بر ارزش و اعتبار صفحات باقی مانده تاثیر مثبت داشته باشد.

حسین مدبر 19 فروردین 1399

خب بعد اینکه توی سرچ کنسول این ارور موبایل فرندلی باشه آیا روی سئو تاثیری نداره؟

آکادمی وبسیما 21 فروردین 1399

این خطا را باید جدی بگیریم چرا که میتواند بر سئو سایت ما تاثیرگذار باشد ولی اگر بررسی کردیم و مطمئن شدیم که مشکلی در سایت نیست میتوان آن را نادیده گرفت. گوگل هم در مراجعات بعدی و بررسی مجدد صفحه این خطا را حذف میکند.

حسین مدبر 19 فروردین 1399

سلام سایت من به تازگی mobile friendly تشخیص داده نمیشه در صورتی که کاملا سازگاره پیامی که میده اینه که بعضی از منابع لود نشدند شرکت هاستینگ گفت بخاطر افزونه کش هست ولی حتی با غیرفعال کردن و حذف کردنش هم مشکل حل نشد مسئله عجیب اینکه توی ابزار های سایت های مختلف نتایج متفاوتی میده و بعضی میگن هست بعضی نیست و حتی خود گوگل هم توی یک ساعتی میگه هست و بعضی وقتا میگه نیست تنها جوابی که تونستم پیدا کنم ولی مطمئن نیستم اینبود که نرخ خزش سایت کم باشه و توانایی خزش همه ۳۹ request رو نداشته باشه آیا درسته؟!

آکادمی وبسیما 19 فروردین 1399

سلام دوست عزیز
این اتفاق تقریبا برای همه سایت ها رخ میدهد و در برخی گزارشات با چنین خطایی مواجه میشویم.
ایراد از سایت یا هاست شما نیست و اگر مطمئن هستید که سایت شما Mobile Friendly است (طبق گزارشات مختلف) خطا را نادیده بگیرید.

رضا امیری 2 اسفند 1398

ببخشید دو تا سوال داشتم
1- آیا وقتی صفحه ای در سایت نوایندکس باشه باز از بودجه خزش سایت مصرف میشه؟
2- وقتی صفحه ای از سایت ریدایرکت شده باشه از بودجه خزش سایت مصرف میشه؟

آکادمی وبسیما 4 اسفند 1398

سلام دوست عزیز
1- زمانیکه یک صفحه از سایت شما نوایندکس است ربات های گوگل بازهم محتوای آن را بررسی میکنند. میزان لینک سازی های داخلی و خارجی صفحه تاثیر مستقیم بر مصرف بودجه خزش شما خواهد داشت. به عنوان مثال اگر یک صفحه نوایندکس شده است ولی در منوی اصلی سایت به آن لینک داده اید ممکن است بارها و بارها توسط ربات های گوگل بررسی شود.
2- با ریدایرکت کردن یک صفحه (از نوع 301) گوگل متوجه تغییر آدرس شده و پس از مدتی دیگر به آن صفحه مراجعه نمیکند. در این شرایط حتی لینک سازی های داخلی و خارجی موجب مصرف بودجه خزش شما نمیشود چرا که ربات های گوگل نیز مانند یک کاربر عادی به صفحه جدید منتقل میشوند.

مسعود فلاح 1 مهر 1398

سلام، ممنون از اطلاعات به روزتون.
حقیقتش من هم سالهاست با این مشکل روبرو هستم، که سایت رقبا سریع تر از ما اندکس می شود، و حتی گاهی مقاله با ارزش و خوبی هم نوشتیم و از ما کپی کردن ولی ما یک روز بعد از سایت رقیب اندکس شدم، تقریبا سه سال هست هر روز ساعت 11 خبر منتشر میکنیم و کاملا منظم هستیم ولی باز گوگل نامهربانه…
این موضوع رو هم بررسی میکنم شاید فرجی بشه

تحریریه آکادمی 1 مهر 1398

سلام مسعود جان،
اتفاقاً این مشکلی رو از خیلی ها شنیدیم. به نظر میرسه که گوگل رفتار نسبی در این مورد داره و مثل خیلی چیزهای دیگه تو سئو تنها به یک فاکتور توجه نمیکنه. (منظور همون 200 فاکتور رتبه بندیه).

بهترین توصیه ای که میتونیم بهتون بکنیم اینه که 8 روشی که توی مقاله بهش اشاره کردیم رو در سایت تون بهینه کنید.

توی این فرآیند هر سوال دیگه ای داشتی، حتماً ما رو در جریان بزار. موفق باشی