در دنیای سئو، گزارش‌های فنی (Technical) گاهی شبیه به یک هزارتوی بی‌پایان به نظر می‌رسند. یکی از بخش‌هایی که بیشترین سوال و چالش را برای سئوکاران، به‌خصوص در سطح جونیور، ایجاد می‌کند، بخش Pages در کنسول جستجوی گوگل است. وقتی ابعاد یک سایت بزرگ می‌شود، این بخش می‌تواند به جای راهنما، به منبعی برای استرس تبدیل شود. اما واقعیت این است که اگر بدانیم با چه ذهنیتی به این گزارش نگاه کنیم، نه‌تنها ترسناک نیست، بلکه کلید طلایی بهینه‌سازی بودجه خزش سایت ماست.

بخش Pages؛ یک گزارش یا یک لیست خطا؟

اولین و مهم‌ترین نکته‌ای که باید درک کنید این است: بخش Pages در حقیقت یک «لاگ» (Log) است، نه لزوماً لیستی از خطاها. گوگل در این بخش به ما می‌گوید: «من سایت شما، فایل ربات (Robots.txt) و نقشه‌ی سایت را دیدم و نتیجه‌ی مشاهداتم این موارد است.»

تصور کنید گوگل مثل یک بازرس ساختمان است که می‌گوید: «من دیدم درِ این اتاق قفل است.» حالا این به عهده‌ی شماست که بگویید: «بله، خودم قفلش کردم چون نمی‌خواستم کسی وارد شود» یا «ای وای، کلیدش گم شده و به اشتباه قفل مانده!»

بنابراین، وضعیتی مثل Noindex لزوماً بد نیست. اگر شما صفحه‌ی سبد خرید را عمداً از دسترس خارج کرده‌اید، گوگل فقط دارد تایید می‌کند که دستور شما را اجرا کرده است. خطا زمانی رخ می‌دهد که صفحات ارزشمند و محتوایی شما به اشتباه در این لیست‌ها قرار بگیرند.

استراتژی بررسی: از کجا شروع کنیم؟

برای اینکه در میان هزاران سطر داده غرق نشوید، بهترین راه استفاده از فیلترها است. شما باید یاد بگیرید که داده‌ها را مدیریت کنید:

  • فیلتر Sitemaps: همیشه بررسی را با گزینه‌ی “All submitted pages” شروع کنید. این‌ها صفحاتی هستند که خودتان به گوگل معرفی کرده‌اید و برایتان مهم هستند. اگر صفحه‌ای در نقشه سایت باشد ولی ایندکس نشود، اینجا دقیقاً همان‌جایی است که باید نگران شوید.
  • بخش Unsubmitted: صفحاتی را نشان می‌دهد که در نقشه سایت نیستند اما گوگل آن‌ها را پیدا و ایندکس کرده است. گاهی در اینجا متوجه می‌شوید صفحات برچسب یا بایگانی‌های تاریخ‌دار که اصلاً ارزش سئویی ندارند، بیهوده فضای ایندکس شما را اشغال کرده‌اند.

مفاهیم کلیدی به زبان ساده

در گزارش Pages با عباراتی روبه‌رو می‌شوید که هر کدام روایت خاص خود را دارند:

۱. معمای Crawled – currently not indexed

این یعنی گوگل صفحه را دیده، محتوای آن را خوانده، اما تصمیم گرفته فعلاً آن را وارد مخزن ایندکس خود نکند. چرا؟ معمولاً به دلیل کمبود بودجه خزش (Crawl Budget) یا بی‌کیفیت بودن محتوا از نظر گوگل. در سایت‌های بزرگ، این بخش پر از آدرس‌هایی است که پارامترهای فیلتر یا مرتب‌سازی (مثل قیمت یا جدیدترین) دارند و گوگل تمایلی به ایندکس کردن هزاران نسخه از یک صفحه را ندارد.

۲. وضعیت Discovered – currently not indexed

این وضعیت یک مرحله عقب‌تر است. گوگل فقط «فهمیده» چنین صفحه‌ای وجود دارد (مثلاً لینکش را در یک صفحه‌ی دیگر دیده) اما هنوز فرصت یا انگیزه‌ای پیدا نکرده که حتی آن را باز کند و ببیند داخلش چیست.

۳. تگ‌های کنونیکال (Canonical)

گوگل بسیار هوشمند است. گاهی شما آدرسی را کنونیکال می‌کنید به صفحه‌ی اصلی، اما گوگل می‌گوید: «نه! من این را نمی‌پذیرم چون محتوای این صفحه با مقصد کنونیکال یکی نیست.» در گزارش‌ها، عباراتی مثل “Google chose different canonical” به شما هشدار می‌دهند که گوگل به حرف شما گوش نداده و خودش تصمیم گرفته کدام نسخه را مرجع قرار دهد.

وقتی گزارش‌های کنسول کافی نیستند

یک محدودیت بزرگ در سرچ کنسول وجود دارد: سقف ۱۰۰۰ ردیف داده. اگر سایتی با ۱۰۰ هزار صفحه دارید و با ۵۰۰۰ خطای ۴۰۴ مواجه هستید، کنسول فقط ۱۰۰۰ مورد را به شما نشان می‌دهد. ۴۰۰۰ مورد دیگر کجا هستند؟ در چنین شرایطی، سئوکار حرفه‌ای به جای غرق شدن در پنل وب، به سراغ API سرچ کنسول و ابزارهایی مثل Screaming Frog می‌رود.

با اتصال این ابزارها، می‌توانید لیست کامل تمام صفحات را استخراج کنید و دقیقاً متوجه شوید کدام یو‌آر‌ال‌ها به چه دلیلی ایندکس نشده‌اند. اینجاست که تحلیل فنی معنا پیدا می‌کند.

مراقب ارورهای ۵۰۰ و ۴۰۴ باشید

در میان تمام گزارش‌ها، ارورهای سری 5xx (خطای سرور) و 4xx (خطای دسترسی) را باید جدی بگیرید.

  • خطای ۵۰۰: نشانه سلامت پایین سایت است. گاهی یک کد جاوا اسکریپت ساده در هدر سایت که از یک منبع خارجی فراخوانی می‌شود و با خطا مواجه شده، می‌تواند کل وضعیت سلامت سایت (Server Connectivity) را در گزارش‌های گوگل قرمز کند.
  • سافت ۴۰۴ (Soft 404): این یکی از فریبنده‌ترین‌هاست. صفحه کد ۲۰۰ (موفقیت‌آمیز) برمی‌گرداند اما محتوایی ندارد (مثلاً صفحه جست‌وجویی که هیچ نتیجه‌ای ندارد). گوگل این را می‌فهمد و به شما هشدار می‌دهد که این صفحه عملاً پوچ است.

گام نهایی: اصلاح و اعتبار‌سنجی

فراموش نکنید که پس از رفع هر مشکل، حتماً از دکمه‌ی Validate Fix استفاده کنید. گوگل به دلیل محدودیت منابع، ممکن است تا ماه‌ها به سراغ صفحه‌ای که قبلاً خطا داشته نرود. با زدن این دکمه، شما به گوگل سیگنال می‌دهید که: «من این بخش را تعمیر کردم، لطفاً دوباره بررسی‌اش کن.»

بخش Pages نه یک لیست سیاه، بلکه نقشه‌ی راهی برای درک رفتار ربات‌های گوگل در سایت شماست. با نگاه کردن به روند نمودارها (افزایشی یا کاهشی بودن ریدایرکت‌ها و خطاها)، می‌توانید قبل از اینکه رتبه سایت آسیب ببیند، جلوی فجایع تکنیکال را بگیرید. یادگیری این بخش، تفاوت بین یک سئوکار معمولی و یک متخصص فنی را رقم می‌زند.