از خزش تا ایندکس
- کشف: گوگل آدرس را از لینک‌ها یا نقشه سایت پیدا می‌کند.
- خزش: Googlebot صفحه را دریافت و رندر می‌کند.
- ایندکس: محتوا تحلیل می‌شود، نسخه‌ی کنونیکال انتخاب می‌شود و در صورت ارزشمند بودن ذخیره می‌شود.
نکته‌ی مهم: گوگل همه‌ی صفحه‌هایی را که می‌خزد ایندکس نمی‌کند. ایندکس شدن یک امتیاز است، نه حق.
وضعیت‌های مهم در سرچ کنسول
- Discovered – currently not indexed: گوگل آدرس را می‌شناسد ولی هنوز نخزیده؛ معمولاً به خاطر کمبود اهمیت یا ظرفیت خزش.
- Crawled – currently not indexed: خزیده ولی ایندکس نکرده؛ اغلب نشانه‌ی ارزیابی کیفیت پایین یا تکراری بودن.
- Excluded by noindex: خودتان گفته‌اید ایندکس نشود (noindex).
- Duplicate…: گوگل صفحه‌ی دیگری را نسخه‌ی اصلی انتخاب کرده.
دلایل رایج ایندکس نشدن
- تگ noindex یا مسدود بودن در robots.txt؛
- محتوای کم‌ارزش یا تکراری؛
- نبودن لینک داخلی به صفحه (صفحه‌ی یتیم)؛
- خطاهای فنی (کد وضعیت اشتباه، رندر ناقص جاوااسکریپت)؛
- سایت تازه با اعتبار کم.
چطور بررسی کنیم؟
آدرس را در URL Inspection سرچ کنسول وارد کنید؛ وضعیت ایندکس و دلیل آن را می‌گوید. بعد از رفع مشکل، «Request indexing» را بزنید. جستجوی site: در گوگل فقط تخمینی است و برای بررسی دقیق قابل اعتماد نیست.