وقتی فیلترهای ووکامرس هزاران URL مصنوعی میسازند: نبرد با یک کراولر توزیعشده
چطور فیلترهای دستهبندی ووکامرس میتوانند از هر محصول واقعی، هزاران URL مصنوعی بسازند — و یک کراولر توزیعشده…
Noindex، Canonical و URLهای پارامتری چطور میتوانند ایندکس فروشگاه را به هم بریزند.

Noindex، Canonical و URLهای پارامتری چطور میتوانند ایندکس فروشگاه را به هم بریزند.
در اکثر فروشگاههای اینترنتی، صفحات فیلتر (رنگ، سایز، برند، محدوده قیمت) بهصورت خودکار URLهای جدید تولید میکنند: چیزی شبیه /product-category/lipstick/?color=red&size=m. این صفحات از نظر محتوا تقریباً همان صفحهی دستهبندی اصلی هستند، فقط ترتیب یا زیرمجموعهی محصولات فرق دارد. گوگل این را «محتوای تکراری» (duplicate content) میبیند، نه صفحهی جدید.
وقتی صدها URL پارامتری ایندکس میشوند، بودجهی خزش گوگل (crawl budget) روی سایت صرف صفحات تکراری بیارزش میشود، نه صفحات محصول و دستهبندی اصلی که واقعاً باید رتبه بگیرند. نتیجه معمولاً این است: صفحات اصلی دیرتر بهروزرسانی میشوند در ایندکس گوگل، رتبهی صفحات مهم بهخاطر رقابت داخلی بین نسخههای تکراری پایین میآید، و در Search Console گزارشهای «Duplicate without user-selected canonical» یا «Crawled – currently not indexed» زیاد میشوند.
سه ابزار اصلی برای این کار وجود دارد و باید با هم ترکیب شوند، نه جای هم:
Canonical tag: روی هر URL پارامتری، تگ کنونیکال باید به نسخهی اصلی و بدون پارامتر همان دستهبندی اشاره کند. این به گوگل میگوید «این نسخهی اصلی است، ارزش را به آن بده.»
Noindex هدفمند: برای ترکیبهای فیلتر که ارزش جستجوی مستقل ندارند (مثلاً فیلتر قیمت)، noindex,follow مناسبتر از canonical است، چون صریح میگوید این صفحه نباید در نتایج جستجو ظاهر شود.
مدیریت پارامتر در سطح ساختار: تا حد ممکن، فیلترهایی که ارزش سئو دارند (مثل برند یا نوع محصول) باید URL خودِ خوانا و ایستا داشته باشند، نه پارامتر پویا؛ و فیلترهای کمارزش باید کلاً از ایندکس خارج شوند.
تنظیم Canonical یا Noindex بهتنهایی کافی نیست اگر sitemap.xml همچنان این URLهای پارامتری را لیست کند یا لینک داخلی سایت مستقیم به آنها اشاره کند. باید هر سه لایه — canonical، ایندکس، و ساختار لینک داخلی — هماهنگ باشند تا مشکل واقعاً حل شود.