محتوای تکراری (Duplicate Content) چیست؟ منابع رایج و راه‌حل‌های فنی
«گوگل سایت‌هایی را که محتوای تکراری دارند جریمه میکند.» این جمله یکی از رایج‌ترین باورهای سئو است و مثل بسیاری از باورهای رایج، فقط نیمی از آن درست است. گوگل برای محتوای تکراری معمولی «جریمه» ندارد؛ اما محتوای تکراری میتواند باعث شود نسخه اشتباهی از صفحه در نتایج نمایش داده شود، اعتبار میان چند URL تقسیم شود، بودجه خزش هدر برود و در موارد شدید، کیفیت کلی سایت پایین ارزیابی شود.
در این راهنما محتوای تکراری را از دو زاویه بررسی می‌کنیم: تکرار فنی که بدون قصد و به‌خاطر ساختار سایت ایجاد می‌شود، و تکرار محتوایی که به کیفیت و اصالت مربوط است. برای هر کدام، روش تشخیص و راه‌حل فنی را آورده‌ایم.
برای خواندن سریع هر بخش، روی عنوان آن کلیک کنید
محتوای تکراری چیست؟
محتوای تکراری (Duplicate Content) به بلوک‌های قابل‌توجهی از محتوا گفته می‌شود که در چند URL، چه داخل یک سایت و چه میان سایت‌های مختلف، یکسان یا بسیار شبیه‌اند.
گوگل در مستندات خود گفته بیشتر محتوای تکراری فریبنده نیست و سیستم‌هایش در چنین مواردی یکی از نسخه‌ها را به‌عنوان canonical انتخاب و بقیه را کنار می‌گذارند. مشکل وقتی شروع می‌شود که گوگل نسخه‌ای غیر از آنچه شما می‌خواهید انتخاب کند، یا حجم تکرار آن‌قدر زیاد باشد که بر درک و خزش سایت اثر بگذارد. تنها جایی که گوگل برخورد جدی دارد، تکرار عمدی برای دستکاری نتایج است؛ مثل اسکرپینگ و صفحات دروازه.
تکرار فنی: رایج‌ترین منابع
| منبع | مثال | راه‌حل |
|---|---|---|
| نسخه‌های دامنه | http و https، www و بدون www | ریدایرکت ۳۰۱ به یک نسخه |
| اسلش انتهایی | /seo و /seo/ | ریدایرکت به یک الگو |
| پارامترهای ردیابی | ?utm_source=instagram | canonical به نسخه بدون پارامتر |
| مرتب‌سازی و فیلتر | ?sort=price&color=red | canonical، noindex یا مسدود کردن خزش (فیسِتد نویگیشن) |
| صفحه‌بندی | /page/2/ با عنوان یکسان | عنوان متمایز؛ canonical به خود صفحه |
| محصول در چند دسته | /men/shoes/x و /sale/x | URL ثابت محصول یا canonical |
| نسخه چاپی یا AMP | /print/ یا /amp/ | canonical به نسخه اصلی |
| آرشیوهای وردپرس | برچسب، تاریخ، نویسنده با محتوای مشابه | noindex برای آرشیوهای کم‌ارزش |
تکرار محتوایی: مشکل عمیق‌تر
توضیحات محصول تولیدکننده
وقتی ده‌ها فروشگاه دقیقاً یک متن را برای یک محصول دارند، گوگل دلیلی برای ترجیح هیچ‌کدام نمی‌بیند و ممکن است بسیاری از این صفحات در وضعیت Crawled – currently not indexed بمانند. راه‌حل، توضیحات اختصاصی دست‌کم برای محصولات مهم است (سئو صفحه محصول).
صفحات شهری یا خدماتی با قالب یکسان
صدها صفحه که فقط نام شهر در آن‌ها عوض شده، هم تکراری‌اند و هم ممکن است صفحات دروازه تلقی شوند.
مقالات هم‌موضوع
چند مقاله که تقریباً یک سؤال را پاسخ می‌دهند، هم محتوای مشابه دارند و هم با هم رقابت می‌کنند (کنیبالیزیشن).
بازنشر محتوا
مقاله‌ای که هم در سایت شما و هم در رسانه‌های دیگر منتشر شده. گوگل ممکن است نسخه رسانه را اصلی بداند. راه‌حل: درخواست canonical یا noindex از ناشر همکار، یا انتشار نسخه متفاوت.
کپی شدن محتوای شما
سایت‌های دیگر محتوای شما را کپی می‌کنند. گوگل معمولاً نسخه اصلی را تشخیص میدهد؛ اگر کپی بالاتر از شما رتبه گرفت، می‌توانید درخواست حذف بر اساس قانون حق نشر DMCA به گوگل بدهید.
تشخیص محتوای تکراری
- سرچ کنسولدر گزارش Pages، وضعیت‌های «Duplicate without user-selected canonical» و «Google chose different canonical than user» را بررسی کنید.
- خزش سایتابزارهایی مثل اسکریمینگ فراگ عنوان، توضیحات و H1 تکراری و صفحات با محتوای مشابه (Near duplicates) را نشان می‌دهند.
- جستجوی عبارت دقیقیک جمله متمایز از صفحه را داخل گیومه در گوگل جستجو کنید تا نسخه‌های دیگر در وب پیدا شوند.
- URL Inspectionبرای صفحات مهم، canonical انتخابی گوگل را با canonical اعلام‌شده مقایسه کنید.
گوگل نسخه اشتباهی از صفحات سایتتان را نشان میدهد یا بخش زیادی از صفحات تکراری تشخیص داده شده‌اند؟
راه‌حل مناسب برای هر نوع تکرار
| نوع تکرار | مثال | راه‌حل پیشنهادی |
|---|---|---|
| نسخه‌های مختلف دامنه | http و https، با و بدون www | ریدایرکت ۳۰۱ به نسخه‌ی اصلی |
| اسلش انتهای URL | /page و /page/ |
ریدایرکت ۳۰۱ به یک شکل |
| پارامترهای ردیابی | ?utm_source=… |
کنونیکال به نسخه‌ی بدون پارامتر |
| مرتب‌سازی و فیلتر | ?orderby=price |
کنونیکال یا noindex |
| نسخه‌ی چاپی یا AMP | /page/print/ |
کنونیکال به نسخه‌ی اصلی |
| محصول در چند دسته | /mobile/phone-x و /samsung/phone-x |
یک URL ثابت محصول، مستقل از دسته |
| صفحات برچسب و دسته با محتوای یکسان | برچسب «سئو» و دسته‌ی «سئو» | noindex برچسب‌ها یا حذف یکی |
| مقالات هم‌موضوع | «سئو چیست» و «آشنایی با سئو» | ادغام و ریدایرکت ۳۰۱ |
| محتوای بازنشرشده در سایت دیگر | رپورتاژ یا مقاله‌ای که در چند سایت منتشر شده | کنونیکال بین‌دامنه‌ای یا نسخه‌ی بازنویسی‌شده |
کنونیکال؛ پیشنهاد، نه دستور
تگ کنونیکال به گوگل می‌گوید نسخه‌ی اصلی کدام است، اما گوگل آن را فقط به‌عنوان یک سیگنال در نظر می‌گیرد. اگر سیگنال‌های دیگر با کنونیکال تناقض داشته باشند، گوگل ممکن است نسخه‌ی دیگری را انتخاب کند. سیگنال‌هایی که باید با کنونیکال هماهنگ باشند:
- لینک‌های داخلی به نسخه‌ی کنونیکال اشاره کنند، نه نسخه‌های تکراری.
- نقشه‌ی سایت فقط نسخه‌ی کنونیکال را داشته باشد.
- hreflang به نسخه‌ی کنونیکال اشاره کند.
- ریدایرکت‌ها به نسخه‌ی کنونیکال بروند.
- نسخه‌ی کنونیکال واقعاً کامل‌ترین نسخه باشد، نه نسخه‌ی خلاصه.
در گزارش Pages سرچ کنسول، وضعیت «Duplicate, Google chose different canonical than user» یعنی گوگل پیشنهاد شما را نپذیرفته است. با ابزار URL Inspection ببینید گوگل کدام نسخه را انتخاب کرده و سیگنال‌ها را هماهنگ کنید. جزئیات در راهنمای تگ کنونیکال آمده است.
محتوای کپی‌شده توسط دیگران
سایت‌های دیگر ممکن است محتوای شما را کپی کنند. در بیشتر موارد، گوگل نسخه‌ی اصلی را تشخیص میدهد و مشکلی پیش نمی‌آید. اما اگر سایت کپی‌کار جای شما را در نتایج گرفته است:
- بررسی زمان ایندکسآیا صفحه‌ی شما زودتر ایندکس شده بود؟ اگر سایت جدید و کم‌اعتبار دارید و کپی‌کار سایت قدیمی‌تری است، ممکن است گوگل اشتباه کند.
- تماس با سایت کپی‌کاردرخواست حذف یا دست‌کم ذکر منبع با لینک.
- گزارش DMCA به گوگلاز طریق فرم حذف محتوای ناقض حق نشر گوگل.
- پیشگیریایندکس سریع محتوای جدید با لینک داخلی و نقشه‌ی سایت؛ تصاویر اختصاصی با نام برند؛ لینک‌های داخلی در متن که در نسخه‌ی کپی‌شده هم به سایت شما اشاره می‌کنند.
محتوای تکراری در سایت‌های چندزبانه و چندکشوری
نسخه‌های هم‌زبان برای کشورهای مختلف: اگر محتوای انگلیسی برای آمریکا و انگلیس تقریباً یکسان است، با hreflang مشخص کنید هر نسخه برای کدام کشور است. در این حالت گوگل آن‌ها را محتوای تکراری مشکل‌دار نمی‌داند. با این حال، بومی‌سازی واقعی، مثل واحد پول، املای محلی و مثال‌ها، بهتر از نسخه‌های کاملاً یکسان است. خدمات سئو بین‌المللی پاسخ این ساختار را طراحی میکند.
سوالات متداول
آیا گوگل برای محتوای تکراری جریمه میکند؟
برای تکرار معمولی خیر؛ فقط یک نسخه را نمایش میدهد. تکرار عمدی برای فریب مثل اسکرپینگ میتواند به اقدام دستی منجر شود.
چند درصد تشابه مشکل‌ساز است؟
عدد مشخصی وجود ندارد؛ مهم این است که صفحه ارزش متمایزی داشته باشد.
نقلقول از منابع دیگر محتوای تکراری است؟
نقلقول محدود همراه با تحلیل و منبع مشکلی ندارد.
اگر سایتی محتوای من را کپی کند چه کنم؟
معمولاً گوگل نسخه اصلی را تشخیص میدهد؛ در صورت مشکل، درخواست حذف DMCA بدهید.
جمع‌بندی
محتوای تکراری معمولی جریمه ندارد، اما کنترل را از دست شما خارج میکند: گوگل خودش تصمیم می‌گیرد کدام نسخه را نشان دهد. تکرار فنی را با ریدایرکت، canonical و مدیریت پارامترها حل کنید و تکرار محتوایی را با محتوای اختصاصی، ادغام صفحات هم‌موضوع و حذف صفحات کم‌ارزش. هدف این است که برای هر نیت جستجو، یک صفحه روشن و قوی وجود داشته باشد.
متخصص سئو و بازاریابی دیجیتال از سال ۲۰۰۹ دانش آموخته مهندسی نرم‌افزار از ایران و علوم رسانه و ارتباطات از کشور مجارستان, عاشق سفر و کاوش در فرهنگ‌ها، همواره در جستجوی دانش و تجربیات جدید.
همه مطالب ابوالفضل دانش (94)
دیدگاه شما درباره این مطلب