محتوای تکراری چیست و چگونه محتوای تکراری را حذف کنیم

یه سناریو رو تصور کنید: سه تا مقاله‌ی تقریباً شبیه به هم توی سایتتون دارید، هر سه هم درباره‌ی یک موضوع. فکر می‌کنید «چه بهتر، شانسمون برای رتبه گرفتن سه برابر شده». ولی گوگل دقیقاً برعکس فکر می‌کنه. اون می‌مونه که کدوم یکی رو به کاربر نشون بده و وقتی نتونه تصمیم بگیره، معمولاً هیچ‌کدوم رو جدی نمی‌گیره. این ماجرا اسمش محتوای تکراری یا Duplicate Content هست و توی وردپرس خیلی راحت‌تر از چیزی که فکرشو بکنید اتفاق می‌افته.

توی این مقاله می‌خوایم ببینیم محتوای تکراری دقیقاً چیه، چرا برای سئو دردسر درست می‌کنه، چطوری پیداش کنیم و مهم‌تر از همه، چطوری از شرش خلاص بشیم.

محتوای تکراری (Duplicate Content) چیست؟

محتوای تکراری یعنی یک محتوای یکسان یا خیلی شبیه به هم، توی چند تا آدرس مختلف در دسترس باشه. حالا این «چند تا آدرس» می‌تونه توی سایت خودتون باشه یا توی سایت‌های مختلف.

فرض کنید یه مقاله درباره‌ی «آموزش نصب وردپرس» نوشتید، شش ماه بعد یادتون رفته و دوباره یه مقاله با همون موضوع و تقریباً همون حرف‌ها نوشتید. حالا دو تا صفحه دارید که دارن سر یک کلمه‌ی کلیدی با هم رقابت می‌کنن. مشکل اینجاست که رقیب‌شون همدیگه‌ان، نه سایت‌های دیگه.

انواع محتوای تکراری

محتوای تکراری دو مدل داره:

تکراری داخلی (Internal): وقتی که تکرار توی خود سایتتون اتفاق افتاده. مثل همون مثال دو تا مقاله‌ی مشابه، یا صفحات آرشیوی که متن مقاله‌ها رو کامل نشون میدن.

تکراری خارجی (External): وقتی محتوای شما عیناً توی یه سایت دیگه هم هست. یا کسی محتواتون رو کپی کرده، یا خودتون یه متن رو از جایی برداشتید، یا مثلاً توضیحات محصول رو مستقیم از سایت تولیدکننده کپی کردید (این یکی توی فروشگاه‌های اینترنتی خیلی رایجه).

آیا گوگل بابت محتوای تکراری سایت را پنالتی می‌کند؟

این سوءتفاهم خیلی جا افتاده و بذارید همین‌جا تکلیفشو روشن کنیم: نه، گوگل به‌خاطر صرفِ داشتن محتوای تکراری سایتتون رو جریمه نمی‌کنه. خود گوگل هم بارها اینو گفته.

ولی این خبر خوب رو زیاد جدی نگیرید. اینکه پنالتی نمی‌شید به این معنی نیست که ضرر نمی‌کنید. آسیب محتوای تکراری از جنس جریمه نیست، از جنس هدر رفتنه. یعنی به‌جای یه صفحه‌ی قوی، چند تا صفحه‌ی نصفه‌نیمه دارید که هیچ‌کدوم به جایی نمی‌رسن. تنها استثنا هم جاییه که یکی عمداً و در مقیاس بزرگ محتوای بقیه رو کپی می‌کنه؛ اون دیگه بحثش فرق داره و اونجا واقعاً پای جریمه وسط میاد.

تأثیر محتوای تکراری بر سئو سایت

خب حالا که پنالتی در کار نیست، دقیقاً چه بلایی سرمون میاد؟ سه تا اتفاق:

گوگل نمی‌داند کدام صفحه را نشان بدهد

وقتی خزنده‌های گوگل به سایتتون سر می‌زنن و با دو سه تا نسخه‌ی مشابه از یک محتوا روبه‌رو می‌شن، باید یکی رو انتخاب کنن. این انتخاب رو خودشون انجام میدن و لزوماً همون صفحه‌ای نیست که شما دوست دارید. ممکنه صفحه‌ی ضعیف‌تر یا حتی صفحه‌ی آرشیو رو انتخاب کنه و صفحه‌ی اصلیتون عملاً از نتایج غیب بشه.

اعتبار بین چند صفحه تقسیم می‌شود

این مهم‌ترین ضرره. فرض کنید ده تا سایت به محتوای شما لینک دادن، ولی چون سه تا نسخه از اون محتوا دارید، این ده تا لینک بین سه تا آدرس پخش شده. یعنی به‌جای یک صفحه با ده تا بک‌لینک، سه تا صفحه دارید با سه چهار تا بک‌لینک. قدرتی که می‌تونست یکجا جمع بشه، خرد شده.

بودجه خزش (Crawl Budget) هدر می‌رود

گوگل برای هر سایت یه سهمیه‌ی مشخص از خزش در نظر می‌گیره. حالا اگه ربات گوگل وقتشو صرف خزیدن صد تا صفحه‌ی تکراری بکنه، طبیعتاً کمتر به صفحات مهم و جدیدتون می‌رسه. برای سایت‌های کوچیک شاید خیلی محسوس نباشه، ولی اگه فروشگاه اینترنتی با چند هزار صفحه دارید، این موضوع کاملاً به چشم میاد.

چرا در وردپرس محتوای تکراری ایجاد می‌شود؟

اینجا جاییه که خیلی‌ها غافلگیر می‌شن. ممکنه شما هیچ‌وقت آگاهانه محتوای تکراری تولید نکرده باشید، ولی خود وردپرس به‌صورت پیش‌فرض کلی نسخه‌ی تکراری براتون می‌سازه. بیاید ببینیم کجاها:

آرشیو دسته‌بندی، برچسب و نویسنده

وردپرس برای هر دسته، هر تگ و هر نویسنده یه صفحه‌ی آرشیو می‌سازه. حالا اگه قالبتون به‌جای خلاصه، متن کامل مقاله رو توی این آرشیوها نشون بده، عملاً همون مقاله توی چند تا آدرس تکرار شده. تگ‌ها مخصوصاً خطرناکن؛ خیلی‌ها عادت دارن برای هر مقاله ده تا برچسب بزنن و بعد صدها صفحه‌ی آرشیو بی‌ارزش دارن.

صفحه‌بندی (Pagination)

آدرس‌هایی مثل /page/2 و /page/3 که معمولاً عنوان و توضیحات مشابهی با صفحه‌ی اول دارن.

صفحات پیوست (Attachment Page)

وردپرس برای هر تصویری که آپلود می‌کنید یه صفحه‌ی مجزا می‌سازه که تقریباً هیچی توش نیست. اگه پونصد تا عکس آپلود کردید، پونصد تا صفحه‌ی تقریباً خالی دارید.

نسخه‌های مختلف آدرس سایت

سایتتون هم با www باز می‌شه هم بدون www؟ هم با http هم با https؟ برای گوگل اینا چهار تا سایت متفاوتن با محتوای کاملاً یکسان. این یکی از رایج‌ترین و درعین‌حال ساده‌ترین مشکلات برای رفع کردنه.

پارامترهای URL و جستجوی داخلی

آدرس‌هایی مثل ?s=وردپرس یا فیلترهای فروشگاهی (رنگ، سایز، مرتب‌سازی بر اساس قیمت) هر کدوم یه URL جدید می‌سازن که محتواش تقریباً با صفحه‌ی اصلی یکیه.

کپی شدن محتوا توسط سایت‌های دیگه

این یکی دست خودتون نیست ولی خب، اتفاق می‌افته.

چگونه محتوای تکراری سایت را پیدا کنیم؟

قبل از اینکه بخواید چیزی رو درست کنید، باید بدونید مشکل کجاست. سه تا راه ساده براتون داریم:

گزارش Pages در سرچ کنسول

بهترین و رایگان‌ترین ابزارتون همینه. برید توی گوگل سرچ کنسول، بخش Indexing و بعد Pages. اونجا دنبال این دو تا عبارت بگردید:

• Duplicate without user-selected canonical — یعنی گوگل صفحه رو تکراری تشخیص داده و شما هیچ کنونیکالی براش تعیین نکردید.
• Duplicate, Google chose different canonical than user — یعنی شما یه کنونیکال گذاشتید ولی گوگل قبولش نکرده و خودش یکی دیگه رو انتخاب کرده.

این دومی معمولاً یعنی محتوای صفحه‌ی موردنظرتون اونقدر ضعیفه که گوگل ترجیح داده صفحه‌ی دیگه‌ای رو انتخاب کنه.

دستور site: توی گوگل

ساده‌ترین راه. توی گوگل بنویسید site:yoursite.com و ببینید چند تا صفحه ایندکس شده. اگه عدد خیلی بیشتر از تعداد واقعی محتواهاتونه، یه جای کار می‌لنگه. می‌تونید دقیق‌ترش کنید:

site:yoursite.com intitle:"عنوان مقاله‌تون"

اگه چند تا نتیجه برگشت، جوابتون رو گرفتید.

ابزارهای تخصصی

اگه می‌خواید کار حرفه‌ای‌تری بکنید، Siteliner درصد محتوای تکراری داخلی سایتتون رو بهتون میده (نسخه‌ی رایگانش تا ۲۵۰ صفحه رو بررسی می‌کنه). Copyscape برای وقتیه که می‌خواید ببینید کسی محتواتون رو کپی کرده یا نه. Screaming Frog هم برای وقتیه که می‌خواید کل سایت رو کرال کنید و عنوان‌ها و توضیحات تکراری رو یکجا ببینید.

روش‌های حذف و رفع محتوای تکراری در وردپرس

حالا رسیدیم به بخش اصلی. اینجا یه نکته‌ی مهم هست که خیلی‌ها اشتباه می‌کنن: برای هر نوع محتوای تکراری یه راه‌حل جدا داریم. همه‌چیز رو نمی‌شه با ریدایرکت حل کرد.

ادغام محتواها و نگه داشتن نسخه‌ی کامل‌تر

اگه دو تا مقاله‌ی مشابه دارید، بهترین کار اینه که بشینید و یکی‌شون کنید. یعنی نکات خوب مقاله‌ی ضعیف‌تر رو بردارید و به مقاله‌ی قوی‌تر اضافه کنید. آخرش یه مقاله‌ی جامع دارید به‌جای دو تا مقاله‌ی نصفه.

بعدش صفحه‌ی حذف‌شده رو با ریدایرکت 301 به مقاله‌ی اصلی وصل کنید تا اعتبارش هدر نره. جزئیات ریدایرکت رو پایین‌تر توضیح میدیم.

استفاده از تگ Canonical

کنونیکال در واقع یه یادداشت برای گوگله که میگه: «این صفحه‌ای که داری می‌بینی، نسخه‌ی اصلی نیست؛ نسخه‌ی اصلی اونجاست.» شکلش اینه:

html

<link rel="canonical" href="https://yoursite.com/original-post/" />

کنونیکال برای وقتیه که می‌خواید هر دو صفحه باقی بمونن ولی گوگل فقط یکی رو جدی بگیره. مثلاً توی فروشگاه که یه محصول با فیلترهای مختلف چند تا URL داره، منطقی نیست صفحات فیلتر رو حذف کنید، کاربر بهشون نیاز داره. فقط کافیه به گوگل بگید همه‌شون به یک صفحه‌ی اصلی برمی‌گردن.

خبر خوب اینکه هم Yoast و هم Rank Math به‌صورت خودکار برای هر مقاله کنونیکال می‌ذارن. توی تنظیمات پیشرفته‌ی هر پست هم می‌تونید دستی تغییرش بدید.

نوایندکس کردن صفحات کم‌ارزش

بعضی صفحات نه باید حذف بشن، نه ارزش ایندکس شدن دارن. مثل آرشیو برچسب‌ها، آرشیو نویسنده (وقتی سایتتون تک‌نویسنده‌ست) یا نتایج جستجوی داخلی. برای اینا از noindex استفاده کنید:

توی Rank Math برید به General Settings > No Index یا از بخش تنظیمات هر نوع آرشیو، گزینه‌ی ایندکس رو خاموش کنید. توی Yoast هم مسیر Search Appearance > Taxonomies رو ببینید و برای برچسب‌ها گزینه‌ی «Show in search results» رو روی No بذارید.

چند تنظیم سریع که همین امروز باید انجام بدید

اینا کارهای پنج دقیقه‌این که خیلی از مشکلات وردپرس رو حل می‌کنن:

1. صفحات پیوست رو ریدایرکت کنید. توی Yoast مسیر Search Appearance > Media و توی Rank Math بخش General Settings > Links گزینه‌ی Redirect Attachment URLs رو فعال کنید.
2. یک نسخه از دامنه رو انتخاب کنید. فقط https://yoursite.com (یا با www، فرقی نداره کدوم، فقط یکی) و بقیه رو بهش ریدایرکت کنید.
3. آرشیو نویسنده رو خاموش کنید اگه سایتتون فقط یه نویسنده داره.
4. از برچسب‌ها کم استفاده کنید. برای هر مقاله دو سه تا برچسب کافیه، اونم برچسب‌هایی که واقعاً بین چند مقاله مشترکن.
5. مراقب افزونه‌های کپی پست باشید. افزونه‌هایی مثل Duplicate Post خیلی کاربردی‌ان، ولی اگه یادتون بره نسخه‌ی کپی رو پیش‌نویس نگه دارید، بلافاصله یه محتوای تکراری تمام‌عیار دارید.

ریدایرکت چیست؟

ریدایرکت یعنی انتقال خودکار کاربر (و ربات گوگل) از یه آدرس به آدرس دیگه. وقتی صفحه‌ای رو حذف کردید یا آدرسشو عوض کردید، ریدایرکت باعث می‌شه کسی که به آدرس قدیمی می‌ره، مستقیم بره به آدرس جدید و با خطای ۴۰۴ روبه‌رو نشه.

دو نوع ریدایرکت بیشتر به کارتون میاد: ۳۰۱ و ۳۰۲.

ریدایرکت 301 (انتقال دائمی)

این همون چیزیه که برای حذف محتوای تکراری لازم دارید. ریدایرکت ۳۰۱ به گوگل میگه «این صفحه برای همیشه رفته اونجا، از این به بعد اون آدرس رو حساب کن».

سؤالی که همیشه پرسیده می‌شه: اگه صفحه‌ای که رتبه‌ی خوبی داره رو ریدایرکت کنیم، امتیازش از بین می‌ره؟ نه. با ۳۰۱ عمده‌ی اعتبار صفحه به آدرس جدید منتقل می‌شه. برای همین به این نوع ریدایرکت میگن «انتقال اعتبار».

ریدایرکت 302 (انتقال موقت)

۳۰۲ یعنی «این صفحه فعلاً اینجا نیست، ولی برمی‌گرده». گوگل با دیدن ۳۰۲ آدرس قدیمی رو توی ایندکس نگه می‌داره و منتظر می‌مونه.

کِی به دردتون می‌خوره؟ مثلاً صفحه‌ی یه محصول فصلی که چند ماه از سایت برداشتید، یا صفحه‌ای که دارید بازطراحیش می‌کنید و می‌خواید موقتاً کاربرا رو جای دیگه بفرستید.

تفاوت ریدایرکت 301 و 302

نکته‌ای که خیلی گرون تموم می‌شه: بعضی وقت‌ها آدما بدون توجه از ۳۰۲ برای انتقال دائمی استفاده می‌کنن. نتیجه‌ش اینه که اعتبار صفحه منتقل نمی‌شه و ماه‌ها بعد تازه می‌فهمن چرا رتبه‌شون برنگشته. اگه شک دارید، تقریباً همیشه ۳۰۱ گزینه‌ی درسته.

آموزش ریدایرکت کردن صفحات در وردپرس

خب بریم برای ریدایرکت کردن صفحات تکراری. البته برای اینکه بتونید ریدایرکت رو یاد بگیرید قبلا یه مقاله در موردش نوشتیم: ریدایرکت چیست و چه کاربردی دارد؟ با ذکر مثال موردی

روش اول: افزونه Redirection

راحت‌ترین راه برای اکثر آدما همینه.

نصب و فعال‌سازی: برید به افزونه‌ها > افزودن، اسم Redirection رو جستجو کنید، نصبش کنید و فعالش کنید. بعد از فعال‌سازی، یه گزینه‌ی جدید زیر منوی «ابزارها» اضافه می‌شه.

تنظیمات اولیه: اولین بار که واردش می‌شید یه ویزارد نصب بهتون نشون میده. روی «شروع نصب» بزنید. توی صفحه‌ی بعدی گزینه‌ی مربوط به ذخیره‌سازی گزارش ریدایرکت‌ها و خطاهای ۴۰۴ رو فعال کنید (این خیلی به کارتون میاد چون بعداً می‌تونید ببینید کاربرا دنبال کدوم صفحات نبوده می‌گردن). بعد «ادامه» و در آخر «تمام» رو بزنید.

ساخت ریدایرکت جدید: حالا پایین صفحه دو تا فیلد می‌بینید:

• Source URL: آدرس صفحه‌ی قدیمی (اونی که حذف کردید)
• Target URL: آدرس صفحه‌ی جدید (اونی که می‌خواید کاربر بره)

آدرس رو به‌صورت نسبی بنویسید، یعنی /old-post/ نه آدرس کامل. و حواستون باشه که پیوند یکتای پست رو بذارید، نه آدرس صفحه‌ی ویرایش توی wp-admin. این اشتباه رایجیه.

برای تغییر نوع ریدایرکت (۳۰۱ یا ۳۰۲) روی آیکون چرخ‌دنده کنار فرم بزنید. پیش‌فرضش ۳۰۱ هست که برای کار ما درسته.

روش دوم: ریدایرکت دستی از پنل هاست

اگه نمی‌خواید افزونه اضافه کنید، وارد سی‌پنل یا دایرکت‌ادمین بشید و دنبال بخش Redirects بگردید. اونجا آدرس مبدأ و مقصد رو وارد کنید و نوع ریدایرکت رو انتخاب کنید. مزیتش اینه که بار اضافه‌ای روی وردپرس نمی‌ذاره.

روش سوم: ریدایرکت با فایل htaccess.

این سریع‌ترین روشه چون قبل از لود شدن وردپرس اجرا می‌شه، ولی حساس‌ترین هم هست. قبل از هر تغییری حتماً از فایل بکاپ بگیرید، فقط حواستون باشه یه اشتباه کوچیک کل سایتتون رو از دسترس خارج می‌کنه.

فایل .htaccess توی پوشه‌ی اصلی سایت (public_html) قرار داره. برای ریدایرکت یه صفحه:

apache

Redirect 301 /old-page/ https://yoursite.com/new-page/

و برای اینکه همه‌ی نسخه‌های سایت به نسخه‌ی https و بدون www منتقل بشن:

apache

RewriteEngine On
RewriteCond %{HTTPS} off [OR]
RewriteCond %{HTTP_HOST} ^www\. [NC]
RewriteRule ^(.*)$ https://yoursite.com/$1 [L,R=301]

این کدها رو بالای بخش # BEGIN WordPress بذارید، نه وسطش.

چطور از ایجاد محتوای تکراری جلوگیری کنیم؟

پیشگیری همیشه از درمان راحت‌تره. این چک‌لیست رو یه جا نگه دارید:

• قبل از نوشتن هر مقاله، با site: چک کنید که موضوع مشابهی توی سایت نداشته باشید.
• برای هر کلمه‌ی کلیدی اصلی فقط یک صفحه بسازید.
• توضیحات محصول رو خودتون بنویسید، از سایت تولیدکننده کپی نکنید.
• اگه محتوایی رو جای دیگه هم منتشر می‌کنید، ازشون بخواید کنونیکال به سایت شما بذارن.
• برچسب‌ها رو کنترل‌شده استفاده کنید و آرشیوهای بی‌ارزش رو نوایندکس کنید.
• هر چند ماه یک‌بار گزارش Pages سرچ کنسول رو مرور کنید.

سؤالات متداول

جمع‌بندی

محتوای تکراری از اون مشکلاتیه که سروصدا نمی‌کنه. سایتتون داون نمی‌شه، ارور نمی‌ده، فقط یواش‌یواش پتانسیلتون رو می‌خوره. خبر خوب اینه که رفعش هم پیچیده نیست: اول با سرچ کنسول و دستور site: ببینید کجاها مشکل دارید، بعد تصمیم بگیرید که هر صفحه رو باید ادغام و ریدایرکت کنید، کنونیکال بذارید یا نوایندکس کنید.

اگه فقط وقت یه کار رو دارید، برید سراغ تنظیمات افزونه سئوتون و آرشیوهای بی‌ارزش رو نوایندکس کنید. همین یه کار معمولاً بیشترین تعداد صفحات تکراری رو یکجا از سر راه برمی‌داره. شاد و سربلند باشید. 🙂

تیم تولید محتوا

ما در تیم تولید محتوای میهن وردپرس در تلاش هستیم تا بهترین مقالات آموزشی در زمینه وردپرس و کسب‌و‌کارهای اینترنتی را تهیه کنیم. صحت محتوای این صفحه توسط رضا راد بررسی خواهد شد.