محتوای تکراری چه بلایی سر سایت شما می آورد؟(5 راهکار مفید و جدید)

موتورهای جستجو مانند گوگل یک مشکل دارند – به آن «محتوای تکراری» می گویند. محتوای تکراری به این معنی است که محتوای مشابه در چندین مکان (URL) در وب ظاهر می‌شود و در نتیجه موتورهای جستجو نمی‌دانند کدام URL را در نتایج جستجو نشان دهند. این می تواند به رتبه بندی یک صفحه وب لطمه بزند، و مشکل تنها زمانی بدتر می شود که افراد شروع به پیوند دادن به نسخه های مختلف محتوای یکسان کنند. این مقاله به شما کمک می کند تا دلایل مختلف محتوای تکراری را درک کنید و راه حل هر یک از آنها را بیابید.

محتوای تکراری چیست؟

محتوای تکراری محتوایی است که در چندین URL در وب در دسترس است. از آنجایی که بیش از یک URL محتوای یکسانی را نشان می‌دهد، موتورهای جستجو نمی‌دانند کدام URL را بالاتر در نتایج جستجو قرار دهند. بنابراین ممکن است هر دو URL را پایین‌تر رتبه‌بندی کنند و به سایر صفحات وب ترجیح دهند.

در این مقاله بیشتر به دلایل فنی محتوای تکراری و راه حل های آن می پردازیم. اگر می‌خواهید دیدگاه گسترده‌تری در مورد محتوای تکراری داشته باشید و بیاموزید که چگونه با محتوای کپی شده یا حذف شده یا حتی آدم‌خواری کلمات کلیدی مرتبط است ، به شما توصیه می‌کنیم این پست را بخوانید: محتوای تکراری چیست .

اجازه دهید این موضوع را با یک مثال توضیح دهیم

محتوای تکراری را می‌توان به قرار گرفتن در چهارراهی تشبیه کرد که علائم جاده‌ای در دو جهت مختلف برای یک مقصد مشخص می‌شوند: کدام جاده را باید طی کنید؟ بدتر از آن، مقصد نهایی نیز متفاوت است، اما فقط تا حدودی. به عنوان یک خواننده، ممکن است برای شما مهم نباشد که هنوز پاسخی را که برای آن آمده‌اید دریافت کنید، اما یک موتور جستجو باید انتخاب کند که کدام صفحه را در نتایج جستجو نشان دهد، زیرا، البته، نمی‌خواهد همان محتوا را دو بار نشان دهد.

فرض کنید مقاله شما در مورد  کلمه کلیدی x در  نشان داده می شود http://www.example.com/keyword-x/و همان محتوا نیز در http://www.example.com/article-category/keyword-x/. این وضعیت ساختگی نیست: در بسیاری از سیستم‌های مدیریت محتوای مدرن (CMS) اتفاق می‌افتد. سپس فرض کنید مقاله شما توسط چندین وبلاگ نویس انتخاب شده است و برخی از آنها به URL اول پیوند دارند، در حالی که برخی دیگر به آدرس دوم لینک می دهند. این زمانی است که مشکل موتور جستجو ماهیت واقعی خود را نشان می دهد: این   مشکل شماست . محتوای تکراری مشکل شماست زیرا این پیوندها هر دو URL های مختلف را تبلیغ می کنند. اگر همه آنها به یک URL لینک می دادند، شانس شما برای رتبه بندی برای  کلمه کلیدی x بیشتر  می شد.

اگر نمی‌دانید که آیا سایت شما از مشکلات محتوای تکراری رنج می‌برد، این ابزارهای کشف محتوای تکراری به شما کمک می‌کنند تا بفهمید!

چرا از محتوای تکراری در سایت خود جلوگیری کنید؟

محتوای تکراری به رتبه شما آسیب می زند. حداقل موتورهای جستجو نمی دانند کدام صفحه را به کاربران پیشنهاد دهند. و در نتیجه، تمام صفحاتی که موتورهای جستجو تکراری می بینند، در معرض خطر قرار گرفتن در رتبه پایین تر هستند. این بهترین حالت است. اگر مشکلات محتوای تکراری شما واقعاً بد است، به عنوان مثال اگر محتوای بسیار نازکی دارید که با محتوای کپی شده کلمه به کلمه ترکیب شده است، حتی ممکن است با اقدام دستی Google به دلیل تلاش برای فریب دادن کاربران روبرو شوید. بنابراین اگر می‌خواهید محتوای شما رتبه‌بندی شود، بسیار مهم است که اطمینان حاصل کنید که هر صفحه مقدار مناسبی از محتوای منحصر به فرد را ارائه می‌کند .

اگرچه این فقط یک مشکل برای موتورهای جستجو نیست. اگر کاربران شما به دنبال یک صفحه خاص هستند، اگر نتوانند صفحه مورد نظر خود را پیدا کنند، می تواند برای آنها واقعا خسته کننده باشد. بنابراین، مانند بسیاری از جنبه‌های سئو، مهم است که به مسائل محتوای تکراری خود برای تجربه کاربر و همچنین جستجو رسیدگی کنید.

دلایل محتوای تکراری

ده ها دلیل برای محتوای تکراری وجود دارد. بیشتر آنها فنی هستند: خیلی اوقات اتفاق نمی افتد که یک انسان تصمیم می گیرد محتوای یکسانی را در دو مکان مختلف قرار دهد بدون اینکه مشخص کند که کدام اصلی است. البته مگر اینکه پستی را شبیه سازی کرده باشید و به طور تصادفی منتشر کرده باشید. اما در غیر این صورت، برای بسیاری از ما غیر طبیعی است.

دلایل فنی زیادی وجود دارد و بیشتر به این دلیل اتفاق می افتد که توسعه دهندگان مانند یک مرورگر یا حتی یک کاربر فکر نمی کنند، چه رسد به یک عنکبوت موتور جستجو – آنها مانند یک برنامه نویس فکر می کنند. مقاله‌ای را که قبلاً ذکر کردیم، که در http://www.example.com/keyword-x/و ظاهر می‌شود، در نظر http://www.example.com/article-category/keyword-x/بگیرید. اگر از توسعه دهنده بپرسید، می گویند فقط یک بار وجود دارد.

درک نادرست از مفهوم URL

نه، آن توسعه دهنده دیوانه نشده است، آنها فقط به زبان دیگری صحبت می کنند. یک CMS احتمالاً وب‌سایت را نیرو می‌دهد، و در آن پایگاه داده تنها یک مقاله وجود دارد، اما نرم‌افزار وب‌سایت فقط اجازه می‌دهد همان مقاله در پایگاه داده از طریق چندین URL بازیابی شود. به این دلیل که از نظر توسعه‌دهنده، شناسه منحصربه‌فرد آن مقاله، شناسه مقاله در پایگاه داده است، نه URL. اما برای موتور جستجو، URL یک شناسه منحصر به فرد برای یک قطعه محتوا است. اگر آن را برای یک توسعه دهنده توضیح دهید، آنها شروع به دریافت مشکل می کنند. و پس از خواندن این مقاله، حتی می توانید بلافاصله راه حلی برای آنها ارائه دهید.

شناسه های جلسه

شما اغلب می خواهید بازدیدکنندگان خود را پیگیری کنید و به آنها اجازه دهید، به عنوان مثال، اقلامی را که می خواهند بخرند در سبد خرید ذخیره کنند. برای انجام این کار، باید به آنها یک «جلسه» بدهید. یک جلسه تاریخچه مختصری از کارهایی است که بازدیدکننده در سایت شما انجام داده است و می تواند شامل مواردی مانند موارد موجود در سبد خرید آنها باشد. برای حفظ آن جلسه به صورتی که بازدیدکننده از یک صفحه به صفحه دیگر کلیک می کند، شناسه منحصر به فرد آن جلسه – که شناسه جلسه نامیده می شود – باید در جایی ذخیره شود. رایج ترین راه حل این است که این کار را با کوکی ها انجام دهید. با این حال، موتورهای جستجو معمولا کوکی ها را ذخیره نمی کنند.

در آن مرحله، برخی از سیستم‌ها به استفاده از Session ID در URL بازمی‌گردند. این بدان معنی است که هر پیوند داخلی در وب سایت، شناسه جلسه را به URL خود اضافه می کند، و از آنجا که شناسه جلسه منحصر به آن جلسه است، یک URL جدید و در نتیجه محتوای تکراری ایجاد می کند.

پارامترهای URL مورد استفاده برای ردیابی و مرتب سازی

یکی دیگر از دلایل محتوای تکراری استفاده از پارامترهای URL است که محتوای صفحه را تغییر نمی‌دهند، به عنوان مثال در ردیابی پیوندها. می بینید، به یک موتور جستجو، http://www.example.com/keyword-x/و http://www.example.com/keyword-x/?source=rssURL یکسان نیست. دومی ممکن است به شما امکان دهد تا ردیابی کنید که افراد از چه منبعی آمده‌اند، اما همچنین ممکن است رتبه‌بندی خوب را برای شما دشوارتر کند – یک عارضه جانبی ناخواسته!

البته این فقط برای پارامترهای ردیابی نیست. برای هر پارامتری که می‌توانید به URL اضافه کنید که محتوای حیاتی محتوا را تغییر نمی‌دهد، اعمال می‌شود، خواه این پارامتر برای «تغییر مرتب‌سازی در مجموعه‌ای از محصولات» یا برای «نمایش نوار کناری دیگر» باشد: همه آن‌ها باعث تکرار می‌شوند. محتوا.

Scrapers و سندیکای محتوا

بیشتر دلایل محتوای تکراری یا “تقصیر” شما یا وب سایت شما است. با این حال، گاهی اوقات وب سایت های دیگر از محتوای شما با یا بدون رضایت شما استفاده می کنند. آنها همیشه به مقاله اصلی شما پیوند نمی دهند، و بنابراین موتور جستجو آن را “دریافت” نمی کند و باید با نسخه دیگری از همان مقاله مقابله کند. هرچه سایت شما محبوب تر شود، خراش های بیشتری بدست می آورید و این مشکل را بزرگتر و بزرگتر می کند.

ترتیب پارامترها

یکی دیگر از دلایل رایج این است که یک CMS از URL های تمیز و زیبا استفاده نمی کند، بلکه از URL هایی مانند /?id=1&cat=2, که در آن ID به مقاله و cat به دسته اشاره می کند، استفاده می کند. URL /?cat=2&id=1در اکثر سیستم‌های وب‌سایت نتایج یکسانی را ارائه می‌کند، اما برای یک موتور جستجو کاملاً متفاوت هستند.

صفحه بندی نظر

در وردپرس محبوب من، و همچنین در برخی از سیستم های دیگر، گزینه ای برای صفحه بندی نظرات شما وجود دارد. این منجر به کپی شدن محتوا در URL مقاله و URL مقاله + /comment-page-1/، /comment-page-2/ و غیره می‌شود.

صفحات سازگار با چاپگر

اگر سیستم مدیریت محتوای شما صفحات سازگار با چاپگر ایجاد کند و از صفحات مقاله خود به آنها پیوند دهید، Google معمولاً آنها را پیدا می کند، مگر اینکه به طور خاص آنها را مسدود کنید. حالا از خود بپرسید: می‌خواهید گوگل کدام نسخه را نشان دهد؟ یکی با تبلیغات و محتوای جانبی شما، یا آن که فقط مقاله شما را نشان می دهد؟

WWW در مقابل غیر WWW

این یکی از قدیمی‌ترین موارد در کتاب است، اما گاهی اوقات موتورهای جستجو هنوز اشتباه می‌کنند: WWW در مقابل محتوای تکراری غیر WWW، زمانی که هر دو نسخه سایت شما در دسترس هستند. یکی دیگر از موقعیت‌های کمتر رایج، اما یکی از مواردی که من نیز دیده‌ام ، محتوای تکراری HTTP در مقابل HTTPS است، که در آن محتوای یکسان روی هر دو ارائه می‌شود.

راه حل مفهومی: یک URL “متعارف”.

 یادداشت جانبی کنایه آمیز

Canonical اصطلاحی است که از سنت کاتولیک رومی نشات می گیرد، جایی که فهرستی از کتاب های مقدس ایجاد شده و به عنوان اصیل پذیرفته شده است. آنها به عنوان اناجیل متعارف عهد جدید شناخته می شدند. طنز ماجرا اینجاست که کلیسای کاتولیک رومی حدود 300 سال و مبارزات متعدد طول کشید تا به این فهرست متعارف برسد، و آنها در نهایت چهار نسخه از  همان داستان را انتخاب کردند …

همانطور که قبلاً دیدیم، این واقعیت که چندین URL به یک محتوا منتهی می شود یک مشکل است، اما می توان آن را حل کرد. فردی که در یک نشریه کار می‌کند معمولاً می‌تواند به راحتی به شما بگوید که URL “صحیح” برای یک مقاله خاص چیست، اما گاهی اوقات وقتی از سه نفر در یک شرکت می‌پرسید، سه پاسخ متفاوت دریافت می‌کنید…

این مشکلی است که نیاز به رسیدگی دارد زیرا در نهایت تنها یک (URL) می تواند وجود داشته باشد. به آن URL “صحیح” برای یک قطعه محتوا توسط موتورهای جستجو به عنوان URL متعارف اشاره می شود  .

شناسایی مشکلات محتوای تکراری

ممکن است ندانید که آیا مشکل محتوای تکراری در سایت خود دارید یا با محتوای خود. استفاده از گوگل یکی از ساده ترین راه ها برای شناسایی محتوای تکراری است.

چندین اپراتور جستجو وجود دارد   که در مواردی مانند این بسیار مفید هستند. اگر می خواهید تمام URL های سایت خود را که حاوی  مقاله X کلمه کلیدی شما هستند پیدا کنید  ، عبارت جستجوی زیر را در گوگل تایپ کنید:

site:example.com intitle:"Keyword X"

سپس گوگل تمام صفحاتی را در example.com که حاوی آن کلمه کلیدی هستند را به شما نشان می دهد. هرچه آن intitleبخش از پرس و جو را خاص تر کنید، حذف محتوای تکراری آسان تر است. می توانید از همین روش برای شناسایی محتوای تکراری در سراسر وب استفاده کنید. فرض کنید عنوان کامل مقاله شما  «کلمه کلیدی X – چرا عالی است» بود ، باید جستجو کنید:

intitle: "کلمه کلیدی X - چرا عالی است"

و گوگل تمام سایت هایی را که با آن عنوان مطابقت دارند به شما می دهد. گاهی اوقات حتی ارزش آن را دارد که یک یا دو جمله کامل از مقاله خود را جستجو کنید، زیرا ممکن است برخی از خراش ها عنوان را تغییر دهند. در برخی موارد، هنگامی که شما چنین جستجویی را انجام می دهید، ممکن است گوگل اعلانی مانند این را در صفحه آخر نتایج نشان دهد:

این نشانه آن است که گوگل در حال حاضر نتایج را «فریب‌زدایی» می‌کند. هنوز خوب نیست، بنابراین ارزش آن را دارد که روی پیوند کلیک کنید و سایر نتایج را مشاهده کنید تا ببینید آیا می توانید برخی از آنها را برطرف کنید یا خیر.

بیشتر بخوانید: DIY: بررسی محتوای تکراری »

راه حل های عملی برای محتوای تکراری

هنگامی که تصمیم گرفتید کدام URL، URL متعارف محتوای شما باشد، باید فرآیندی را برای متعارف سازی شروع کنید (بله، می دانم، سعی کنید آن را سه بار با صدای بلند و سریع بگویید). این بدان معنی است که ما باید به موتورهای جستجو در مورد نسخه متعارف یک صفحه بگوییم و اجازه دهیم آن را در اسرع وقت پیدا کنند. چهار روش برای حل مشکل به ترتیب اولویت وجود دارد:

1. عدم ایجاد محتوای تکراری
2. تغییر مسیر محتوای تکراری به URL متعارف
3. افزودن یک عنصر پیوند متعارف به صفحه تکراری
4. افزودن پیوند HTML از صفحه تکراری به صفحه متعارف

اجتناب از محتوای تکراری

برخی از دلایل بالا برای محتوای تکراری راه‌حل‌های بسیار ساده‌ای برای آن‌ها دارند:

• آیا Session ID در URL های شما وجود دارد؟
  اینها اغلب فقط در تنظیمات سیستم شما غیرفعال می شوند.
• آیا صفحات تکراری مناسب چاپگر دارید؟
  اینها کاملاً غیر ضروری هستند: فقط باید از یک شیوه چاپ استفاده کنید  .
• آیا از صفحه بندی نظرات در وردپرس استفاده می کنید؟
  فقط باید این ویژگی را (در قسمت تنظیمات » بحث ) در 99 درصد سایت ها غیرفعال کنید  .
• آیا پارامترهای شما ترتیب دیگری دارند؟
  به برنامه نویس خود بگویید که یک اسکریپت بسازد تا همیشه پارامترها را به یک ترتیب قرار دهد (این معمولاً به عنوان کارخانه URL شناخته می شود).
• آیا لینک های ردیابی مشکلاتی وجود دارد؟
  در بیشتر موارد، می توانید به جای ردیابی کمپین مبتنی بر پارامتر از ردیابی کمپین مبتنی بر تگ هش استفاده کنید.
• آیا مشکلات WWW در مقابل غیر WWW دارید؟
  یکی را انتخاب کنید و با تغییر مسیر یکی به دیگری به آن بچسبید  . همچنین می‌توانید در Google Webmaster Tools یک اولویت تنظیم کنید، اما باید هر دو نسخه نام دامنه را درخواست کنید.

اگر مشکل شما به این راحتی حل نمی شود، ممکن است همچنان ارزش تلاش کردن را داشته باشد. هدف باید جلوگیری از ظاهر شدن محتوای تکراری به طور کلی باشد، زیرا این بهترین راه حل برای مشکل است.

301 تغییر مسیر محتوای تکراری

در برخی موارد، غیرممکن است که به طور کامل سیستمی را که استفاده می کنید از ایجاد URL های اشتباه برای محتوا جلوگیری کنید، اما گاهی اوقات امکان تغییر مسیر آنها وجود دارد. اگر این برای شما منطقی نیست (که من می توانم درک کنم)، هنگام صحبت با توسعه دهندگان خود آن را در نظر داشته باشید. اگر شما  انجام  از برخی از مسائل محتوای تکراری خلاص، مطمئن شوید که شما تغییر مسیر همه آدرس ها مطالب تکراری قدیمی را به نشانیهای اینترنتی مناسب و متعارف.

با استفاده از پیوندها

گاهی اوقات شما نمی خواهید یا نمی توانید از شر نسخه تکراری یک مقاله خلاص شوید، حتی زمانی که می دانید URL اشتباه است. برای حل این مشکل خاص، موتورهای جستجو عنصر پیوند متعارف را معرفی کرده اند. در قسمت <head> سایت شما قرار می گیرد و به شکل زیر است:

<link rel="canonical" href="http://example.com/wordpress/seo-plugin/" />

در hrefبخش پیوند متعارف، URL کانونیکال صحیح مقاله خود را قرار می دهید. هنگامی که یک موتور جستجویی که از canonical پشتیبانی می کند، این عنصر پیوند را پیدا می کند، یک تغییر مسیر نرم 301 انجام می دهد و بیشتر ارزش پیوند جمع آوری شده توسط آن صفحه را به صفحه canonical شما منتقل می کند.

اگرچه این فرآیند کمی کندتر از تغییر مسیر 301 است، بنابراین اگر بتوانید فقط یک تغییر مسیر 301 را انجام دهید، همانطور که توسط جان مولر گوگل ذکر شده است ، ترجیح داده می شود  .

به خواندن ادامه دهید: rel=canonical • چیست و چگونه (نه) از آن استفاده کنیم »

بازگشت به محتوای اصلی

اگر نمی‌توانید هیچ یک از موارد بالا را انجام دهید، احتمالاً به این دلیل که بخش <head> سایتی که محتوای شما در آن ظاهر می‌شود را کنترل نمی‌کنید، افزودن پیوندی به مقاله اصلی در بالا یا پایین مقاله همیشه خوب است. اندیشه. ممکن است بخواهید این کار را در فید RSS خود با افزودن پیوندی به مقاله موجود در آن انجام دهید. برخی از خراش‌ها آن پیوند را فیلتر می‌کنند، اما برخی دیگر ممکن است آن را رها کنند. اگر Google با چندین پیوند که به مقاله اصلی شما اشاره می‌کنند، به‌زودی متوجه می‌شود که این نسخه معمولی واقعی است.

اگر افراد محتوای سایت شما را کپی کنند چه می شود؟[/readmore]

نتیجه گیری: محتوای تکراری قابل رفع است و باید رفع شود

محتوای تکراری در همه جا اتفاق می افتد. من هنوز با سایتی با بیش از 1000 صفحه مواجه نشده ام که حداقل مشکل محتوای تکراری کوچکی نداشته باشد. این چیزی است که باید دائماً مراقب آن باشید، اما قابل رفع است و پاداش‌های آن می‌تواند فراوان باشد. محتوای با کیفیت شما می تواند در رتبه بندی ها افزایش یابد، فقط با خلاص شدن از شر محتوای تکراری از سایت خود!

تناسب سئو فنی خود را ارزیابی کنید

رفع محتوای تکراری بخش ضروری سئوی فنی شما است. کنجکاو هستید که سئوی فنی کلی سایت شما چقدر مناسب است؟ ما یک آزمون فنی تناسب اندام SEO ایجاد کرده ایم که به شما کمک می کند تا بفهمید روی چه چیزی باید کار کنید!

رفرنس