محتوای تکراری: راهنمای جامع duplicate content

محتوای تکراری یا duplicate content یکی از مشکلات شایع در سئو است. در این مقاله به طور جامع علل ایجاد محتوای تکراری و نحوه رفع آن را اموزش داده ایم.

محتوای تکراری یک از مشکلاتی است که بسیاری از صاحبان وب سایت ها و وب مستران با آن مواجه هستند. وجود محتوای تکراری در برخی وب سایت ها به خصوص در طراحی سایت فروشگاهی امری اجتناب ناپذیر است و گوگل نیز این موضوع را درک می کند. اما باید تعداد صفحات دارای محتوای تکراری به حداقل برسد و یا به وسیله تکنیکال سئو آن ها را مدیریت کرد.
وجود محتوای تکراری دلایل مختلفی دارد که در این نوشتار تک تک این موارد را بررسی خواهیم کرد و راه حل رفع آن را نیز آموزش خواهیم داد. بنابراین اگر شما نیز در وب سایت خود دچار مشکل محتوای تکراری هستید و یا می خواهید نحوه مدیریت این صفحات را بدانید، شما را به خواندن این مقاله دعوت می کنیم.

محتوای تکراری چیست؟

تعریف گوگل از محتوای تکراری به شرح زیر است
محتوای تکراری یا duplicate content به معنای وجود دو یا چند URL متفاوت با محتوای دقیقا یکسان یا شبیه به هم است.

دو نوع محتوای تکراری وجو دارد:
محتوای تکراری خارج سایت
محتوای تکراری داخل سایت

محتوای تکراری خارجی وجود دو یا چند صفحه با دامنه های مختلف است که برخی وب مسترها با هدف گول زدن گوگل قصد کسب رتبه را دارند و از طریق کپی کردن محتوا، جمع آوری محتوا و یا چرخش محتوا اقدام به این کار می کنند. اما گوگل با ارائه الگوریتم پنگوئن می تواند به سادگی متوجه این موضوع شود و سایت متخلف را پنالتی کند.
محتوای تکراری داخل سایت ناشی از طراحی سایت ضعیف و یا ساختار سایت بد ناشی می شود. علت ایجاد این صفحات باید بررسی شوند و نسبت به رفع آن ها اقدام شود.

آیا محتوای تکراری به سئو سایت آسیب می رساند؟

گوگل اهمیت زیادی به محتوای یکتا و بارزش می دهد. از نظر گوگل لزومی ندارد یک محتوای مشابه دو یا چند بار در نتایج ظاهر شوند. گوگل به محتوای تکراری اهمیت نمی دهد و آن ها را از ایندکس خارج می کند. در نتیجه اگر داخل وب سایت تعداد زیادی صفحه با محتوای تکراری داشته باشید، گوگل آن ها را خزش می کند اما ایندکس نمی کند. در نتیجه بودجه خزش سایت که می توانست به صفحات مهم تر و دارای محتوای با ارزش تر اختصاص یابد، به هدر خواهد رفت.
از یک سو وجود محتوای تکراری سبب سردرگمی گوگل در انتخاب صفحه اصلی یک محتوا برای نمایش در نتایج خود می شود. در نتیجه ممکن است قدرت لینک ها و محتوا بین چندین صفحه تقسیم شود. در این حالت صفحه اصلی به سختی رتبه می گیرد.

بعد از اگاهی از تاثیر duplicate content حال نوبت به بررسی عوامل ایجاد محتوای تکراری و راه حل رفع آم است. در ادامه این آموزش با ما همراه باشید.

دلایل ایجاد محتوای تکراری
1-رسیدن به یک صفحه خاص از چندین مسیر

بسیاری از وب سایت های فروشگاهی این مشکل وجود دارد. علت این است که اغلب سیستم های مدیریت محتوا (CMS) این امکان را می دهند که محصولات در چندین برچسب و یا دسته بندی قرار بگیرند.
این ویژگی می تواند تجربه کاربری خوبی برای کاربر باشد، اما باعث تولید چندین URL منحصر به فرد برای مسیری که به یک محصول ختم می شود، خواهد شد

مانند مسیر های زیر:
https://Domain.com/flooring/bathroom/books/fakebook-by-fake-author
https://Domain.com/bathroom/books/flooring/fakebook-by-fake-author
https://Domain.com/books/flooring/bathroom/fakebook-by-fake-autho
راه حل: براب رفع این مشکل می توانید تنها یک مسیر برای رسیدن به هر محصول طراحی کنید.

https://www.myfakesite.com/products/fake-book-by-fake-author

یا

https://www.myfakesite.com/flooring/fake-book-by-fake-author

. البته این یک راه حل ایده آل نیست. زیرا محدود کردن مسیرهای دیگر تجربه کاربری خوبی نخواهد داشت.
راه حل دیگر استفاده از تگ canonical برای هر مسیر متفاوت غیر از مسیر اصلی است.
با انجام این کار موتورهای جست و جو تمام صفحاتی که دارای این تگ هستند را ایندکس نمی کند و ارزش این صفحات را به صفحه اصلی منتقل می کند.

2- وجود چندین نسخه از یک URL

یک دامنه می تواند از چندین آدرس فراخوانی شود و تمامی آدرس ها دارای محتوای دقیقا مشابه هم باشد. مانند:
http://site.com
http:///www.site.com
https://site.com
https://www.site.com
تمامی این آدرس ها از نظر گوگل متفاوت هستند و به طور جداگانه آن ها را ایندکس می کند. بنابراین محتوای تکراری به وجود می آید.

 راه حل: استفاده از ریدایرکت 301

در کنار تگ کنونیکال، یک راه حل مطمئن برای حل این مشکل استفاده از ریدایرکت 301 است. تمامی دامنه ها باید به یک دامنه اصلی ریدایرکت 301 شوند.
توجه داشته باشید که این مشکل تنها برای صفحه اصلی سایت نیست، بلکه تمامی URL ها با این مشکل مواجه هستند. بنابراین باید تمامی آدرس ها را به نسخه اصلی ریدایرکت 301 کنید. مطمئن شوید که تمامی URL ها به صورت صحیح ریدایرکت شده اند و ریدایرکت ها کار می کنند.
 

- پارامترهای URL

یکی دیگر از عوامل به وجود آمدن محتوای تکراری، پارامترهای مختلف URL هستند. پارامترهای URL برای تغییر محتوای صفحه بر اساس یک یا چند فیلتر استفاده می شود. به عنوان مثال این ساختار برای نشان دادن تی شرت که بر اساس رنگ، سایز، و استایل فیلتر شده است، می باشد.

Site.com/shirts/?color=red&size=small&style=long_sleeve

اگر این فیلتر ها به تنهایی اعمال شوند، سه نوع URL متفاوت به وجود می آید که موتورهای جست و جو می توانند آن را پیدا و ایندکس کنند.
همچنین ترتیب این فلیترها اگر عوض شود، یک URL جدید اما با محتوای تکراری به وجود می آید.

راه حل: ابتدا می بایست در صفحه لندینگ یا دسته بندی کاربر امکان فیلتر کردن داشته باشد.

به مثال زیر توجه کنید:

https://www.digikala.com/search/category-eye-and-eyebrow
URL های فیلتر شده نیز به شکل زیر هستند:

https://www.digikala.com/search/category-eye-and-eyebrow/?brand[0]=1794&sortby=26
بعد از انجام این کار باید دو کار انجام شود:

اضافه کردن تگ کنونیکال برای URL هایی که شامل پارامتر هستند

استفاده از تگ کنونیکال برای رفع محتوای تکراری
رفتن به گوگل سرچ کنسول و اعلام به گوگل برای نادیده گرفتن پارامتر(بخش URL patameter)
انجام مرحله دوم با توجه به اینکه تگ کنونیکال تنها یک پیام به گوگل است و می تواند آن را نادیده بگیرد، الزامی است.

نکته: موتورهای جست و جو به طور کلی هر چیزی که در سمت راست نماد# در url باشد را نادیده می گیرند. این نیز می تواند یک راه حل برای مدیریت پارامتر های URL باشد.
سوالات متداول محتوای تکراری
محتوای تکراری چیست؟

محتوای تکراری عموما به صفحاتی گفته مکی شوند که در یک دامنه وجود دارند و دارای محتوای یکسان با URL های متفاوت هستند.
آیا محتوای تکراری برای سئو مضر است؟

بله. محتوای تکراری سبب هدر رفت بودجه خزش سایت و همچنین منجر به سردرگمی گوگل در انتخاب بهترین URL برای کلمات کلیدی می شود.
راه های رفع محتوای تکراری چیست؟

راه های مختلفی برای حل این مشکل وجود دارد. از جمله آن ها می توان به استفاده از ریدایرکت 301، تگ کنونیکال و همچنین URL Parameter سرچ کنسول اشاره کرد.

برای موفقیت در سئو سایت، محتوای منحصر به فرد و مفید تولید کنید و مشکل صفحات داخلی دارای محتوای تکراری را به حداقل برسانید.