محتوى مكرر

قد يشمل المحتوى المكرر غير الضار نسخًا مختلفة من الصفحة نفسها، مثل النسخ المُحسّنة لـ HTML العادي ، أو الأجهزة المحمولة، أو الطباعة، أو عناصر المتجر التي يمكن عرضها عبر عناوين URL متعددة ومختلفة . ^{[ 1 ]} كما قد تنشأ مشكلات المحتوى المكرر عندما يكون الموقع متاحًا عبر نطاقات فرعية متعددة، مثل تلك التي تحتوي على "www." أو التي لا تحتوي عليها، أو عندما تفشل المواقع في التعامل مع الشرطة المائلة الأخيرة من عناوين URL بشكل صحيح. ^{[ 2 ]} ومن المصادر الشائعة الأخرى للمحتوى المكرر غير الضار ترقيم الصفحات ، حيث يتم تقسيم المحتوى و/أو التعليقات المقابلة له إلى صفحات منفصلة. ^{[ 3 ]}

يُعدّ المحتوى المُعاد نشره شكلاً شائعاً من أشكال المحتوى المُكرر. إذا قام موقع ما بإعادة نشر محتوى من مواقع أخرى، فمن المهم عموماً التأكد من قدرة محركات البحث على تمييز النسخة الأصلية من المحتوى، لكي تستفيد النسخة الأصلية من زيادة ظهورها في نتائج البحث. ^{[ 1 ]} تشمل طرق تحقيق ذلك إضافة وسم rel=canonical إلى الصفحة المُعاد نشرها، والذي يُشير إلى الصفحة الأصلية، أو منع فهرسة النسخة المُعاد نشرها، أو وضع رابط داخلها يُعيد المستخدم إلى المقالة الأصلية. في حال عدم تطبيق أي من هذه الحلول، قد تُعامل النسخة المُعاد نشرها على أنها النسخة الأصلية وتستفيد من مزاياها. ^{[ 4 ]}

أدى العدد الهائل من عناوين URL التي يُنشئها برنامج الخادم إلى صعوبة تجنب برامج الزحف على الويب لاسترجاع المحتوى المكرر. فهناك عدد لا حصر له من تركيبات معلمات HTTP GET (المستندة إلى عنوان URL)، والتي لا يُعيد منها سوى عدد قليل محتوىً فريدًا. على سبيل المثال، قد يُقدّم معرض صور بسيط على الإنترنت ثلاثة خيارات للمستخدمين، كما هو مُحدد من خلال معلمات HTTP GET في عنوان URL. إذا كانت هناك أربع طرق لفرز الصور، وثلاثة خيارات لحجم الصور المصغرة ، وتنسيقان للملفات، وخيار لتعطيل المحتوى الذي يُضيفه المستخدم، فإنه يُمكن الوصول إلى نفس مجموعة المحتوى من خلال 48 عنوان URL مختلفًا، والتي قد تكون جميعها مرتبطة بالموقع. يُشكّل هذا العدد الهائل من التركيبات مشكلة لبرامج الزحف، حيث يتعين عليها فرز عدد لا حصر له من التغييرات البرمجية البسيطة نسبيًا لاسترجاع المحتوى الفريد.

قد يوجد محتوى متشابه بين صفحات الويب المختلفة، على شكل محتوى منتجات متشابه. ويُلاحظ هذا عادةً في مواقع التجارة الإلكترونية، حيث يؤدي استخدام كلمات مفتاحية متشابهة لفئات منتجات متشابهة إلى هذا النوع من المحتوى المكرر غير الضار. ويحدث هذا غالبًا عند إصدار نسخ جديدة من المنتجات، دون أن يقوم البائع أو مشرفو موقع التجارة الإلكترونية بتحديث أوصاف المنتجات بالكامل. ^{[ 5 ]}

يشير المحتوى المكرر الخبيث إلى المحتوى الذي يُنسخ عمدًا بهدف التلاعب بنتائج البحث وزيادة عدد الزيارات. يُعرف هذا النوع من المحتوى باسم البريد العشوائي في البحث . تتوفر العديد من الأدوات للتحقق من أصالة المحتوى. ^{[ 6 ]} في بعض الحالات، تُعاقب محركات البحث المواقع الإلكترونية والصفحات المخالفة على حد سواء في نتائج البحث (SERPs) بسبب المحتوى المكرر الذي يُعتبر "بريدًا عشوائيًا".