Откуда возникают дубли
- URL parameters.
- Фильтры и сортировки.
- HTTP/HTTPS или www-варианты.
- Печатные версии.
- Копии товаров или категорий.
- Синдицированный контент.
Дубликат не всегда нарушение
Проблема чаще операционная: поисковой системе нужно выбрать каноническую версию, а сигналы могут распределяться между URL.