kiriyk/seo_tg huggingface dataset:
Вопрос: В Google Search Console в отчёте "Удобство для мобильных" вообще нет никаких страниц, при этом индексируется сайт нормально. Стоит ли в таком случае обращать внимание на этот отчёт? И как можно улучшить этот показатель и сделать страницы удобными для мобильных с точки зрения Google?

Ответ: 💡Пустой отчет «Удобство для мобильных» еще не значит, что у сайта есть проблема, например мобильной оптимизации. Вероятно сайт новый, либо он собирает настолько мало трафика, что у поисковика нет данных для анализа удобства ресурса. 
Убедиться в отсутствии проблем мобильной оптимизации можно: проверьте приходит ли трафик из мобильных устройств на сайт. Также анализ log-файлов сайта покажет наглядно есть ли визиты Googlebot для смартфонов на страницы. 
👉 Сервис https://search.google.com/test/mobile-friendly от Google покажет наличие технических ошибок на странице. 
Всегда можно проверить вручную оптимизацию мобильной версии страниц на устройствах с разными расширениями экрана.
⚠️ Если проблем с отображением страниц нет, мобильные боты и живые посетители посещают мобильную версию сайта, то с сайтом все в порядке. При наличии ошибок, их дальнейшее исправление позволит сделать сайт более удобными для мобильных устройств. 
При оптимизации сайта для мобильных устройств самое важное – структурировать имеющиеся разделы контента так, чтобы они корректно отображались на маленьких экранах:
▫️Сделайте так, чтобы пользователям на сайте было удобно и чтобы выполнение действий на нем не вызывало трудностей. Важен понятный и доступный интерфейс.
▫️Минимизируйте количество действий, которые необходимо выполнять пользователю, чтобы достичь целей на сайте. 
▫️Используйте адаптивный дизайн по возможности. Разметка контента на всех устройствах должна автоматически подстраивается под экран компьютера, планшета или смартфона.
Вопрос: Подскажите инструмент для создания и подготовки структуры сайта. Есть сервисы, которые выполняют такую задачу?

Ответ: 💡Инструментов для создания и подготовки структуры сайта, на самом деле, сейчас огромное количество. Мы расскажем о некоторых из них, которые являются наиболее популярными.
1️⃣ Самый простой способ - создание схемы сайта в Word или Excel. К минусам можно отнести то, что такой способ создания структуры подойдет для относительно небольших проектов. Для сайтов на тысячи страниц удобнее все же будут другие сервисы.
2️⃣ Сервисы по созданию майндмэпов (ментальных карт). Отлично подходит для создания общей схематической структуры сайта, но не дает возможности детально продумать структуру и взаимосвязь отдельных страниц сайта между собой. Из таких сервисов можем порекомендовать XMind, Coggle, MindMeister и Diagrams.
3️⃣ Графические редакторы. К таким сервисам относятся Canva и Sketch. Данный способ создания структуры подходит больше для дизайнеров. В таких сервисах во-первых, создание структуры занимает много времени, во-вторых, в случае возникновения доработок или изменений их будет достаточно проблематично внести в готовый макет.
4️⃣ Специализированные сервисы по созданию визуальной карты. Являются универсальным инструментом для дизайнеров, проектировщиков, контент-стратегов, SEO-специалистов. Предоставляют возможность комментировать, делиться и быстро менять структуру сайта. К таким сервисам относятся Octopus.do, GlooMaps, FlowMapp и другие.
Вопрос: В GSC у части страниц статус "Проиндексировано, несмотря на блокировку в файле robots.txt". Почему страницы индексируются, если они заблокированы? Страницы мусорные, поэтому желательно их удалить скорее, как это сделать? И как избежать повторной индексации?

Ответ: 💡Директивы прописанные в файле robots.txt не предназначены для того, чтобы запрещать показ ваших материалов в результатах поиска. 
Например, если на страницу ведет внешняя или внутренняя ссылка, то скорее всего страница все равно попадет в индекс.
👉 Чтобы этого избежать и убрать ошибку в консоли, нужно: 
▫️проверить sitemap на наличие мусорных URL;
▫️проверить, что нет бэклинков на страницы которые запрещены в robots.txt;
▫️настроить блокировку страниц, прописав <meta name= "robots" content= "noindex">  в коде страницы или использовав noindex (404, 410 для удаленных URL) в HTTP-ответе сервера.
Такие страницы будут все реже и реже сканироваться краулерами и автоматически выпадут из индекса.
⚠️ Также можно воспользоваться Google Search Console → “Индекс” → “Удаления” и оставить запрос на удаление необходимых URL. В течении некоторого времени страницы будут удалены из индекса. Подробнее ознакомиться с инструментом можно по ссылке.
Вопрос: Чем так плохи арендные ссылки? Их ведь можно продлевать и в итоге ссылка не отваливается, плюс ПС это видит. А если мы видим, что ссылка не индексируется, можно её не продлевать и купить другую просто.

Ответ: 💡Безусловно, тот факт, что ссылку можно удалить, если она не дала должного эффекта, является плюсом арендных ссылок. 
👉 Однако несмотря на это у арендных ссылок есть существенные минусы, из-за которых многие специалисты не рекомендуют их использовать:
▫️Как правило, доноры арендных ссылок более заспамленные и менее качественные.
▫️Площадки, размещающие арендные ссылки, уже «на счету» у поисковых систем, так как ссылки на них «мигают» (то появляются, то исчезают), что свидетельствует о том, что они продаются. 
В этом плане вечные статейные ссылки выглядят гораздо естественнее, так как более похожи на обычную рекомендацию от владельца площадки.
⚠️ Возможно по низкочастотным запросам такие ссылки и дадут результат, но если мы говорим о серьезных конкурентных тематиках и частотных запросах, а также о долгосрочном результате, то мы выступаем за вечные ссылки. Причем:
▫️ссылки должны быть проставлены в качественно написанных статьях;
▫️страницы статей должны быть включены в структуру сайта-донора и перелинкованы с его другими страницами;
▫️эти статьи потенциально должны собирать трафик.
Вопрос: При техническом аудите обнаружили большое количество циклических ссылок. Часть из них - это логотип, ссылки в футере и в меню, например. Нужно избавляться от циклических ссылок? И насколько они вредят сайту?

Ответ: 💡Большой опасности в циклических ссылках нет, но всё же их рекомендуется убирать по нескольким причинам:
1️⃣ Дополнительный расход краулингового бюджета – поисковый робот будет ходить по кругу. Для больших сайтов это является критическим моментом, так как может существенно повлиять на скорость обхода и индексирование страниц. Но если ваш сайт небольшого размера, то данная ошибка не критична и её исправление можно отложить.
2️⃣ Ухудшение юзабилити. Ссылки, которые ведут на ту же страницу, где они размещены могут запутать пользователей. Если на вашем сайте сложно реализована структура и циклических ссылок будет много (особенно в контентной части страницы), то это может стать большой проблемой – пользователи могут покидать такие сайты, что приведёт к ухудшению поведенческих факторов и позиций сайта в последствии.
Однако логотип рекомендуем оставить ссылкой на любой страницей, так как пользователи привыкли, что логотип, это:
▫️кратчайший способ вернуться на главную страницу;
▫️обновление главной страницы, для сброса заполненных данных, например.
👉 Какие ещё циклические ссылки стоит оставить:
▫️ссылки с главного меню;
▫️ссылки с хедера;
▫️ссылки с футера.
Принцип тут такой же, как и с кликабельным логотипом – пользователи привыкли к тому, что, кликнув по этим элементам, они попадут на другую страницу или обновят текущую.
👉 Какие циклические ссылки стоит убирать:
▫️из контентной части страницы;
▫️из хлебных крошек;
▫️из номера текущей страницы пагинации;
▫️из заголовков текущей страницы. 
⚠️ Как удалять циклические ссылки:
▫️вручную удаляя их в коде страницы;
▫️добавлением специального скрипта на ссылку;
▫️добавление специального стиля в css.
Вопрос: Как можно сайт вывести из санкций за накрутку ПФ в Яндексе? Можно спасти домен или лучше начинать заново всё?

Ответ: 💡Если у вас молодой сайт, проще переехать на новый домен, склеив его со старым 301 редиректом (санкции при склейке не передаются). Если речь идет о трастовом старом сайте, мы советуем подождать и бороться за него. 
👉 На практике, нам удавалось вывести сайт из под фильтра за 4 месяца, работая над внутренней оптимизацией. Что конкретно мы делали описано здесь.
Кроме того, представитель Яндекса на конференции All in Top Conf 2015, также упоминает, то что санкции могут быть сняты через пол года. 
⚠️ В первую очередь, стоит попытаться написать в техподдержку Яндекса и доказать, что накруткой занимались ваши конкуренты.
Далее, необходимо заняться улучшением поведенческих показателей на сайте, а именно, привлекать «хороший» трафик из поиска. К примеру, с помощью контекстной рекламы. 
👉 Параллельно стоит заняться проработкой юзабилити и качества сайта в целом и по разделам, чтобы улучшить естественные пользовательские показатели. 
Сюда входит: смена дизайна, улучшение текстов, проработка структуры, добавление новых полезных блоков и функционала. При этом, нужно регулярно писать в Яндекс с указанием всех улучшений на сайте и просьбой пересмотреть санкции.
Вопрос: Насколько сейчас показатели PageSpeed Insights справедливы и стоит ли на них заморачиваться? Стоит ли следовать всем указаниям или можно остановиться на определённых, точно важных и рабочих?

Ответ: 💡Есть мнение, что на ранжирование влияет не столько «зеленые» параметры в PageSpeed Insights, сколько основные интернет-показатели (Core Web Vitals). Важно оставлять положительный пользовательский опыт, который Google измеряет метриками: 
▫️LCP – Largest Contentful Paint; 
▫️FID – First Input Delay; 
▫️CLS – Cumulative Layout Shift.
 
Стремитесь к улучшению вышеперечисленных показателей, или хотя бы старайтесь сделать их лучше, чем у конкурентных сайтов.  
👉 При измерения CWV рекомендуется пользоваться объективными данными, потому что проверка PageSpeed Insights зависит от местонахождения человека. 
Относительно объективные данные о скорости загрузки с точки зрения пользовательского опыта, покажет сервис https://crux-compare.netlify.app/
Вопрос: Есть несколько дропов по схожей тематике моего сайта. Нужно ли линковать эти дропы между собой? С каких страниц ставить ссылки на свой сайт: с главной или внутренних? Есть внутренние страницы с большим количеством ссылок, они лучше передают ссылочный вес или учитывается вес домена?

Ответ: 💡Перелинковывать дропы между собой можно, например, в тех случаях когда это будет сеть многоуровневых ссылок. 
К примеру вы используете сеть из четырех сайтов второго уровня, которые ссылаются на сайт донор первого уровня. И сайт первого уровня уже будет вашим донором для основного сайта. В остальных случаях, как правило, дропы не перелинковывают между собой.
👉 С каких страниц ставить лучше ссылки вопрос индивидуальный и в каждой отдельной ситуации необходимо принимать решение по обстоятельствам: 
▫️Если дроп является прямым конкурентом, то можно задуматься и о постраничных ссылках.
▫️В большинстве случаях, по ситуации можно ставить ссылки как с главной на продвигаемую страницу, так и с отдельных тематичных страниц.
▫️Возможен вариант и сквозных ссылок из хедера, футера, баннера.
⚠️ Как правило, при использовании дропа как донора, при постраничных ссылках  учитывается внутренний вес и тематика самой страницы с которой идет ссылка. 
Собственно, все как и с обычной статейной ссылкой с не дроп домена. 
Вес страницы в свою очередь зависит от целого ряда факторов. Основным статическим фактором будет сумма передаваемого веса внешними и внутренними ссылками данной страницы. Есть и динамический вес страницы, который уже зависит от активности пользователей сайта. При этом, на качество такой ссылки влияет и авторитетность всего домена донора.
Вопрос: Как привлекать первый трафик и посетителей новому сайту? Отличаются ли действия у коммерческого и информационного сайта в этом?

Ответ: 💡В целом, способы привлечения трафика на новый сайт будут одинаковыми как для коммерческого, так и для информационного ресурса.
Прежде всего, сайт должен быть внутренне и технически оптимизирован (грамотно прописанные метатеги и заголовки под ключевые слова, правильная внутренняя перелинковка, высокая скорость загрузки, адаптация под мобильные устройства, отсутствие технических ошибок и другое).
👉 Основной метод привлечения трафика на новый сайт – это создавать качественный уникальный контент. Хороший контент не только привлекает трафик, но и заставляет пользователей им делиться, а также возвращаться на сайт. К примеру, написание качественных статей в блог поможет повысить узнаваемость Вашего бренда и сформировать к нему доверие пользователей.
Затем, следует заняться регистрацией в бизнес-справочниках, отзовиках, картах. Это поможет повысить доверие к вашему сайту со стороны пользователей и поисковых систем, повысить его узнаваемость, а также привлечь трафик.
⚠️ Особое внимание стоит уделить и наращиванию ссылочной массы. Приобретение качественных ссылок с авторитетных ресурсов дает нам сразу несколько плюсов:
▫️страницы сайта начинают лучше ранжироваться;
▫️повышается авторитетность ресурса;
▫️привлечение трафика за счет перехода пользователей по ссылкам.
Чтобы ускорить ускорить процесс приобретения авторитетности и привлечения трафика на сайт, наряду с SEO, стоит использовать и другие формы интернет-маркетинга: продвижение в социальных сетях, контекстная реклама, электронные рассылки.
Вопрос: У меня на сайте пол страницы имеет уникальную информацию, вторая половина — повторяющийся текст, блок ответов на вопросы. Такой блок есть на всех страницах. Нужно ли его закрывать от индексации, как повторяющийся и неуникальный?

Ответ: 💡Сейчас поисковики лояльны к тому, что на странице присутствует шаблонная часть контента. Такой контент, скорее всего будет минимально влиять на текстовую релевантность страницы, либо игнорироваться ПС вовсе. В крайне редких ситуациях это может послужить пессимизации страницы.
Обычно, куда важнее коммерческие факторы, как например ассортимент товаров, кнопка “купить” или “заказать”, наличие информации об оплате, доставке и контакты. Таким образом можно повысить уникальность самой страницы.
👉 Иногда, имеет смысл закрыть от индексации часть контента, если его нельзя уникализировать или удалить. Но такие действия очень рискованны для сайта и являются крайней мерой. Мы не рекомендуем закрывать от индексации часть контента:
▫️Тег <noindex> работает только для Яндекса, Google его же будет просто игнорировать. Это приведет к тому, что будет довольно трудно провести анализ таких страниц из-за того, что индексируемые данные в поисковых системах будут значительно отличаться.
▫️Если на большинстве страниц часть текста будет скрыта тегом от индексации, то поисковая система может счесть это неприемлемым.
▫️Перед тем как принимать решение скрывать часть информации со страницы, закрыть его на нескольких страницах в качестве эксперимента и проанализировать, как поисковые системы отреагировали на изменения на этих страницах.
Вопрос: На биржах остаётся все меньше хороших сайтов, где можно разместить свои ссылки. Как найти хорошие ссылки для своего сайта без ссылочных бирж? Можно ли ещё получить как-то бесплатные ссылки?

Ответ: 💡Если количество подходящих сайтов на биржах становиться слишком мало, для начала можно попробовать расширить категорию до общетематических и размещаться на информационных ресурсах, а также провести ссылочный анализ конкурентов (например, через сервис Ahrefs) и найти дополнительные площадки. 
Но помимо бирж существует целый ряд других способов наращивания ссылочной массы.  Мы рекомендуем использовать разные методы размещения ссылок, так как это разнообразит ссылочный профиль ресурса.
👉 Популярные способы получения ссылок:
▫️Аутрич. Благодаря ссылочному анализу конкурентов можно получить список площадок, которых нет на бирже. Далее необходимо связаться с владельцами ресурсов и договориться о размещении тематических ссылок.
▫️Крауд. Хороший способ разбавить ссылочную массу. Заключается в размещении ссылки в комментариях на сайтах, форумах, Q&A-платформах (хабр, ответы mail.ru и тд). Главное не забывать об естественности размещения таких комментариях, чтобы они органично вписывались в разговорные ветки и не выглядели как спам.
▫️Каталоги и Справочники. Простой и проверенный способ для получения бесплатных ссылок на сайт. Заключается в подборе качественных площадок и в размещении на них контактной информации и ссылки на ваш ресурс.
▫️Сайты работы. Дополнительный рабочий способ по размещению бесплатных и естественных ссылок, заключается в размещении открытой вакансии с адресом вашего сайта, главное чтобы вся информация о компании была достоверной.
▫️Отзовики. Работающий метод с помощью которого можно и получить бесплатную ссылку, и улучшить доверие со стороны пользователей. Стоит все же помнить о том, что на таких ресурсах могут появляться и негативные комментарии о вашем бизнесе и стоит быть готовыми к ним. Но в гармоничной связке с краудом вы сможете добиться лучшего эффекта. Ваше присутствие на популярных отзовиках поможет вам получать хороший трафик и обсуждение вашей тематики, что является положительным фактором ранжирования.
▫️Социальные сайты. Хороший способ получения разнообразных социальных сигналов и бесплатных ссылок посредством размещения постов, блогов, профилей в социальных сетях, публикации контента на видеохостингах (например, YouTube), на сайтах изображений (например, Pinterest) и прочих.
⚠️Постоянная работа над увеличением ссылочного профиля, а особенно над разнообразием и качеством доноров, высоко оценивается поисковыми системы и положительно влияет на ранжирование всего сайта.
Вопрос: Есть категория «Ножи и мультитулы» и тут же у неё есть подкатегории «ножи» и «мультитулы». Данные подкатегории оптимизированы, есть текст, но в выдаче (к примеру напишу: купить нож или купить мультитулы) появляется только общая категория «ножи и мультитулы».

Как быть с этим, оставить все как есть? И самое главное, это то, что на общей категории даже нет текста, не понимаю, почему она может ранжироваться.

Ответ: Причина в том, что для поискового робота категория «Ножи и мультитулы» более релевантна запросу “купить нож”, чем его подкатегория. Причин может быть несколько:
1️⃣ Основная категория имеет меньше вложенность и собрала больше внутренних и внешних переходов по сайту. Поэтому на данной странице уже есть более значительная база ПФ, отвечающая этому запросу. То есть пользователи чаще находят нужный товар на этой странице, чем на подкатегории.
2️⃣ Вторая причина – категория имеет больший внутренний вес, чем подкатегории. Это происходит из-за того, что подкатегории получают меньше внутренних ссылок. Для того чтобы это исправить проанализируйте внутреннюю перелинковку страниц. Где есть возможность замените ссылки и добавьте больше ссылок на подкатегории (ссылки с фильтров, блоков “с этим смотрят” с самих карточек товара и т.д.).
3️⃣ Третья причина – недостаточно качественная внутренняя оптимизация подкатегорий. Это может быть из-за того, что на страницах подкатегорий меньший ассортимент (а это важный фактор ранжирования для коммерческих страниц) или слишком SEOшный текст. Для того, чтобы проверить эти теории, проанализируйте страницы из ТОПа. Сравните их ассортимент и текстовые блоки со своими. Напоминаем: текст на страницах категорий не главный фактор ранжирования, в некоторых нишах он вообще не нужен и может привести только к ухудшению позиций.
⚠️Также крайне рекомендуем провести анализ выдачи и проверить какие страницы конкурентов ранжируются в ТОПе по запросам “купить нож” и “купить мультитул”. Если это как и вас будет общая страница категории “ножи и мультитулы”, тогда и дальше работайте над её оптимизаций.
Если же у конкурентов ранжируются подкатегории попробуйте проработать ошибки, которые мы указали выше или обратитесь с бесплатной заявкой к нам. Так мы сможем подробнее проанализировать страницы и дать более конкретные рекомендации.
Вопрос: На сайте есть 6 дублей карточек, но они все распределены по разным категориям. Со всех них стоит каноникал на товар без родительской категории.

Скажите, как в такой ситуации лучше поступить и исправить это? Ведь по правилам должно быть так: один товар – один URL.

Ответ: С полными дублями страниц товаров необходимо бороться. Есть несколько способов решения проблемы дублей карточек товара. И тут всё зависит от нескольких факторов: 
▫️Если на страницу-дубль нет и не было трафика и на неё не ведут внешние ссылки, то её можно просто удалить и настроить 410 ответ сервера. Так ПС быстрее поймёт, что страница удалена и возвращаться сканировать её не нужно.
▫️Если дублей много, то наиболее простым способом будет атрибут canonical. Сanonical не будет сильно утяжелять работу сайта, как редирект и подействует быстрее. Но стоит помнить, что для поисковиков этот атрибут скорее рекомендация. Поэтому нужно убедиться, что ПС правильно определили каноническую страницу.
▫️Если дублей не много и на них ведут внешние ссылки, то можно настроить 301 редирект на карточку товара без категории, если у вас такая структура сайта.
⚠️ Правило “один товар – один URL” действительно существует, оно помогает избегать путаницы как со стороны ПС, так и со стороны пользователя. Иногда, для небольших интернет-магазинов товары могут размножать по категориям для увеличения ассортимента. Но и в таком случае страницы как правило уникализируют.
Вопрос: Подскажите, можно ли при сборе семантики максимально уменьшить сбор мусорных запросов и как можно автоматизировать чистку СЯ от мусорных запросов?

Ответ: Сбор семантического ядра всегда требует много ручной работы, однако есть способы упростить процесс.
1️⃣ Чтобы облегчить себе работу, важно изначально правильно сформировать список маркеров, который будет парситься. Чем более точные и узкие маркеры – тем меньше мусора получим в итоге. Именно поэтому для крупных ресурсов проще собирать семантику по разделам.
2️⃣ Советуем сформировать список минус-слов (стоп-слов), чтобы парсер сразу отсекал ненужные нам запросы. Для каждой ниши этот список будет индивидуальный. Например, если мы собираем семантику под коммерческий сайт, мы можем сразу отсечь все информационные запросы при помощи минус-слов: «как», «какой», «где», «зачем», «это», … Сюда же добавляем названия брендов конкурентов и агрегаторов, другие регионы и так далее.
3️⃣ Удаляя запросы с нулевой частотностью (или низкочастотные, в зависимости от тематики), мы также избавляемся от большого количества мусора.
4️⃣ Затем, можно воспользоваться автоматическими инструментами, которые есть в каждом сервисе для сбора семантики. Например, в Key Collector есть «Анализ групп», с помощью которого мы можем выявить и удалить запросы с ошибками, повторы, нерелевантные регионы и товары/услуги и прочее. 
5️⃣ С помощью фильтров можем удалить запросы, содержащие повторы, специальные символы, латинские буквы, цифры.
6️⃣ На этапе кластеризации мы также выявляем отдельные группы нерелевантных запросов, которые можно отсечь.
Вопрос: Зачем страницы пагинации нужны в индексе? Если пробовать их всё-таки индексировать и продвигать, то нужно ли покупать на них ссылки или, например, писать тесты?

Ответ: 💡При должной оптимизации листинг на страницах пагинации может приносить трафик, поэтому страницы пагинации имеет смысл индексировать. Для малостраничников страницы пагинации могут служить отличными посадочными страницами под НЧ запросы.
Также страницы пагинации содержат ссылки на карточки товаров, и чем больше таких карточек поисковый робот заметит, тем  шире ассортимент ИМ будет в индексе, что является важным коммерческим фактором ранжирования для ИМ. Плюс поиск и индексация карточек товаров или статей значительно ускорится.
⚠️Основные правила оптимизации страниц пагинаций:
▫️Правильная техническая настройка страниц.
▫️Со страницы /page/1 следует настроить 301 редирект на основную страницу категории для исключения дубля.
▫️Удобная навигация. Должны быть ссылки на первую, последнюю, предыдущую и следующую страницы;
▫️Настройка тега rel= "canonical". Его можно настроить как на первую страницу пагинации, так и на саму себя в зависимости от вашей стратегии продвижения.
▫️Уникальные метатеги — это поможет избежать дублирования страниц.
▫️Если на страницах пагинации есть текст, его стоит оставить только на первой странице.
Ссылки на страницы пагинации обычно не покупаются. Свой ссылочный вес страницы пагинации получают от первой страницы – страницы категории. Подробно про оптимизацию страниц пагинации можно почитать у нас в статье: Как оптимизировать страницы пагинации на сайте.