kiriyk/seo_tg huggingface dataset:
Вопрос: Как повысить ранжирование статей, если они и так хорошо ранжировались? Но стоит задача поднять выше. Мы дополнили новой информацией и сделали рерайт того текста, который был, но суть осталась та же, но другими словами.

Ответ: Чтобы поднять ранжирование страниц необходимо повысить их авторитет в глазах поисковых систем, а именно:
🔸улучшить внутреннюю перелинковку;
🔸закупить внешние ссылки;
🔸разместить посты в социальных сетях.
Также для этих страниц вы можете исходя из поведенческих метрик увидеть: 
🔸процент отказов;
🔸CTR;
🔸время пребывания на странице/страницах;
🔸глубину просмотра.
На основе этих данных, возможно, вы сможете еще что-то привнести в текст, чтобы он еще полнее отвечал на вопрос пользователя.
Измените сниппет, сделайте его более привлекательным и интересным, чтобы повысить CTR. Этот показатель оказывает значительное влияние на ранжирование.
Постарайтесь свести к минимуму отказы и повысить время пребывания и глубину просмотра страниц.
Не менее важно проанализировать ТОП по тем запросам, по которым вы хотите поднять ранжирование страниц. Это позволит посмотреть на полноту раскрытия темы конкурентами и, возможно, дополнить свой материал информацией. Также стоит, по возможности, добавить в материал таблицы, графики, видео и т.д., чтобы статья стала еще более наглядной и полезной. 
👉 Особое внимание необходимо уделить изображениям, которые сопровождают пользователя от самого начала, до самого завершения материала. В обязательном порядке добавляйте к изображениям подпись, которая позволит добавить еще больше наглядности и полезности материалу.
При этом полный рерайт текста не всегда хорошая идея, т.к. такое обновление может быть воспринято алгоритмами, как новая статья, которая не обязательно будет лучше прежней.
Вопрос: Стоит ли в ТЗ копирайтерам указывать количество символов, точные вхождения ключа, синонимы или эти факторы давно считаются неактуальными?

Ответ: Подход к ТЗ для копирайтеров сегодня стал более гибким и естественным, чем раньше. ПС Google сейчас больше ценит качественный, экспертный контент, который действительно решает задачи пользователей, чем тексты с идеальными техническими параметрами.
✅ Количество символов. Вместо жестких рамок лучше указывать примерный диапазон (например, 2000-2500 символов). Это позволит автору раскрыть тему естественно, не растягивая и не обрезая текст искусственно.
✅ Точные вхождения ключа. Этот параметр стал несколько менее актуальным. Поисковые алгоритмы стали намного умнее и понимают контекст, семантическую связь и намерение пользователя. Ряд точных вхождений можно оставить, но вместе с ними рекомендуем писать в ТЗ естественное использование ключевых фраз со склонениями и разрывами между слов там, где это уместно.
✅ Синонимы и вариации ключевых фраз полезны, потому что позволяют охватить больше смежных поисковых запросов и сделать текст разнообразнее. Но не нужно прописывать их все в ТЗ: достаточно перечислить основные варианты и дать копирайтеру свободу выбора.
Вопрос: Какой sitemap делать для сайта с несколькими языковыми версиями в подпапках: один общий для всех или для каждой языковой версии нужен свой sitemap.xml?

Ответ: Оба варианта имеют право быть, если корректно настроить hreflang. Мы рекомендуем руководствоваться следующим принципом:
Если сайт небольшой и вы хотите простоты — делаете общий sitemap.xml.
Если сайт крупный или вы хотите управлять версиями отдельно — отдельные sitemaps для каждого языка.
⚠️ Не забывайте, что в общей карте сайта также надо указывать hreflang. Пример:
  <url>
    <loc>https://example.com/</loc>
    <xhtml:link rel="alternate" hreflang="en" href="https://example.com/en/" />
    <xhtml:link rel="alternate" hreflang="fr" href="https://example.com/fr/" />
  </url>
  <url>
    <loc>https://example.com/en/</loc>
    <xhtml:link rel="alternate" hreflang="x-default" href="https://example.com/" />
    <xhtml:link rel="alternate" hreflang="fr" href="https://example.com/fr/" />
  </url>
  <url>
    <loc>https://example.com/fr/</loc>
    <xhtml:link rel="alternate" hreflang="x-default" href="https://example.com/" />
    <xhtml:link rel="alternate" hreflang="en" href="https://example.com/en/" />
  </url>
👉 Если же будете использовать отдельные карты для каждой языковой версии, то рекомендуем сделать основной файл, в котором указываются ссылки на дочерние sitemaps:
<sitemap>
<loc>https://example.com/sitemap-default.xml</loc> 
</sitemap> 
<sitemap> 
<loc>https://example.com/en/sitemap-en.xml</loc> 
</sitemap> 
<sitemap> 
<loc>https://example.com/fr/sitemap-fr.xml</loc> 
</sitemap>
Вопрос: Насколько негативно могут влиять на позиции всплывающие окна на страницах, например, с предложением посетить страницу акции или товар, который пользователь уже смотрел на сайте? Интересно узнать про влияние в Google.

Ответ: Всплывающие Pop-up-окна в целом рекомендуется сводить к минимуму. Очень много зависит от того, каким образом реализована всплывашка на сайте.
Так, например, навязчивые всплывающие окна, занимающие большую часть экрана и мешающие пользователю, могут повлиять негативно на позиции сайта в поисковых системах. Если же всплывающее окно небольшое, легко может быть закрыто пользователем, то оно, скорее всего, не окажет никакого влияния на позиции сайта, но при этом сможет в Вашем случае привести пользователя к выгодному товару по акции. 
Безусловно, с точки зрения потенциальных конверсий всплывающее окно может дать положительный эффект прироста продаж и поэтому оно полезно с точки зрения бизнеса. Но не стоит перегибать палку и создавать надоедливые окна, которые будут раздражать пользователя.
💡 Ваша задача при помощи этого окна улучшить поведенческие метрики, а не ухудшить их. Если пользователь перейдет по ссылке в окне на другую страницу сайта, то это будет хорошим сигналом, если же пользователь будет практически сразу после появления окна закрывать сайт, то это будет плохим сигналом. При этом важно, чтобы всплывающее окно не появлялось на каждой странице сайта.
Обязательно стоит посмотреть на реализацию таких окон у конкурентов в ТОП.
Вопрос: Каким сервисом можно пройтись по сайту и проверить его линки на домены, сроки которых закончился?

Ответ: Как такого универсального сервиса не существует, который выдаст отчёт именно по таким доменам. Но есть схема как это решить с комбинацией нескольких инструментов:
1️⃣ Собираем любым краулером (или с помощью Ahrefs) исходящие ссылки с сайта и выгружаем в таблицу со всеми внешними доменами.
2️⃣ Берём выгруженный список доменов и используем сервисы для массовой проверки доступности доменов. Например, эти Name.com, Namecheap, Whois, в некоторых можно прямо списком загрузить домены для проверки.
Также возможно автоматизировать эту задачу скриптом, проверяющим домены на истечения срока.
Вопрос: Нужно ли прописывать user_agent follow на сайте , или достаточно просто ничего не писать и user_agent Google будет правильно сканировать sitemap?

Ответ: Для нормального индексирования страниц вашего сайта достаточно просто размещать страницы с качественным контентом, при этом не обязательно прописывать rel follow для каждой страницы, чтобы роботы по ней переходили. 
Постарайтесь добавить в файл sitemap все страницы вашего сайта, которые отвечают на вопросы пользователей и которые, по вашему мнению, должны находиться в выдаче. Этого будет достаточно для того, чтобы поисковая система добавила их в свою поисковую базу и показала в выдаче по соответствующим запросам, если контент этих страниц действительно покрывает запрос пользователя.
⚠️ Также не забудьте добавить файлы карты сайта в консоль поисковой системы.
Вопрос: Какой тип микро разметки делает большой расширенный сниппет в выдаче Google (например, содержит несколько ссылок на категории товаров или услуг)? И можно ли его настроить на меню сайта или это на странице должен быть блок соответствующий, с которого стоят ссылки на те страницы?

Ответ: Такие расширенные сниппеты с содержанием ссылок на категории товаров или услуг обычно формируются Google для главной страницы автоматически, на основании анализа содержания контента. Для этого необходимо, чтобы в контентной части страницы был организован структурированный и понятный блок перелинковки по основным разделам сайта.
В редких случаях такие расширенные сниппеты могут формироваться и для страниц категорий сайта. Требования все те же, необходимо четко структурированный блок перелинковки в самом контенте страницы.
Меню сайта, конечно же, можно также разметить. Обычно для этого используют разметку SiteNavigationElement или ItemList для его элементов. Однако в нашей практике такая разметка если оказывала влияние на формирование расширенных сниппетов, то в очень редких случаях.
⚠️ Помните, микроразметка лишь дополняет информацию для поисковой системы, она не заменяет фактическое наличие контента.
Вопрос: Как считаете, на сколько важно, чтобы донор имел трафик? (Трафик на домен, а также трафик на последние посты). И важна ли региональность донора, например,  работаем под Португалию — ссылки покупать лучше с португальских сайтов, или подойдут другие страны и мультиязычные сайты?

Ответ: При определении качества донора необходимо в обязательном порядке оценивать множество факторов, один из которых – трафик. И чем он, соответственно, больше, тем лучше. Наличие трафика на сайте говорит о том, что он востребован пользователями, а это, в свою очередь, повышает вероятность перехода по ссылке на сайт акцептор. Такое поведение добавляет качества самой ссылке и именно таковой, в идеале, должна быть цель получения каждой ссылки – переход пользователя.
👉 Что касается региональности, то ответ однозначный – да, она важна. Вероятность того, что сайты находящиеся в одном регионе будут ссылаться друг на друга значительно выше, чем сайт находящийся совершенно в другом регионе. Это выглядит логично в глазах поисковых систем.
👉 Что касается иностранных и мультиязычных сайтов, то самое важное – это качество самого донора. Поэтому, если есть возможность разместиться на каком-то очень трастовом доноре, то это также будет плюсом для вашего сайта.
Поэтому в первую очередь рекомендуем получать ссылки с португальских и других сайтов, которые имеют трафик, получили и получают обратные ссылки, совпадают или близки по тематике с вашим сайтом. Однако, если позволяет бюджет, то параллельно можно брать ссылки с других стран и мультиязычных сайтов, если это качественные и тематичные доноры.
Вопрос: Есть домены, которые с большой долей вероятности считаются аффилированными (проверяли по схемам, все сходится). Если сделать новый сайт на новом домене, а затем поставить 301 редирект с одного из аффилиатов на этот новый сайт, фильтр тоже переедет?

Ответ: При 301 редиректе с аффилированного домена фильтры не "переедут" на новый домен. Но если сайт снова будет иметь ту же схожесть с предыдущим или вообще будет идентичным со старым сайтом, то есть немаленький шанс снова получить аффилирование.
💡 Чтобы новый сайт не попал под фильтр-аффилиат необходимо использовать:
▫️другой физический адрес, номер телефона, адрес электронной почты
▫️другие регистрационные данные компании и платёжные реквизиты
▫️другие шаблоны и уникальный контент
▫️по возможности обновить структуру и дизайн
▫️другие отличающиеся группы в социальных сетях
▫️также по возможности отличающийся ассортимент и цены
Вопрос: Могут ли быть последствия для сайта, если у него 90%+ dofollow-ссылок? И на какие показатели следует опираться?

Ответ: Если ваш ссылочный профиль сайта состоит на 90%+ dofollow-ссылок, то это может выглядеть слишком неестественно и подозрительно с точки зрения Google. Алгоритмы могут расценить это, как попытку манипуляции результатами поиска. В большинстве случаев Google просто посчитает такую ситуацию, как ссылочный спам и будет игнорировать большую часть подозрительных ссылок. В худшем случае существует риск попадания под фильтр и сайт может потерять позиции в выдаче.
Мы рекомендуем тщательно проанализировать выдачу, изучить профиль Ваших конкурентов и определить для себя допустимый диапазон соотношения nofollow и dofollow-ссылок. Старайтесь наращивать все ваши виды ссылок в естественном соотношении.
💡 На какие показатели следует опираться при оценке ссылочного профиля:
1️⃣ Динамика роста ссылок. Естественный рост ссылок происходит постепенно. Резкие скачки могут вызвать подозрения.
2️⃣ Качество и тематика доноров. Авторитетные и тематические сайты имеют больший вес. 
3️⃣ Разнообразие анкоров. Использование разных ключевых слов и фраз в анкорах ссылок выглядит более естественно.
4️⃣ География ссылок. Ссылки с Вашего региона продвижения, делают профиль сайта более естественным.
5️⃣ Тип ссылок. Помимо dofollow, существуют и другие типы ссылок (nofollow, sponsored и т.д.). Сбалансированный профиль содержит ссылки разных типов. Это нормально, когда люди делятся ссылками на Ваш сайт на разнообразных площадках.
⚠️ Важно понимать, что нет универсального рецепта для идеального ссылочного профиля. Каждый сайт уникален, и подход к его продвижению должен быть индивидуальным.
Вопрос: Могут ли покупные ссылки выпадать из индекса со временем? Нужно ли мониторить время от времени индекс покупных ссылок и как это сделать?

Ответ: Покупные ссылки со временем могут выпадать из индекса только в связи с ухудшением состояния сайта донора. Возможно, донором перестали заниматься, разместили слишком много арендных или вечных ссылок, начали публиковать материалы сомнительного качества, начали продавать ссылки для 18+ тематик, начали публиковать материалы 18+. Все эти факторы в совокупности могут негативно повлиять на сам сайт-донор и как следствие, некоторые его страницы начинают выпадать из индекса. На хороших сайтах страницы просто так из индекса не выпадают, они могут терять актуальность и ухудшать свои позиции в выдаче, и постепенно терять свой вес, но не выпадать из индекса.
Мониторить индексацию ссылок нужно только в момент покупки. Если страница достаточно быстро зашла в индекс – значит она отлично отработает. Если, на первый взгляд, на хорошем доноре ваша статья никак не может зайти в индекс – это показатель того, либо вы ошиблись с качеством донора, либо размещаемый материал недостаточно качественный, либо не подходит для тематики площадки.
👉 Индексация ссылок мониторится различными сервисами, либо программами для компьютера, это не слишком сложная задача. Сервисов предостаточно, можете найти в поиске подходящий по цене и функционалу. Также вы можете сами проверить индекс любой страницы, просто написав site: и адрес проверяемой страницы.
Подумайте еще над тем, а нужна ли вам ссылка с некачественного донора, которая выпала из индекса? Такая ссылка может отработать не в плюс, а в минус и, может быть, и хорошо, что она вообще выпала из индекса.
Вопрос: Лягушка не сканирует метатеги и показывает, что страницы закрыты x-robots-tag, но в индексе, если проверять страницы через site: поисковики выдают эти страницы - почему так?

Ответ: Сам факт того, что страницы видны через site: оператор не означает, что страницы доступны к индексации и на них нет тега. Это лишь индикатор того, что страницы физически находятся в индексе поисковой системы и, возможно, робот еще не успел их обойти, чтобы обновить статус.
👉  Чтобы понять, в чем именно причина такой проблемы, нужно проверить:
🔸 Как видит бот эти страницы с помощью Search Console. Если X-Robots-Tag есть, то консоль это покажет. Альтернативно можно использовать онлайн-сервисы проверки HTTP-заголовков. 
🔸 Сетевые логи в браузере (Network tab в DevTools) при загрузке проблемных страниц - там тоже будут видны все заголовки ответа сервера.
Если по факту тега на страницах нет, но Лягушка показывает их как закрытые от индексации - это явный признак некорректной работы инструмента сканирования или неправильных настроек парсинга. 
1️⃣ Различия в User-Agent:
Screaming Frog по умолчанию использует свой User-Agent. Может быть такое, что сервер может отдавать разные заголовки X-Robots-Tag в зависимости от агента.  Поменяйте его на User-Agent Googlebot и проверьте результат.
2️⃣ Ошибки в конфигурации:
Неправильные правила в файле .htaccess или в конфигурации Nginx могут приводить к отправке неправильных заголовков X-Robots-Tag. Проверьте эти файлы на наличие ошибок и исправьте их, если необходимо.
3️⃣ Ошибки в Screaming Frog:
Хотя это и менее вероятно, возможны ошибки в самом Screaming Frog. Попробуйте обновить программу до последней версии.
4️⃣ Кэширование заголовков:
Может быть такое, что заголовки X-Robots-Tag закэшировались, из-за чего лягушка их видит, хотя по факту их нет. Попробуйте очистить кэш и пересканировать сайт.
Если проблема не устранится и после этих манипуляций, то попробуйте сканировать сайт с настройкой follow internal «nofollow».
Вопрос: Когда работали с одним SEO агентством в свое время мы сделали вот что: в странице товара отметили канонической страницу категории. В этом вообще может быть какой-то смысл или лучше исправить и сделать страницу товара канонической? Справедливости ради скажу, что товар в отдельности ввиду специфики в поиске никогда не ищут, ищут именно категорию.

Ответ: Такой подход, когда канонической для страницы товара указывается страница категории, может иметь определенный смысл только в очень специфических случаях. И то, скорее всего, не совсем корректный. В большинстве ситуаций мы не рекомендуем так делать.
1️⃣ Во-первых сам по себе canonical - это рекомендация, а не правило, и поисковые системы сами решают, стоит ли их придерживаться или игнорировать.
2️⃣ Во-вторых, основная цель канонических ссылок - сообщить поисковым системам, какая из нескольких похожих страниц является наиболее авторитетной и должна быть проиндексирована.
Важно понимать, что страница товара и страница категории - это разные сущности с разной целью и подаваемой информацией. Страница товара содержит уникальные характеристики конкретного продукта, а страница категории объединяет несколько товаров по определенному признаку. В большинстве случаев более логичным и эффективным будет сделать страницу товара канонической для самой себя.
Вопрос: Какие сервисы посоветуете для отслеживания конкурентов (их ссылочного профиля например, трафика, позиций)? Если можно и платные и бесплатные.

Ответ: Сервисов для отслеживания конкурентов достаточно много. Большинство сервисов предлагают примерно одинаковый функционал – отслеживание позиций, трафика, ссылочных данных. К таким сервисам относятся, например:
▫️Ahrefs;
▫️Serpstat;
▫️SemRush;
▫️SimilarWeb;
▫️Majestic;
▫️SERanking.
Все эти сервисы платные, но дают большое количество информации для анализа. При этом полагаться на них на сто процентов вряд ли получится, так как все эти сервисы используют собственные базы и многие данные могут быть неполными. Но получение приблизительных данных позволит проводить качественный анализ конкурентов и находить точки роста.
Также стоит отметить, что почти у всех сервисов из этого списка есть бесплатные пробные версии, чтобы потестировать результаты и разобраться с интерфейсом.
Среди бесплатных сервисов стоит выделить браузерное расширение SEOquake, которое позволит получить частичную информацию о любом сайте. 
Необходимо повториться, что любой из сервисов, будь он платный или бесплатный, не даст однозначно точную информацию по сайту конкурента и поэтому стоит проводить максимально тщательный анализ, используя любые доступные способы.
Вопрос: Для внутренних ссылок на сайте nofollow — хорошо или плохо? На моём сайте главная страница плохо ранжируется, а внутренние — лучше. Я посмотрел статистику анкоров внутренних ссылок — бОльшая часть ссылается на индекс как "Главная" — сквозные ссылки из навигации. Может такие ссылки имеет смысл сделать nofollow? Сквозные ссылки типа Terms of Use, Privacy Policy нужно закрывать nofollow?

Ответ: Скрывать внутренние ссылки в nofollow не самая лучшая идея. Внутренняя перелинковка – отличный инструмент естественного распределения ссылочного веса для приоритетных страниц вашего сайта. 
До 2016 года в Google был инструмент под названием PageRank, который показывал ссылочный вес страниц. Многие сайты получали свой естественный Rank только за счет внутренней оптимизации. Тот факт, что Google теперь не отображает этот показатель не означает, что поисковик отказался от алгоритма определения трастовости страниц на основе этого алгоритма.
👉 Причины, по которым ваши внутренние страницы лучше ранжируются, чем главная, могут быть не только в количестве внутренних ссылок на эти страницы. Пересмотрите контент страниц, подумайте над интентом запросов, убедитесь, что страницы не каннибализируют друг друга, проверьте внешнюю оптимизацию этих страниц, посмотрите на поведенческие показатели каждой страницы, проведите коммерческий аудит тематики. В конце концов – сравните свои страницы со страницами ближайших конкурентов. Возможно, ответ лежит на поверхности, вам нужно только его увидеть.
И помните, главная страница обычно оптимизируется под брендовые запросы.Уделите внимание брендовым анкорам при закупке внешних ссылок и во внутренней перелинковке из контента страниц. В хлебных крошках и в меню лучше, конечно же, оставить стандартные названия «Главная».
Сквозные ссылки типа Terms of Use, Privacy Policy также не рекомендуется закрывать в nofollow.
Вопрос: Если в выдаче ранжируется нерелевантная (нецелевая) страница, поможет ли настройка rel= canonical в данном случае ранжированию целевой?

Ответ: Настройка rel= canonical может действительн, помочь в двух случаях:
1️⃣ Если нерелевантная страница действительно является дубликатом целевой страницы. То есть, на этих страницах содержится практически идентичный контент. В этом случае, установив rel=canonical на нерелевантной странице, вы указываете поисковым системам, что вся ценность должна быть передана на целевую страницу.
2️⃣ Если нерелевантная страница является вариантом целевой страницы. Например, страница с фильтрами или сортировкой. В таких случаях, rel=canonical также может помочь консолидировать авторитет и передать ценность на основную страницу.
Однако, если нерелевантная страница имеет совершенно другой контент или не имеет отношения к целевой странице, то rel=canonical не поможет. В этом случае проблема скорее связана с релевантностью контента и качеством оптимизации обеих страниц.
👉 Важно понимать, что rel="canonical" — это скорее рекомендация для поисковиков, а не строгая директива. Поисковик может принять ее во внимание, а может и нет. Что может помочь в данной ситуации:
✅ Проанализируйте контент обеих страниц и убедитесь, что целевая страница, действительно, более релевантна и качественна с точки зрения ключевых фраз. Иногда помогает добавление/исправление текстовой части контента.
✅ Проверьте техническую оптимизацию целевой страницы, возможно, есть проблема с ее скоростью загрузки. Посмотрите насколько целостно воспринимается ее контент ПС, возможно, часть страницы просто не индексируется. 
✅ Поработайте над внутренней перелинковкой. Убедитесь, что внутренние ссылки, которые ведут на целевую страницу имеют анкоры с вхождением ключевых запросов целевой страницы. При этом нецелевая/нерелевантная страница не должна иметь подобные анкоры.
✅ Добавьте внешние ссылки на целевую страницу с соответствующими анкорами.