kiriyk/seo_tg huggingface dataset:
Вопрос: Как можно спрогнозировать количество трафика и приблизительный CTR? И можно ли вообще это сделать?

Ответ: 💡В первую очередь хотим отметить, что все расчеты являются примерными и точное количество трафика спрогнозировать очень сложно, особенно в условия пандемии. Помимо этого на данные влияют постоянные апдейты поисковых систем.
👉 Обычно для расчета трафика используется следующий алгоритм:
1️⃣ Оцениваем спрос в нише, изучаем ассортимент нашего сайта.
2️⃣ Собираем максимально полное семантическое ядро по основным маркерам сайта. Запросы нужны максимально целевые для ресурса.
3️⃣ Изучаем сезонность через Yandex WordStat или KeyCollector, нам нужна история по запросам за последний год, пример.
4️⃣ Рассчитываем коэффициент сезонности и прогнозируем динамику, мы обычно это делаем через Google Таблицы — пример нашего рассчёта.
Тут мы по коэффициенту сезонности считаем базовый трафик, исходя из текущего трафика на сайте. Плюс считаем примерный трафик, на который хотим выйти по нашему собранному семантическому ядру и через коэффициент сезонности примерно понимаем как он будет меняться.
Но повторимся, данные получаются примерные!
👉 С CTR  всё ещё сложнее, так как там всё сильно зависит от запроса и поисковой системы. Лучше всего ориентироваться на CTR сайтов вроде Вашего, но тут нужны доступы к их инструментам аналитики, которых у Вас может не быть. Поэтому как вариант, можно использовать этот инструмент для Google, он может помочь выяснить примерную ситуацию в Google, но важно понимать что это всё очень примерно.
Вопрос: Как проверить геозависимость и геонезависимость запросов? Есть сервисы, которые автоматически это проверяют?

Ответ: Для того чтобы понимать, как проверять геозависимые и геонезависимые вопросы, нужно понимать, чем они отличаются.
▪️Геозависимые запросы – это запросы, по которым поисковая система имеет разную выдачу для разных регионов страны. К примеру, купить джинсы, доставка пиццы на дом и т.п. В основном, это коммерческие запросы без указания города.
▪️Геонезависимые запросы – запросы, по которым поисковая выдача не меняется в зависимости от региона страны. К примеру, кинотеатры в Москве, посмотреть фильм и др. Это запросы с упоминанием города либо информационные запросы.
👉 Как проверить геозависимость и геонезависимость запросов?
Основной способ – это анализ ТОПа. Нужно сравнить выдачу по интересующему Вас запросу для разных регионов. Если выдача отличается, то запрос геозависимый, если выдача не поменялась – это геонезависимый запрос. Например,  запрос «заказать суши» в Google:
— Санкт-Петербург
— Нижнего Новгорода
Поисковая выдача отличается, значит, это геозависимый запрос.
Недостаток этого метода в том, что каждый запрос придется проверять вручную, это может занять много времени. 
👉 Есть сервисы, которые автоматически это проверяют?
Да, их очень много, мы используем инструмент проверка геозависимости SEOlib.
Вопрос: Актуально ли сейчас использовать хрумер и подобные инструменты? Можно ли их использовать для прокачки, например, 2 или 3 уровня ссылок? Насколько эффективен такой подход?

Ответ: Это актуально, если у сайта слабый ссылочный профиль и вы хотите поднять его показатели. Вот пример того, как нарастили показатели DR через хрумер: скриншот.
 
Но нужно понимать, что использование таких ссылок может привести к санкциям со стороны ПС, о чём недавно напомнили в Google. Для сайта, который имеет хороший ссылочный профиль, такие площадки лишь ухудшат пропорцию хороших и плохих ссылок. Поэтому использовать такой метод наращивания ссылочной массы мы не рекомендуем. 
👉P.S. Если бы хрумеры и подобные инструменты действительно работали как нужно, тогда не было необходимости в более значительных тратах на поиски качественных площадок для размещения.
Что касается ссылок для 2 и 3 уровня, то да, Вы можете в качестве эксперимента использовать данные программы, но не злоупотреблять ими.
Вопрос: Есть сайт (спортивный), в период 2012-2016 там было по 10-20к в сутки. Потом сайт перестал обновляться и он скатился в самое дно.
Вот появилось желание снова заняться серьезно спортивным новостником. Все таки там 5к страниц, и ссылочное какое-никакое есть. Как возродить такой сайт из пепла, если он всё еще в индексе, но просто без позиций?

Ответ: Для реанимации информационного сайта необходимо:
▫️провести технический аудит, чтобы выявить ошибки, которые могут мешать сканированию контента. Новостники борются за событийный трафик, поэтому техническое состояние сайта играет одну из ключевых ролей;
▫️собрать маркерные запросы по разделам, которые Вы планируете наполнять новостями спорта, например, «Новости футбола», и снять по ним ТОП выдачи с целью выделения основных конкурентов в обеих поисковых системах;
▫️выполнить углубленный анализ конкурентов, выделив направления, по которым стоит улучшить Ваш сайт (внутренняя оптимизация, структура сайтов конкурентов, внешние ссылки, работа в социальных сетях). Как анализировать конкурентов мы писали в статье «Как провести анализ сайтов конкурентов?»;
▫️пополнить свою команду профессиональными спортивными обозревателями, которые смогут информативно и доступно донести ключевые моменты текущих событий в мире спорта; 
▫️регулярно публиковать новости на сайте сообщая о этом широкой аудитории в социальных сетях;
▫️максимально разнообразить тип публикуемого контента начиная от прогнозов и обзоров на матчи, так и интервью с известными спортсменами. Отлично подойдут выдержки из публикаций в социальных сетях известных спортсменов о их спортивной  и личной жизни (отдых на Мальдивах после олимпийских игр);
▫️проанализировать текущий трафик. Возможно есть старые публикации, которые продолжают приносить переходы из поиска. Вам просто необходимо их обновить дополнив актуальной информацией. Методику обновления контента мы описали ранее в нашем в ответе.
Посетители должны привыкнуть к тому, что самую свежую информацию о их любимых командах либо отдельных спортсменах можно найти на Вашем ресурсе. Это будет способствовать росту брендовых переходов и тематичности сайта в целом.
Вопрос: Как и чем анализировать логи сайта? Только начинаю свой путь в этом направлении, поэтому интересно как и в чём анализ логов может помочь SEOшнику?

Ответ: 💡Мы используем для анализа логов Excel и Power BI, так как, по нашему мнению, там это сделать проще всего. 
Power BI – бесплатный, удобная визуализация данных, можно объединять несколько логов в один, широкие возможности по работе с типами данных, их моделированию. 
С помощью анализа логов мы можем определить:
▫️страницы, на которые чаще всего заходят боты (на такие страницы, к примеру, будет полезно размещать ссылки на новые страницы или страницы с недостаточным весом);
▫️какие именно боты заходят на сайт (мобильные, десктопные, их User-Agent);
▫️на какие страницы и как расходуется краулинговый бюджет;
▫️попадает ли бот на нужные нам страницы;
▫️мусорные страницы, которые не удалось выявить при парсе;
▫️технические проблемы – ошибки с редиректами, битые страницы;
▫️частоту и даты заходов ботов, в какое время наибольшая нагрузка.
Также это полезно в том случае, если наблюдается спамный трафик на сайт – с помощью логов мы можем вычислить подозрительные IP-адреса и заблокировать их.
👉 Главное, что нужно сделать перед анализом логов – понять, зачем Вы его проводите, тогда Вы в них не запутаетесь. Для начала можно попробовать вычислить подозрительные переходы на сайт и проверить, на какие страницы чаще всего ходят боты, чтобы при необходимости направить их в нужное русло и тем самым правильно распределить краулинговый бюджет. 
А как это сделать, мы подробно разобрали в нашей статье «Анализ логов сайта с помощью Power BI: пошаговая инструкция».
Вопрос: Как проверить сайт на наличие дублей? Где указывается информация об их существовании и как с ними бороться?

Ответ: Чтобы ответить на Ваш вопрос, сперва нужно разобрать, какие дубли бывают. 
💡Различают два вида: технические и смысловые. Технические дубли появляются при наличии идентичного контента, чаще всего их генерирует движок сайта, а смысловые – это проблема текстов, уникальных технически, но неуникальных по смыслу.
Чтобы найти дубли страниц, для начала рекомендуем проверить их наличие в Google Search Console и Яндекс.Вебмастере в Исключённых страницах. А также в Яндекс.Вебмастере необходимо убедиться в том, что дубли метатегов отсутствуют, так как страницы с одинаковыми Title и Description могут оказаться дублями. 
Кроме того, Вы можете провести парсинг сайта и выгрузить такие данные, как дубли метатегов и контента (хеш страниц). Такой функционал есть у большинства парсеров, ознакомиться с их обзором можно в статье: «Обзор ТОП-6 лучших парсеров сайтов».
Для того чтобы бороться с дублями, необходимо понять их происхождение. 
Если Вы выявили технические дубли: 
▫️Нужно сообщить о проблеме разработчикам сайта, чтобы они это исправили. 
▫️В случае если Вы изменили структуру сайта, используйте 301 редирект.
Если у Вас смысловые дубли: 
▫️Избегайте повторов шаблонных текстов.
▫️Уникализируйте контент страницы, поработайте над текстовым описанием.
Исходя из всего вышеперечисленного, для борьбы с дублями нужно: 
👉 Периодически следить за информацией в Google Search Console и Яндекс.Вебмастере, так как там можно очень быстро обнаружить информацию по дублям. 
👉 Необходимо раз в 2-3 месяца обновлять технический аудит сайта, парсить его, и тогда будет возможность быстро замечать дубли. 
👉 Следите за позициями, если релевантная страница сменится, то, возможно, её заменил дубль.
Подробнее про дубли страниц Вы можете прочесть в нашей статье: «Дубли страниц. Чем опасны? Как найти и удалить?».
Вопрос: Есть запросы, которые на 50% коммерческие, а на 50 – информационные. Можно для таких запросов на сайте делать и статью в блог, и коммерческую страницу? Стоит такие страницы линковать между собой? В таком случае можно надеяться на двойной сниппет в Google?

Ответ: Всё зависит от типа Вашего сайта: 
▫️если сайт коммерческий – создавайте коммерческую страницу; 
▫️если информационный – информационную. 
Так как если сделать всё наоборот, то даже на топовых позициях информационная страница может не принести конверсий коммерческому сайту. 
 
👉 Если создать обе страницы на одном сайте – они могут мешать друг другу, путая поисковую систему при выборе релевантной. 
💡Неплохим вариантом, возможно, будет объединить оба варианта в одной странице, например: 
▫️если у Вас коммерческий сайт, то сделать коммерческую страницу и улучшить её развёрнутым описанием;
▫️а если информационный, то можно сопроводить статью препаратами и ценами на них. 
❗️Что важно понимать! Единственно верного ответа здесь нет. Понять, что сработает для Вашей ниши, поможет только тест, что Вам и нужно будет сделать. 
Что касается «двойного сниппета в Google»: если под ним понимается, что обе страницы будут ранжироваться в ТОПе, то такой вариант возможен. Для этого Ваш сайт должен содержать полный и исчерпывающий ответ на вопрос пользователя.
Вопрос: На мой сайт стали ссылаться с различных порно, эскорт и всякого рода мусорных сайтов. Зачем порносайтам ставить ссылки на меня?

Ответ: Такие ссылки могут проставлять Ваши конкуренты с целью наложения на Ваш ресурс санкций со стороны поисковиков.
Как бороться со спамными ссылками в Яндексе, мы отвечали вот здесь. В Google есть инструмент отклонения ссылок Google Disavow Links Tool. 
👉Хотим отметить, что ранее Google игнорировал спамные ссылки, но во время последней видеовстречи для вебмастеров сотрудник Google Джон Мюллер заявил, что алгоритмы поисковой системы могут не только игнорировать плохие ссылки, но и понижать сайт — ссылка на пруф, но, вероятнее всего, санкции будут накладываться, если Google поймёт, что ссылки на сайт покупаются.
Вопрос: Правда ли, что сделанные на тильде и подобных конструкторах сайты не могут попасть в ТОП по запросам, несмотря на наличие всех необходимых текстов, ссылок, атрибутов?

Ответ: 💡Нет, подобные сайты могут попадать в ТОПы, но чаще всего это запросы, где нет конкуренции и трафика, что-то узконаправленное. 
Сложность в продвижении таких сайтов чаще всего вызвана такими факторами:
▫️Функционала конструкторов, как правило, не хватает, чтобы перекрыть часть функций и нужных элементов сайтов в ТОПе. А если будет необходимо дописать новый скрипт, то его сложно (а то и невозможно) внедрить в структуру сайта.
▫️Конструктор сайтов зачастую содержит в коде лишние строки, а сами страницы достаточно объёмные, что отражается на скорости загрузки.
▫️Оптимизация сайта под нужды SEO на конструкторах часто очень ограничена админкой конструктора.
👉 Поэтому мы всё же рекомендуем не использовать подобные CMS, так как, переведя сайт на тот же WordPress, можно уже избежать кучи проблем и при этом сохранить дизайн. Кроме того, сайты на конструкторах зависимы от основного ресурса. В то время как обычные сайты полностью подконтрольны Вам.
Вопрос: Влияет ли смена дизайна или смена темы CMS на ранжирование сайта в Яндексе и Google без изменения контента (или минимальные изменения) и URL?

Ответ: 💡 Дизайн сайта, безусловно, оказывает значительное влияние на ранжирование. По этой причине его смена всегда несёт за собой некие риски с точки зрения SEO.
Для поисковых систем после редизайна документы будут выглядеть как новые, особенно при значительных изменениях. Поисковый бот заново проиндексирует контент и оценит релевантность страниц запросам.
Новый дизайн может отразиться на позициях сайта как положительно, так и отрицательно, если обновления покажутся поисковикам неудачными. Также нередко после редизайна всплывают различные технические ошибки. Поэтому мы советуем подходить к этому вопросу крайне осторожно и внимательно, особенно в том случае, если у сайта хорошие позиции и трафик. Многие ошибки можно и нужно предотвратить ещё на начальном этапе.
👉 До этапа разработки нужно понять, какие страницы сайта приносят основной трафик. Чтобы не потерять достигнутое, советуем на этих страницах не внедрять глобальные изменения – основной контент должен быть сохранён.
Как минимизировать риски:
▫️редизайн лучше осуществлять в несезон;
▫️создать бэкап сайта, чтобы можно было откатить изменения в случае неудачи;
▫️выкатить новый сайт на отдельном домене или поддомене (обязательно закрытом к индексации) и сделать теханализ до того, как он будет залит на основной домен;
▫️по возможности сохранить старую структуру страниц и расположение ключевых блоков и кнопок;
▫️сохранить ключевой текстовый контент и метаданные;
▫️проследить за сохранением внутренней перелинковки и веса страниц;
▫️убедиться в том, что сайт оптимизирован для мобильных устройств;
▫️оптимизировать скорость загрузки;
▫️протестировать юзабилити новой версии сайта.
👉 После редизайна стоит тщательно отслеживать динамику позиций и трафика, а также поведенческие метрики, мониторить панели вебмастеров на предмет ошибок и предупреждений.
Поисковикам нужно время, чтобы переиндексировать страницы вашего сайта, поэтому первые недели после редизайна позиции может штормить. Однако если они не возвращаются в течение длительного времени, скорее всего, есть проблема. В таком случае либо откатываем изменения, либо исправляем ошибки и дорабатываем новый дизайн.
Вопрос: Если у конкурента какие-то страницы по определённым запросам в ТОПе. Его весь многостраничник влияет на рейтинг этой страницы или каждая отдельно? Суть вопроса: сможет ли хорошо оптимизированный лендинг быть в выдаче выше, если эта страница по всем показателям оптимизирована лучше, чем у конкурента многостраничника? Или придётся делать многостраничник и оптимизировать все страницы, чтобы какие-то попали в ТОП (ПС - Google, сайт компании предоставляющей услугу)?

Ответ: 💡Поисковые системы отдают предпочтение в ТОПе сайтам с большим ассортиментом товаров/услуг. Как правило, лендинги создаются для привлечения платного трафика и лишены большого количества полезных для SEO-инструментов, таких как:
▫️внутренняя перелинковка;
▫️микроразметка для разных типов страниц;
▫️расширение ассортимента за счёт создания страниц для новых услуг;
▫️постраничная оптимизация метаданных, текстов;
▫️внешние ссылки.
Основной плюс многостраничника в том, что он может накапливать ПФ за счёт большого количества страниц. Помимо этого, люди будут делиться контентом, и в итоге домен обрастёт ссылками, после чего через перелинковку усилятся все страницы сайта. Поэтому лендинг не сможет конкурировать с многостраничником, так как чаще всего на оценку страниц будет влиять оценка всего сайта в целом.
Но есть исключения, когда лендинги попадают в ТОП – чаще всего это какие-то брендовые запросы. В Вашем случае нужно:
👉 Провести анализ ниши, проверить, есть ли там лендинги, если есть, то можно пробовать.
👉 Если лендингов нет, то можно попробовать сделать под несколько запросов такие страницы и провести эксперимент. Важно учесть, что, скорее всего, это сработает только с коммерческим типом страниц. С информационными такой подход, вероятно, не сработает.
Если стоит цель привлечь органический трафик из Google, создание многостраничного сайта – лучшее решение. Для каждой услуги необходимо создать отдельную страницу и по итогу анализа конкурентов провести оптимизацию для соответствия текущему ТОПу выдачи по интересующей поисковой системе и региону.
Вопрос: Могли ли вылететь страницы из поиска Яндекс с пометкой "Малоценная или маловостребованная страница", по причине того, что слетел ssl сертификат на сутки? Какие еще технические проблемы могут привести к выпаданию страниц из индекса с таким статусом?

Ответ: 💡Нет, страницы не будут исключены из поиска по причине того, что слетел SSL сертификат. 
▫️Во-первых, робот может исключить страницы, если не видит контент на ней, а отсутствие SSL сертификата не закрывает от сканирования контент на странице. 
▫️Во-вторых, по нашим наблюдением необходимо от двух недель, чтобы алгоритм посчитал страницу маловостребованной или малоценной.
👉Мы выявляли следующие технические причины, по которым Яндекс удалит страницы  с данной меткой:
▫️Фильтр интернет-магазина, который генерировал физические страницы. В результате на сайте появилось около 25 000 страниц фильтров, которые Яндекс удалил.
▫️Долгий ответ сервера. Также встречали проекты, где страницы были исключены, из-за того, что робот Яндекса не мог их проиндексировать за счет долго ответа сервера.
▫️SPA - сайт с некорректно настроенным prerender. Важно, чтобы робот корректно видел страницу сайта.
⚠️Кроме этого, в справочнике Яндекса (ссылка) есть перечень технических причин, по которым страницы могут быть удалены как малоценные:
▫️Заголовки страницы (title, h1, h2 и т.д.) не точно или вовсе не описывают содержание страницы.
▫️Важный контент на странице подан в виде изображений. Текстовая версия при этом отсутствует.
▫️Вывод важного контента страницы JS-скриптами. В таком случае стоит проверить ответ сервера и увидеть HTML-код страницы таким, каким его получает робот. Если содержание страницы отличается, стоит отказаться от загрузки контента через скрипты.
▫️Использование iframe для вывода контента.
Вопрос: Уже достаточно долго сайт очень настырно атакуют боты, заходящие прямыми заходами. Основная атрибуция ботов — заходы на сайт долгие, больше 2 минут, страницы листают, открывают формы, но заявки не оставляют. С момента, когда это заметили прошло уже около 6 месяцев. Сайт потерял все позиции в поисковых системах. Пытались бороться самостоятельно, включив клаудфлейр, добавив кнопку подтверждения при входе на сайт, но все эти действия не дают хорошего желаемого результата. После этих манипуляций у нас существенно снизилось количество заявок с сайта. Отключили все сторонние сервисы и ограничения, но опять пошли боты.

Подскажите, пожалуйста, что нам делать в такой ситуации? Мы сейчас готовим новый сайт нашей компании и не хотим наткнуться на такие проблемы на новом сайте. Менять домен не хочется, но нормального решения проблемы все еще не видим. Подскажите, что делать или как нам не учитывать этих пользователей в поведенческих? У нас был хороший (1000-1500 посетителей в месяц) трафик с поисковых систем. Теперь 300 посетителей и мы продолжаем падать.

Ответ: 💡При прямых переходах основной метод борьбы является блокировка IP-адресов вручную. К сожалению, заблокировать получиться только очевидных ботов, а более “хитрых” нет. Помимо этого это очень времязатратное занятие, т. к. придется на протяжении долгого времени ежедневно отслеживать по логам вашего сайта эти «подозрительные» IP и блокировать их до тех пор пока у недоброжелателей не закончатся прокси и vpn, а их у накрутчиков будет бесконечно много.
Также существуют уже готовые базы спам-листов с IP-адресами ботов, которые были каким-то образом замешаны в накрутке.
👉 С Ваших слов, боты ходят по сайту больше 2 минут и не оставляют заявки — такие действия не должны плохо влиять на поведенческие факторы сайта, так как отказов нет, а страницы форм должны быть закрыты от индексации. Тут нужно анализировать, так как мало вводных данных и нельзя всё сваливать на ботов. Как определить негативную накрутку ПФ мы рассказывали в данной статье. 
⚠️Сейчас необходимо сравнить данные заходы с поведением пользователей на сайте, если в целом оно схожее, тогда проблем с такими заходами быть не должно. 
Причина потери позиций скорее всего глубже, Вы можете оставить заявку у нас на сайте и мы поможем подробнее разобрать данную ситуацию.
Вопрос: Есть 6 сайтов с отдельными доменами — сайты идентичные, но на разные города (вместо поддоменов). Стоит ли их перелинковать между собой? Или это может только ухудшить позиции сайтов?

Ответ: 💡Региональные домены можно перелинковать между собой, так Вы улучшите ссылочный профиль и дадите Вашему ресурсу некую “мультирегиональность”. Пользователи будут заходить и видеть ссылки на другие города — это создаст дополнительный фактор надежности ресурса. Кроме того, рассмотрите вариант перелинковки сайтом через плашку-переключатель в хедере сайта. Этот вариант наиболее удобный и привычный для пользователей.
Никаких санкций со стороны ПС в таком случае быть не должно, т.к. по идентичному содержанию страниц, разным контактам, указанным на сайте и разным регионам, присвоенным в Я.Вебмастере боты определят сайты как региональные представительства одной организации.
👉 Но на будущее, обратите внимание на создание поддоменов вместо 6 одинаковых сайтов. Особенно это важно в высококонкурентных нишах. 
Поддомены помогут вам разделить локальные ключевые слова и ссылки для разных городов/стран, чтобы они не пересекались и не конкурировали друг с другом. Кроме того, поддомены в таком случае значительно упрощают администрирование и продвижение сайта, а также работу с ссылочным профилем.
Вопрос: Планируется создание узконишевого интернет-магазина, который будет продавать на Беларусь, Россию, Украину. Для успешного мультирегионального продвижения на какие моменты обратить внимание? Под каждую страну делать поддомены или папки на основном домене ? Домен лучше com, верно?

Ответ: 💡Рекомендуем создать папки под Беларусь, Украину и Россию на основном домене Вашего сайта.
👉 Что касается доменной зоны, для Вашего проекта стоит реализовать сайт в зоне com или org. Домен с общей национальной привязкой будет плюсом с точки зрения доверия к сайту и повлияет на улучшение конверсий. Все региональные версии реализовать через подпапки site.com/cn.
В целом, в данном случае мы рекомендуем обратить внимание на следующие нюансы:
▫️Сделать украинскую версию сайта.
▫️Корректно настроить hreflang.
▫️Сконцентрировать внимание на приоритетном рынке.
▫️Равномерное наращивание ссылок по трем странам.