Black Hat SEO

2021-07-23 16:14:07 About This Result Panel.
22 июля вышла статья в блоге гугла, где они расширяют информацию по результатам выдачи в блоке About This Result. За это, как минимум, нужно сказать спасибо западным компаниям, которые потребовали от "корпорации зла" раскрыть, что влияет на ранжирование. Возможно, кстати, более открытое общение компании с вебмастерами, предупреждение о всех даже более мелких апдейтах - тоже результат давления на компанию.

Самое замечательное, что можно почерпнуть из статьи:

Related terms: Google also looks for terms that our systems determined are related to the words in your query. If you search “how to cook fish in the oven,” we’ll also look for pages that have related terms like “bake” and “recipe.”

Это вам не LSI-слова. Мне здесь видно, что используется векторное представление данных и контекстная близость. Кстати, BERT это развитие как раз архитектуры векторного представления слов.

Looking at links: When other pages link to a page using similar words as your query, that page might be relevant to your search. It can also be a helpful indicator of whether online content creators tend to regard the page as useful for that topic.

Тут прямо сказано, что упоминание слов из поискового запроса в анкоре на доноре - это хорошо и алгоритм учитывает в расчете релевантности. Также отсюда можно понять, что доноры должны быть из одного топика с ключевой фразой, т.е. когда происходит обработка информации из документа донора и акцептора, система должна определить, что оба документа принадлежат к одному топику. Из прикладных инструментов: вы можете проверять принадлежность текстов к одной категории в Cloud Natural Language.

Local relevance: Our systems also look at factors like the language you’re using to search as well as your country and location, to deliver content relevant for your area. For example, if you search "what day is trash pickup?,” it’s helpful to get results that are applicable to your city or state.

Тоже очень важный пункт, Google часто старается показывать локальную выдачу, если таковая есть. В своих исследованиях замечал, что бывает достаточно добавить упоминание города в документе в title и тело документа, чтобы Google посчитал, что данную статью необходимо ранжировать, даже если состоит она по большей части из копипаста, но здесь есть ньюанс, что это может мешать ранжироваться документу в других городах, регионах. Открыть/Комментировать

2021-07-12 12:38:52 Автоматически генерированный контент.
Мой коллега Илья немного опередил с написанием поста про контент.
Тем не менее, я хотел бы дополнить.
Text generated from scraping Atom/RSS feeds or search results. Да, гугл знает про контент на сниппетах и, вероятно, научился его определять, поэтому они и работают хуже.
Нас же интересует вот этот пункт - Stitching or combining content from different web pages without adding sufficient value. Как и сказал Илья, гугл прямо указывает на то, что можно использовать копипаст, но нужно добавить дополнительную ценность (тогда мы пройдем 2-й спам-фильтр гугла).
Для этого можно добавить, например, шаблонные тексты со спинтаксом, как в одном из предыдущих постов.
Также можно куски собранного текста скармливать predict моделям искусственного интеллекта (GPT, T5 и т.д.), чтобы они дополнили контент. Лучше всего вообще им задавать вопросы, так ответы получаются интереснее.
Попробуйте еще подумать, что может быть дополнительной ценностью, я добавил только два варианта, но это не предел.
Следует упомянуть, что я не считал минимальное количество текста с дополнительной ценностью для того, чтобы не срабатывала спам-фильтрация гугла - это нужно протестировать самостоятельно. Открыть/Комментировать

2021-07-05 15:54:31 Как заглянуть за клоаку, посмотреть контент на PBN, даже если страницу очень хорошо спрятали.
1. Сайт за клоакой, не поставлен мета тег robots noarchive. Просто смотрим кэш гугла у страницы.
2. Сайт за клоакой по useragent. Меняем Useragent через расширение браузера, найти для своего браузера можно в Google по запросу "user agent switcher".
3. Сайт за клоакой на среднем уровне. Пробуем посмотреть через mobile-friendly, возможно разработчик клоаки не стал утруждаться.
4. Сайт недоступен по mobile-friendly, только по Reverse DNS именно для поискового бота google. Для этого нам понадобится сайт, который добавлен в Google Search Console (GSC). Создаем для сайта файл, например, php со следующим кодом , заменяем https://domain.com/ на необходимую страничку, затем в GSC нажимаем Проверка URL, где вводим ссылку на файл на нашем сайте, который добавлен в консоль. После подгрузки информации по URL, жмем Проверить страницу на сайте. Далее нажимаем Изучить проверенную страницу и, благодаря редиректу, получаем данные со страницы за клоакой. (Редирект можно сделать для URL и с помощью правил веб-сервера, но я выбрал способ попроще)
Как видите, защититься от последнего способа сложнее. Открыть/Комментировать

2021-06-28 12:39:42 Разъяснения по спам-апдейту Google и спам-фильтрации.
23 июня в твиттере Google SearchLiaison объявили о спам-апдейте и множество людей переполошилось, некоторые спрашивали меня в ЛС, что вообще происходит.
Ребята, ничего нового не произошло, это те самые спам-апдейты, которые бывают каждые полгода, когда нам массово раздают ручники, падает трафик. Если вы часто следите за новостями Google'а, то могли заметить, что команда поиска в этом году в качестве эксперимента сообщают о всех изменениях. Наверное думали, что прекратится нытье вебмастеров, но оно только усилилось.
Также SearchLiaison выложили ссылку на апрельскую(!!) статью блога, где они рассказали про фильтрацию вебспама.
Поясню по каждой ступени:
1. Фильтруют во время краулинга. Это то самое "что-то в индекс не лезет", "гугл не хочет жрать дор". Пока не преодолеете эту стадию - трафика не будет.
2. Анализ после включения в индекс. Это тот самый фильтр "по site: 4 страницы.", "дор набрал немного трафика и затем гугл порезал", его как раз выкатили в декабре 2019-го и это не "берт", как многие считают и обвиняют. Чаще всего сайты живут от месяца (примерно), прежде чем применяется этот этап фильтрации.
3. Полуавтоматический анализ и ручники. Здесь уже команда гугла следит за необычно резкими всплесками трафика, высматривают новые схемы доров и выдают ручники, больше всего во время спам-апов.
Антиспам отдел Google работает отдельно от команды поиска, поэтому никакого отношения к основному алгоритму ранкинга они не имеют, это нужно уяснить в первую очередь (кстати, в этом отделе работают русскоязычные ребята). Также хочу сказать, что антиспам фильтрация работает на основе алгоритмов machine learning, включает в себя множество оцениваемых параметров, от этого и пляшем. Открыть/Комментировать

2021-06-15 12:36:38 Brandjacking next level.
Многие знают, что есть злоумышленники, которые подменяют в названии чужого брендового домена букву i и l, либо удваивают какие-то буквы, либо пользуются typosquatting'ом.
Но есть совершенно другой уровень подражания домену бренда, нужно просто знать особенности encoding'а доменов.
https://www.w3schools.com/tags/ref_urlencode.ASP - здесь представлен список символов (неполный), которые доступны для записи в URL. Сразу скажу, что далеко не каждая доменная зона поддерживает данные символы, но, например, .com - жрет почти все.
Для чего используют? Например, стать в топ по брендовому запросу, показываться в рекламном блоке по брендовому запросу, используют, как домен-прокладку, подражая сайту сми.
Как защититься: купить все возможные варианты написания домена, включая символы из этой таблицы, многие бренды так делают (в некоторых случаях google chrome определяет подмену). Открыть/Комментировать