noindex, nofollow

Проблемы с парсингом выдачи Google

Если у вас возникают сложности со скрейпингом Google, вы не одни. Даже крупнейшие сервисы трекинга позиций столкнулись с этой проблемой. Как сообщили в Similarweb Барри Шварцу, неполадки начались 15 января, когда Google ввел новые методики борьбы с автоматическими запросами.

Ребята из A-Parser оперативно выпустили фикс вчера, но уже сегодня парсинг снова перестал работать. Команда обещает разобраться.

Следим за развитием ситуации.

По данным исследования Terakeet Engineering, 40% URL'ов, присутствующих в AI Overviews, не входят в топ-70 органических результатов поиска по тому же ключевому слову.
Тем не менее, ранжирование страницы в традиционной выдаче сильно коррелирует с ее включением в AIO.

Распределение потока поисковых запросов к Гуглу по типам.
via Neil Patel @ X

Сегодняшний сбой в рунете на графике Liveinternet.

Что ж, действительно после полутора лет роста Реддита в Гугле тренд сменился на противоположный (скриншоты Лили Рэй).
Также сайт переместился с 3 на 4 место в рейтинге видимости Sistrix в органике в США.
Теперь следим за котировками RDDT 🙃

При этом официального апдейта сейчас нет, а инструменты типа Semrush Sensor показывают охлаждение.

Баг, позволяющий менять местоположение произвольного бизнеса на Google Maps, что приводило к исчезновению из локальных результатов, исправлен, сообщает Барри Шварц. Впервые о проблеме стало известно еще в марте 2024 г.

Небольшое видео от Мартина Шплитта про стратегии рендеринга сайтов:
— Pre-Rendering (генерация статического сайта)
— Server-Side Rendering (SSR, рендеринг на стороне сервера)
— Client-Side Rendering (CSR, рендеринг на стороне клиента)
— Гибридный подход, который называется «гидратацией» (Hydration).

Текстовая версия на сайте Search Engine Journal.

Google Daily Listen
Гугл в экспериментальном режиме (Search Labs) запускает аудиоверсию Google Discover.
Daily Listen предоставляет собой сгенерированный ИИ звук, который саммаризует темы на основе вашей истории.
Длина эпизодов — до 5 минут.

В новом официальном документе Гугл описывает структуру и функциональность ИИ-агентов.

Агент ИИ — это, по сути, приложение, которое пытается достичь цели, наблюдая за окружающей средой и взаимодействуя с ней с помощью различных инструментов.

Такой агент автономен и может действовать независимо от вмешательства человека, особенно если ему поставлены четкие цели или задачи.

Агенты ИИ могут, например, делать покупки в интернете, бронировать авиабилеты или самостоятельно собирать информацию. Одним из таких агентов является, например, Project Jarvis. Этот агент Гугла сможет иметь возможность самостоятельно выполнять задачи в браузере.

Базовая архитектура ИИ-агента состоит из трех основных компонентов: модели рассуждений, уровня оркестрации и внешних инструментов.

Основное различие между моделями и агентами заключается в их разных способностях взаимодействовать с реальным миром и принимать решения.

via SEO Südwest

В Google Search Console в 24-часовом представлении отчета "Эффективность" добавили возможность экспорта данных.
via Google Search Central

Пример классной программы лояльности :)

24 января приму участие в SEO-квизе.

Видео выступления гуглоида Мартина Шплитта на конференции SearchNorwich 18, во время которого он рассказывает, что далеко не во всех проблемах с индексацией виноват JavaScript как таковой. Мартин утверждает, что когда JavaScript замешан в проблемах сканирования или рендеринга, чаще всего это происходит не из-за того, что JavaScript как-то не так работает, а из-за его неправильного использования.

https://t.me/tkhychs

Встретились с автором Тихий час. Андрей это чисто Илон Маск 🫡

Google Ads тоже планирует масштабный ИИ-прорыв в этом году
Рекламная сеть готовится к «сейсмическому сдвигу» в поведении пользователей поиска, при этом ИИ играет центральную роль в преобразовании того, как пользователи находят информацию и взаимодействуют с компаниями.

По словам Брендона Крахэма, вице-президента по глобальной поисковой рекламе и коммерции, эта трансформация представляет собой более масштабное изменение, чем мобильная революция, и сигнализирует о фундаментальном изменении подхода рекламодателей к цифровому маркетингу.

Изменения затронут 3 области:
— эволюция поведения в поиске: от ключевых слов в сторону мультимодального опыта
— креативные ИИ-инструменты для маркетологов
— расширенные возможности аналитики

Гугл в 2025 году делает ставку на прорыв в области ИИ и сосредотачивает все внимание на Gemini.
Цель в том, чтобы Gemini стал 16-м продуктом корпорации, который достигнет аудитории в 500 млн пользователей в месяц.

Личные итоги
Мало кому будет интересна подобная рефлексия, наверно, но все же :)
— больше сайтов, больше ответственности и не-SEO задач
— путешествовал мало, надеюсь исправить в 2025, раньше было больше :) Обожаю горы, сгонял в Северную Осетию и Кавминводы
— Покупка года - велосипед 🙃

С наступающим 2025 годом, друзья! Удачных апдейтов, амбициозных целей и не забывайте отдыхать! ❄️

🎄Вспоминаем самые яркие и значимые события 2024 года в мире поисковых систем и SEO

Гугл
— Соглашение с Reddit и последующий рост органического трафика (кстати, растет до сих пор)
— Замена Панду Наяка на Лиз Рид
— Запуск Circle to search
— Серия увольнений и сокращений персонала
— Запуск политики Site reputation abuse
— Запуск вкладки Discussions and forums
— Запуск AI Overviews
— Запуск AI-organized search results
— Запуск вкладки Веб-версия
— Утечка документов API поиска
— Отказ от бесконечного скролла результатов поиска
— Продолжение антимонопольного дела в США
— Разворачивание AI Overviews в других странах
— Ограничение работы Indexing API
— Запуск рекламы в AI Overviews
— Изменение дизайна серпа по еком-запросам
— Отключение оператора cache:

Яндекс
— Новая роль Михаила Сливинского - абмассадор интернет-площадок в Поиске и запуск телеграм-канала
— Новый инструмент подбора запросов в Вебмастере
— Запуск Нейро и последующее раскатывание на все запросы
— Закрытие "Трендов" в Вебмастере
— Новый формат Директа внутри органических результатов

OpenAI
— Серия партнерств с издателями
— Запуск ChatGPT search

Спасибо, что в этом году были с редакцией канала Noindex, nofollow 🙃

December 2024 spam update завершен. Продлился неделю, как и обещали.

Crawling December: про использование CDN и сканирование поисковыми ботами
Последний выпуск рубрики.
— инфраструктура сканирования Google поддерживает любой из вариантов без проблем - отдельное имя хоста (cdn.example.com) или когда СDN поддерживает основное имя хоста или одновременно и то и другое
— убедитесь, что поисковые роботы не заблокированы защитой CDN - в документации есть ссылки на диапазоны IP, используемые различными типами роботов Google
— используйте ответ 503 или 429 при временной непреднамеренной блокировке поисковых роботов
— если показываете капчу или иную проверку на робота - отдавайте 503
— избегайте ошибок Soft 404 (т.е. ответ 200 ОК по несуществующим урлам)
— пользуйтесь инструментом проверки URL в Search Console для проверки корректности рендеринга.

Best-of-N (BoN) — новый метод джейлбрейка ИИ
Специалисты из компании Anthropic опубликовали исследование, демонстрирующее, что LLM можно принудить выполнять запрещенные действия, модифицируя промпты и повторяя их на разный лад; этот процесс можно автоматизировать.
Например, слова в промпте перемешиваются случайным образом, искажается грамматика или буквы меняются на заглавные до тех пор, пока не будет получен нужный ответ.
Метод работает не только с текстом: изменения графических и голосовых промптов также позволяют обходить защиту.
BoN достигает высоких показателей успешности атак (ASR) на языковых моделях с закрытым исходным кодом, таких как GPT-4o и Claude 3.5 Sonnet.

Политика Google Ads обновлена: объявления, содержащие ссылки на страницы, которые находятся под ручными санкциями (manual actions) за спам в поиске, будут отклоняться.

Результаты поиска, организованные с помощью ИИ, расширили на запросы, связанные с ресторанами.

Примеры изменения видимости от Гленна Гейба: сначала негативный эффект от core и затем от спам апдейта.

Ждем вкладку Нейро AI Mode в Гугле. Там будет чат с Gemini.

Реорганизация Гугла продолжается: Сундар Пичаи сообщил, что компания сократила должности менеджеров, директоров и вице-президентов на 10% в рамках кампании по повышению эффективности.
Некоторые из этих должностей были изменены на неуправленческие, а другие были полностью ликвидированы.

Перед выходными поделюсь видео с рассказом Андрея Себранта про то, как ИИ формирует ИТ-сферу будущего.

📈Качественный гестпостинг от MonsterPBN📈

Берем все заботы на себя:

✅ Подбор площадок
✅ Проверка на спам и Гугл фильтры
✅ Подбор тем статей и написание контента
✅ Помощь с анкор-листом
✅ Контроль исполнения

Экономим ваше время и деньги

Мы ищем реальные сайты, а не сайты, созданные для манипуляции метриками Ahrefs, Majestic и продажи ссылок.

📌 Свяжитесь с нами: @monsterpbn
🔗 Подробнее: Monster PBN и Кейсы

#нативнаяинтеграция

Поддерживают ли краулеры ИИ-сервисов JS?
Vercel и MERJ выпустили исследование:
— не поддерживают рендеринг JavaScript'а: OpenAI (OAI-SearchBot, ChatGPT-User, GPTBot), Anthropic (ClaudeBot), Meta (Meta-ExternalAgent), ByteDance (Bytespider), Perplexity (PerplexityBot)
— ChatGPT и Claude извлекают JS-файлы, но не выполняют их
— содержимое, включенное в исходный HTML, например JSON-данные или отложенные React Server Components, все равно может быть проиндексировано, поскольку ИИ-модели могут интерпретировать не-HTML-контент
— Gemini поддерживает полноценный рендеринг JS, т.к. он использует инфраструктуру Googlebot
— AppleBot также поддерживает рендеринг JS с помощью браузерного краулера, похожего на Googlebot
— ИИ-роботы сканируют примерно 28% от объема Googlebot, т.е. это уже вполне заметное явление в интернете.

Появился еще один аргумент в пользу внедрения SSR при разработке сайта.

❗️December 2024 spam update запущен
Еще один предновогодний сюрприз от Гугла.
Апдейт затронет все гео и языки, раскатить обещают за неделю.

💻Каждый день SEO-специалисты бегают за алгоритмами Google, как коты за лазерной указкой. А как насчёт того, чтобы перестать идти у Google на поводу?

На канале «В SEO ХОРОШЕГО» автор делится инсайдами, которые действительно работают. Здесь узнаешь:
🔵 Как Google обновил Search Console и что это значит для тебя.
🔵 Как избежать дублей и правильно настроить URL.
🔵 Почему мифы о мета-тегах только отвлекают от настоящей работы.

➡️ «В SEO ХОРОШЕГО» — это не просто SEO-канал, а место, где ты сможешь от души посмеяться над ловушками поисковиков, пока другие их боятся. Заходи, будет полезно и весело!

#нативнаяинтеграция

Сундар Пичаи на саммите DealBook заявил, что поисковая система Google «существенно изменится» в следующем году, несмотря на его ожидания, что темпы развития ИИ замедлятся.
Компания готовится представить значительное обновление модели Gemini, направленное на повышение функциональности и точности результатов поиска.
На фоне дискуссий о будущем Google поиска Пичаи назвал нынешний этап «ранними стадиями глубоких изменений».

Что мы узнали из свежего выпуска Search Off the Record:

Кластеризация (clustering) — это выбор страниц, которые поиск Гугла считает одинаковым. А канонизация (canonicalization) — это выбор лучшей из этих страниц.

Поиск использует около 40 сигналов для выполнения канонизации:
редиректы, rel=canonical, hreflang x-default, XML sitemap, ссылки, pagerank и др.
2 наиболее распространенных конфликтующих сигнала — это канонические теги и редиректы.

Как привлекать трафик из Google Discover на тексты, сгенерированные ИИ: https://vc.ru/marketing/1678026-zhurnal-edadila-rost-v-117-raz-po-trafiku-za-schet-kombinacii-ii-i-chelovecheskogo-kontenta#trx08

В абсолютных цифрах трафика не так много, но в целом материал интересный.

В качестве пятничного оффтопа - небольшое интересное выступление про продуктовое мышление в командах разработки. Емкий доклад всего на 17 минут.

November 2024 core update завершен. Он продлился 25 дней.

Новое в поиске Гугла: уведомление о персонализации выдачи и возможность ее отключить.

10 лет эволюции нейросетей в Яндекс Поиске
Короткий обзор основных вех применения нейросетей:
2014 — поиск по загруженной картинке
2015 — улучшение поиска по картинкам по текстовым запросам
2016 — алгоритм «Палех»
2017 — алгоритм «Королёв»
2020 — YATI
2024 — Нейро

Крис Лонг рассказывает, как массово сгенерировать тексты для страниц категорий интернет-магазина с помощью Screaming Frog + OpenAI API.
Ничего прорывного в этом мануале нет, просто пошаговое описание варианта применения лягушки.

Мартин Шплитт в очередной раз напоминает про распространенную ошибку: не следует одновременно использовать meta noindex и запрещать сканирование страницы в robots.txt — в этом случае робот просто не видит тег noindex и страница все равно может быть показана в выдаче, если на нее есть ссылки.

Сосновский запустил новогодний SEO-розыгрыш https://t.me/sosnovskij/251 - рекомендую поучаствовать. Тем более что для участия делать ничего не нужно, а призы достойные, например:

🔹 10 тарифов S от Topvisor на 6 месяцев;
🔹 10 лицензий SiteAnalyzer;
🔹 4 тарифа CheckTrust "Новичок" на 6 месяцев;
🔹 6 тарифов Keys so «Базовый» на 1 месяц.

Узнать, какие еще призы разыгрываются (всего их более 40) и стать участником розыгрыша можно по ссылке https://t.me/sosnovskij/251

P.S. Да и контент на канале норм - Сергей в сеошной теме с 2006 года, есть что почитать 🙂

#нативнаяинтеграция

Мартин Шплитт и Гэри Ийеш в свежем посте блога Google Search Central рекомендуют размещать ресурсы сайта на разных хостах (CDN или поддомены) для экономии краулингового бюджета.
Googlebot кэширует ресурсы (JS, CSS) на 30 дней независимо от настроек HTTP-кеша.
Блокировка ресурсов в robots.txt может нанести ущерб способности Google отображать (производить рендеринг) и ранжировать страницы.

Рэнд Фишкин выпустил исследование про использование поиска Гугла
Выборка из 332 млн запросов за 21 месяц (январь 2023 - сентябрь 2024) из панельных данных Datos (принадлежит Semrush), 130 тыс. десктопных и мобильных устройств в США.
Выборка смещенная: ее ограничили запросами, которые встретились более 100 раз за 21 месяц; но в исследовании также присутствовал полный набор запросов за 1 месяц.

Инсайты:
— из 332 млн запросов 321К уникальные
— всего 148 запросов составили почти 15% объема поиска (это брендовые запросы типа youtube, gmail, amazon и т.п.)
— 44% запросов - брендовые
— более 50% запросов - информационные
— 14,5% запросов - коммерческие
— 0,69% запросов - транзакционные
— 25% запросов - развлекательные.

Techopedia потеряла половину небрендового трафика и даже не ранжируется по навигационному запросу [techopedia]. Похоже на ручные санкции.
Обнаружил Алекс Буракс @ X

Куда же без SEO-прогнозов на 2025 год 🙃
Бретт Табке на вновь ожившем сайте Search Engine World предполагает:
1) усложнение и обфускацию верстки серпа в Гугле, что сильно осложнит парсинг выдачи
2) ужесточение политики в отношении использования сторонних кук (third-party cookies)
3) органика продолжит смещаться вниз, на 2 страницу; первую съест реклама и сервисы Гугла
4) цена за клик в Google Ads вырастет на 60%
5) глобальное SEO — это новое локальное SEO (про страны за пределами США и Европы)
6) оптимизация под голосовой поиск оживет из-за перехода к диалогам с ИИ
7) OpenAI выпустит браузер

Барри Шварц отмечает 21 год сайту Search Engine Roundtable 🎂

Еще один бенчмарк, отслеживающий распространение AI Overviews по тематикам:
https://dashboard.ziptie.dev/aio-monitor

Индекс AI Overviews обновляется позже основного веб-индекса.
Это проявляется при обновлении/удалении контента, запрете в robots.txt или удалении урла из индекса в результате ручных санкций или по другим причинам, заметила Лили Рэй.

Собственно, эта информация подтвердилась в официальном предложении министерства юстиции — от Гугла могут потребовать продать браузер Хром, ограничить дистрибуцию поиска или вообще продать Android, а также (!) сделать поисковый индекс доступным для конкурентов.

Рэнд Фишкин попытался посчитать долю ChatGPT в поиске, используя панельные данные Similarweb и Datos.
Со следующими оговорками:
- каждый запрос к LLM приравнивается к поиску
- трафик десктопных и мобильных устройств без учета приложений.
Получилось 4% (судя по всему, исследование ограничено США).

Теперь так.

Первые случаи ручных санкций (manual actions) в рамках обновленной политики Site reputation abuse начались, отмечает Гленн Гейб.
Они приводят к удалению страниц из индекса.
На скриншоте пример неназванного сайта, а из известных под эти признаки подходят CNN Underscored и WSJ Buyside.

Необычная вакансия.
Яндекс ищет SEO-менеджера с опытом не менее 3 лет, который:
— даст магазинам, продающим товары разных категорий, понятные и, главное, эффективные гайды, после изучения которых предприниматели смогут получать больше лидов из поиска.
— чтобы такой масштабный гайд появился и регулярно дополнялся, нужно научиться получать больше поискового трафика: выбирать партнёров из разных областей е-кома и, по сути, становиться их временным SEO-специалистом.

Олег спамит ключевиками, не будь как Олег, ведь ребята из CPA Compass простым языком объясняют digital-маркетинг от А до Я. Канал ведут три мастера своего дела — SEO-шник, ASO-шник и PPC-гуру — и все, чтобы прокачать твои навыки.

Что мы обсуждаем?

⏺Ключевые слова: как не переспамить и чем это грозит?
⏺Война за конверсии: как быстро раскрутить сайт с нуля?
⏺Новости из мира SEO/ASO/PPC: узнавайте о важном первым

🧭 Парни готовят еще больше контента, который точно прокачает ваши навыки. Подписывайтесь!

#нативнаяинтеграция

Forbes Advisor немного восстановился в ходе ноябрьского core апдейта 😃 но еще не вечер, конечно.

Пример рекламы в AI Overviews в мобильной выдаче в США.

Новая вкладка "Notifications" в мобильном приложении Гугла содержит архив отправленных на устройство пуш-уведомлений.
Интересная особенность в том, что также как подобные пуши, клик по элементам из списка отправляет пользователя не сразу на сайт, а на результаты поиска c блоком "From your notification", что еще немного увеличит псевдо-органические клики - в Google Search Console они засчитываются за органику. В системах веб-аналитики (GA и Яндекс Метрике) тоже.

SEO ➡️ GEO
Microsoft выпустила руководство по оптимизации для поисковых систем на базе ИИ.
— вводится термин GEO - Generative Engine Optimization, оптимизация контента для генеративных ИИ-систем
— результаты поиска становятся гиперперсонализированными
— контент должен быть ориентирован на намерения пользователя, а не только на ключевые слова
— обработка естественного языка (NLP) имеет решающее значение для ранжирования в поисковых системах с искусственным интеллектом
— регулярные обновления контента (и использование IndexNow) необходимы для поддержания видимости в ИИ-результатах поиска

Джон Мюллер призвал не заморачиваться слишком много с урлами, т.к. если контекст страниц неясен, то никакая структура урлов не поможет. Важнее их постоянство.
Также следует думать о том, как отслеживать эффективность: структура урлов должна позволять легко их группировать в системах аналитики.

Как подготовиться к будущему SEO: 17 советов от Лили Рэй
Большой полезный пост в блоге Moz.
Сокращенная версия:

Первые шаги по восстановлению после падения трафика:
— определение шаблонов контента
— комплексный подход (улучшение качества контента, техническое SEO, архитектура сайта, удаление потенциального спама)
— не ждите и не полагайтесь на будущие апдейты, решайте несколько проблем одновременно, увеличивая устойчивость сайта к будущем обновлениям.

Контент, основанный на опыте, вероятно, станет более важным, чтобы выделиться из материалов, созданных с помощью ИИ. Используйте уникальные ресурсы компании: создавайте контент на основе оригинальных данных, идей и точек зрения.
Выделите людей, стоящих за вашим контентом — раскройте, кто они, и постройте их бренды.

К 2025 году SEO-специалисты должны перейти от количества к качеству. Вместо того чтобы производить тысячи страниц с низкой ценностью, сосредоточьтесь на 30 страницах, которые приносят доход.

Существует прочно установленная связь между силой бренда и устойчивостью к апдейтам, включая HCU.

Проблема c HCU в том, что это обновление было выпущено между двумя другими: core update в сентябре и октябре 2023 года. Поэтому многие сайты, затронутые этими основными обновлениями, могут подумать, что на них повлияло HCU, хотя на самом деле это было одно из сопутствующих core обновлений. Если бы HCU коснулось вашего сайта, вы бы, вероятно, уже знали об этом, поскольку оно вызвало явное снижение ранжирования и трафика в период с 15 по 20 сентября 2023 года.

Примерно с 2019 по середину 2023 года наблюдалась «золотая лихорадка SEO», во время которой издатели — как мелкие, так и крупные — использовали генеративный ИИ для быстрого масштабирования контента и получения существенного дохода. Хотя этот подход хорошо работал в начале 2023 года, многие сайты столкнулись с падением видимости после апдейтов Гугла.

Чтобы избежать штрафов, SEO-специалисты и издатели должны избегать партнерств, которые «сдают в аренду» их авторитет (речь про Site reputation abuse).

Попытка конкурировать напрямую с Reddit может оказаться неэффективной.

Двигаясь вперед, ожидайте, что пользователи будут взаимодействовать как с Google, так и с большими языковыми моделями.

Позиция 1 раньше получала около 50% кликов; теперь она приближается к 28-30%.

Ключевым моментом является диверсификация, которая стала основным направлением в SEO.
Бренды с сильным присутствием на TikTok или YouTube оставались устойчивыми после обновления алгоритма. В 2025 году задача заключается в привлечении трафика через другие каналы. Используйте повторно контент на разных платформах — например, твиты в LinkedIn, записи в блогах и видео в TikTok и YouTube.

Advanced GSC Visualizer
Крутое расширение для Хрома от Amin Foroutan (X), которое меняет визуализацию графиков в Google Search Console по клику на кнопку. Появляется возможность группировки данных по месяцам и неделям и выбирать тип графика, добавлять линию тренда.

upd - точно работает с англоязычным интерфейсом (&hl=en), с другими могут быть проблемы.

В Европе планируют создать свой поисковик в 2025 г.: Ecosia и Qwant объединяют усилия
Цель — построить европейский цифровой суверенитет и использовать платформу в качестве основы для инфраструктуры искусственного интеллекта (ИИ).

«Если бы Соединенные Штаты решили изъять американские технологии из Европы... то нам пришлось бы вернуться к телефонным справочникам», — заявил генеральный директор Ecosia.

Ecosia базируется в Берлине, а Qwant — в Париже.

Вспоминается еще Seznam в Чехии.

Screaming Frog обновился до 21 версии:
— появилась прямая интеграция с API OpenAI, Gemini и Ollama
— аудит доступности Axe
— e-mail-уведомления о завершении сканирования
— массовая загрузка фильтров Custom search

❗️November 2024 core update стартовал
Интересно, что в этот раз анонс сделали только в твиттере, в Search Status Dashboard обещают добавить позже. Сервис сломался, похоже :)

upd: добавили и в дашборд. Раскатывание займет до 2 недель.

Наткнулся на пример сайта (региональное СМИ), который забанили в Google Discover в прошлом году во время HCU и core update'а.
Он вышел из бана, но до прошлых уровней очень далеко.

Признаки ИИ-текстов с точки зрения лингвиста
Интересное видео на канале Михаила Шакина с разбором примеров на английском:
— повторяемость не такая, как в человеческих текстах
— шаблонные синтаксические структуры, не свойственные человеку, но грамматически правильные
— стилистическая монотонность текста (неспособность переключать стиль/регистр)
— обезличенность, обобщенность и отсутствие личных примеров и личного опыта: тексты лишены личностных черт
— приведены примеры лингвистических ловушек в машинном переводе.

Исследование Sistrix про AI Overviews в UK Гугле
AI Overviews (AIO) на позиции №1 приводят к большему количеству кликов, чем featured snippets.
Это (внезапно) соответствует заявлениям поисковика.

На 2 скрине - наиболее цитируемые источники.
— обычно в AIO присутствует 5-6 различных источников
— AIO показывается по 3-5% запросов
— распространение Featured snippets падает при росте AIO

— в 37% случаев URL'ы в AIO такие же, как в топ-100 традиционной выдачи
— в 62% случаев домены в AIO те же, что в топ-100
— в 98% случаев по крайней мере 1 URL из AIO также появляется в топ-100 SERP

— в органических результатах поиска в Великобритании присутствует 18 404 705 различных доменов
— во featured snippets видно 491 606 различных доменов
— в AIO цитируются и присутствуют ссылки только на 274 455 доменов

Это не ново, но все же: иногда в GSC можно увидеть другой хост в поле Google-selected canonical (Каноническая страница, выбранная Google).

#вакансия
Movavi ищет SEO-специалиста! Мы — международная IT-компания с продуктами для фото- и видеомонтажа, охватываем рынки 200+ стран. Нужен опытный специалист, который хорошо понимает, как работать с сайтами, где много однотипных страниц, и имеет успешный опыт уникализации и доработки контента, оптимизации индексации и работы с линкбилдингом для крупных сайтов.

Чем предстоит заниматься:
- Поиск точек роста трафика, управление ТЗ и реализация гипотез для увеличения SEO-метрик.
- Актуализация семантики, работа над стратегией линкбилдинга совместно с нашей внутренней командой, техническая оптимизация.
- Внедрение новых инструментов, создание аналитики и анализ конкурентов.
- Управление внешними подрядчиками и участие в разработке стратегии.

В Movavi — международный опыт, гибкий график, удаленная работа и возможности для роста. Присоединяйтесь к команде!

Для отклика: @evedayy

Олафф Копп собрал 80 EEAT-сигналов, которые (возможно) оценивает Гугл в поиске, на основе патентов.

В Google Search Console в отчетах группы Performance теперь линия графика за даты, по которым есть только неполные данные (partial data), отображается пунктиром.
via Seroundtable

— Реклама, которая затрудняет UX (особенно в сочетании с низким уровнем поиска бренда), связана с понижением в Гугле— Реклама сама по себе не является проблемой, но плохой UX, который мешает восприятию контента, является проблемой
— Вы увидите, как крупным брендам это сходит с рук — в этом и суть. Гугл прощает крупные бренды, к лучшему или (в основном) к худшему. Но объедините навязчивую рекламу с другими сигналами полезного контента, такими как бизнес-модель и низкий уровень поиска бренда, и вы получите рецепт неприятностей.

via Сайрус Шепард @ X

Гугл добавил в документацию про краулинговый бюджет напоминание о важности наличия одинакового набора ссылок в мобильной и десктопной версиях, если у вас используется разная верстка.

Еще один вариант визуализации инфраструктуры Гугл поиска от RESONEO.
В их блоге опубликован разбор утекших в мае документов Гугла в 6 частях:
про Twiddler'ы, DeepRank, RankBrain, NavBoost, обучение систем ранжирования.
Полезно в качестве систематизации знаний.

#пятничный_мем

Главное:
— ChatGPT теперь обеспечивает веб-поиск в режиме реального времени со ссылками на источники и указанием авторства
— Он предоставляет данные в режиме реального времени, такие как новости, результаты спортивных матчей и погоду
— Сначала функция будет доступна пользователям Plus/Team, а более широкий доступ появится через несколько месяцев
via Search Engine Journal

Ну что, встречаем еще одну поисковую систему:
https://openai.com/index/introducing-chatgpt-search/

Судя по репортажу про Google Web Creator Conversation Event, Гугл провел скучное бесполезное мероприятие с издателями.
Не тратьте клик: скоро будет апдейт и пострадавшим от HCU сайтам не стоит ожидать восстановления.

Кэш-машина Гугла по-прежнему работает исправно, судя по результатам за 3 квартал.
via App Economy Insights @ X

Сундар Пичаи сообщает, что стоимость генерации AI Overviews удалось снизить на 90% за последние 18 месяцев, при этом размер индивидуальной модели Gemini удвоился.

Bing рекомендует передавать урлы в IndexNow потоково — по отдельности или небольшими группами по мере возникновения изменений, а не пакетно большими группами урлов. Это позволяет более оперативно их обрабатывать.

Да, есть такое.

Еще один пример растущего форума в Гугле с дизайном из 90-х 🙃

via Гаган Готра @ X

2 изменения в документации Гугла:
1) Обновлены лучшие практики формирования URL'ов - лучше не использовать в параметрах двоеточия, квадратные скобки, запятые, символы подчеркивания (перенесли из поста про фасетную навигацию).
2) Рекомендации по фавиконкам - они должны иметь соотношение сторон 1:1 и размер не менее 8x8 пикселей, настоятельно рекомендуется использовать фавиконки с более высоким разрешением — не менее 48x48 пикселей.
Пост по теме.

Дзен (ВК) в рекламе над выдачей 2 раза, 1 в органике, и 5 (!) раз в рекламе внизу выдачи 🫠

#пятничный_мем

Видеозаписи выступлений с конференции Tech SEO Connect, прошедшей 17-18 октября в США. Темы выглядят интересными.

Оптимизация под Google Discover: запись и тезисы вебинара Джона Шехата (основатель и CEO NewzDash)

— Google Discover имеет 2 млрд активных пользователей, а способность генерировать повторный трафик делает его еще более захватывающим
— когда пользователи взаимодействуют с вашим контентом, Discover продвигает еще больше ваших историй в их ленты
— алгоритм Discover'а фокусируется на сочетании сущностей, тем и интересов пользователя, которые получены из взаимодействия пользователя с экосистемой Google, включая Chrome и YouTube
— Knowledge Graph и Topic Layer используются для понимания связей между сущностями и темами с течением времени, что позволяет предоставлять пользователям ленту, которая развивается вместе с их предпочтениями.

Основные критерии соответствия требованиям Discover:
— новизна контента и отсутствие дублирования
— соблюдение политик в отношении контента
— соответствие требованиям SafeSearch
— как минимум одно большое изображение шириной не менее 1200 пикселей (используйте большие, яркие изображения с соотношением 16:9; избегайте логотипов или стоковых изображений, которые могут снизить вовлеченность)
— удобство для мобильных устройств
— четкие сигналы EEAT: даты, имена авторов и информация о них
— актуальность: хотя в разделе Discover может появляться вечнозеленый контент, предпочтение обычно отдается актуальному и трендовому контенту.

Песочница
Если ваш контент соответствует критериям, он переходит в фазу «песочницы», где Google дополнительно оценивает его перед выпуском в Discover. Эта фаза включает два ключевых процесса:
1) классификация контента с помощью обработки естественного языка (NLP), чтобы определить сущности (людей, организации, места) и темы (категории), которые он охватывает. Это помогает понять контекст и релевантность вашего контента по отношению к интересам пользователя
2) сбор данных об аудитории: Google оценивает, есть ли у вашего контента достаточный интерес аудитории и общественный резонанс. Это делается путем анализа данных пользователей Chrome и активности в социальных сетях, связанных с вашим URL. Этот шаг помогает определить потенциальный охват и вовлеченность вашего контента.

Сопоставление интересов
Последний шаг — сопоставление интересов, когда Google связывает классификацию вашего контента (сущности и темы) с пользователями, которые проявили интерес к похожему контенту. Так происходит персонализация лент Discover. Ваш контент будет отображаться в лентах пользователей, чьи интересы совпадают с сущностями и темами, указанными в вашей статье.

— при анализе эффективности Discover сосредоточьтесь на показах, а не на кликах
— используйте «смежный с трендами» контент, чтобы быть на волне популярных тем
— заголовки, которые вызывают любопытство, не будучи кликбейтом, как правило, работают хорошо. Заголовки должны выполнять обещание и не вводить пользователей в заблуждение.

По версии Кевина Индига и Мари Хейнс, Гугл в середине октября (13 или 14) выкатил обновление алгоритма.
У множества сайтов изменилась видимость.

Совпадает с данными Serpmetrics про волатильность выдачи.

Яндекс Метрика 11 октября запустила поддержку Measurement Protocol — отправку данных о действиях пользователей, совершенных за пределами сайта.
Яков Осипенков выпустил мануал по использованию.

Гугл прекратит отображать строку поиска по сайту в выдаче
Изменение выкатят 21 ноября и оно затронет все языки и страны.
Эта функция поддерживалась через свойство SearchAction разметки WebSite структурированных данных.

По данным исследования, ответы Google AIO вводят в заблуждение или неточны по 43% поисковых запросов, связанных с финансами.
Выборка небольшая (100 запросов), но в посте приведены все примеры.
Вот вам и EEAT 🙃

Bing Webmaster Tools расширяет диапазон данных в отчете Performance с 6 до 16 месяцев (показы/клики/CTR в поиске).

В октябрьском анализе Reddit'а в Гугле от Sistrix интересной представляется подборка топ-100 сабреддитов по индексу поисковой видимости.

Внезапно Semrush покупает Search Engine Land.

Диаграмма возможных состояний страницы в Гугле от Адама Гента.

🚀 Разобраться в SEO не сложнее, чем сдать на права!

В CPA Compass SEO-шники, ASO-шники и PPC-гуру объединились, чтобы зажечь в тебе эксперта digital-маркетинга!

Что ты найдёшь у нас?

⏺Слив факторов ранжирования Google — откроем тайны алгоритмов!
⏺Почему спамить ключевиками — путь в никуда?
⏺Как Google ранжирует большие сайты?

☕️ И не забудь про наши еженедельные дайджесты с самыми горячими новостями!

🧭Подписывайся на CPA Compass

#нативнаяинтеграция

По некоторым запросам вижу фактически 2 блока Нейро, слева и справа. При этом ответы немного отличаются.

Advanced Web Ranking добавили в свой сервис отдельную статистику по появлению блока AIO для залогиненных и незалогиненных в Гугле юзеров.

Google AIO не ссылается на сайты, затронутые Helpful content апдейтом и, вероятно, core апдейтами, даже если запрос связан с ними напрямую, выяснила Лили Рэй.

Как выглядит AI Organized search results в тематике ресторанов/баров. Серп состоит из множества каруселей:
https://www.nearmedia.co/content/images/2024/10/best-cocktail-bars-New-York-City---Google-Search.jpg
(скриншот длинный, поэтому ссылкой).

Гугл провел брифинг для прессы и согласно их данным, AIO увеличивает трафик на сайты издателей благодаря ссылкам непосредственно в тексте сгенерированного ответа. Правда, никаких цифр они не привели 🙃
via Adweek

При этом Гугл не планирует предоставлять отдельную статистику по AIO в консоли. Скорее всего дело в том, что ИИ-функций в выдаче со временем будет еще больше и AI Organized SERP тому наглядный пример. В Яндексе с Нейро вероятно будет похожая ситуация.

Подборка постов про Google Discover в этом канале
В личке спросили про то, что делать с Дискавером, возможно, пригодится подборка постов, выходивших на этом канале:

https://t.me/notjohnmu/672 - Как увеличить трафик из Google Discover от Лили Рэй
https://t.me/notjohnmu/941 - Про Google Discover в блоге Moz
https://t.me/notjohnmu/1027 - Причины полной потери трафика из Google Discover и возможные пути решения
https://t.me/notjohnmu/1111 - Наблюдения Джона Шехата
https://t.me/notjohnmu/1279 - Тезисы из доклада Артема Паклонского