FARWANDER TRAVEL — Онлайн-турагентство, 2 млн+ страниц · Сиэтл
Как туристический маркетплейс на 2 миллиона страниц заставил Google обходить страницы, которые приносят деньги
ДОЛЯ КРАУЛИНГА НА ДОХОДНЫХ СТРАНИЦАХ
30% → 78%
16 месяцев на тарифе Signal: Googlebot перенаправлен из мусорного воздушного пространства к страницам, которые приносят бронирования.
ПУЛЬТ ДИСПЕТЧЕРА · ВЫБЕРИТЕ ФАЗУ
МЕСЯЦ 1 · ДИСПЕТЧЕР → GOOGLEBOT
GOOGLEBOT, РАДАРНЫЙ КОНТАКТ. ВЫ В ЗОНЕ ОЖИДАНИЯ НАД ПРОСТРАНСТВОМ ФИЛЬТРОВАННОГО ПОИСКА. СЕМЬ ИЗ ДЕСЯТИ ЗАПРОСОВ САДЯТСЯ НА МУСОР.
Подтверждение: В зоне ожидания. Страницы направлений посещались последний раз 19 дней назад.
- ДОЛЯ НА ДОХОДНЫХ
- 30 %
- ПЕРЕОБХОД КЛЮЧЕВЫХ
- 19дней
ДОХОДНЫЕ СТРАНИЦЫМУСОР · 70 %
01Задача
Два миллиона страниц, а краулер всё кружил над ненужными.
Googlebot тратил 70% краулинга на истёкшие акции и страницы фильтрованного поиска. Высокомаржинальные страницы направлений неделями ждали переобхода после изменения цен.
Для туристического маркетплейса свежесть данных — это выручка. Когда тур в Лиссабон дешевеет на 120 долларов, а Google продолжает показывать прошломесячную цену, клик уходит к конкуренту. Фильтры поиска, сортировки и завершённые акции Farwander превратили сайт в перегруженное воздушное пространство: Googlebot был занят, но никогда — над страницами, которые приносят бронирования.
ВИЗИТЫ GOOGLEBOT ПО КЛАССАМ URL · ВЫБОРКА ЛОГОВ ЗА 30 ДНЕЙ, МЕСЯЦ 0
- Поиск с фильтрами и сортировкой41 %
- Истёкшие акции (200 OK)22 %
- Параметры сессии и печати7 %
- Доходные страницы30 %
02Диагноз · извещения для пилотов
Шесть опасностей на карте — и все найдены в логах ещё до того, как тронули хоть один шаблон.
NOTAM 01ЛОГИ
11,8 млн запросов Googlebot за 30 дней выборки; 8,3 млн из них пришлись на фасетный поиск, истёкшие акции и дубли с параметрами.
NOTAM 02ФАСЕТЫ
1,4 млн доступных для обхода комбинаций фильтров (цена × звёзды × питание × дата), каждая с canonical на себя и со ссылкой с каждой страницы выдачи.
NOTAM 03ИСТЁКШИЕ АКЦИИ
212 000 завершённых предложений по-прежнему отвечали 200 OK с баннером «акция завершена» — soft 404, к которым Google возвращался снова и снова.
NOTAM 04SITEMAP
380 000 URL в sitemap были неканоническими или с редиректом; lastmod проставлялся при каждой сборке и потому ничего не сообщал.
NOTAM 05АРХИТЕКТУРА
9% страниц направлений были сиротами, а медианная доходная страница находилась в 7 кликах от главной.
NOTAM 06ШАБЛОНЫ
428 000 программных страниц «отели рядом с X» содержали меньше 80 уникальных слов и ни одного предложения — тонкий контент по любым меркам.
03Стратегия · поданный план полёта
Сначала закрыть мусорное пространство, потом проложить коридоры.
Четыре вектора, пройденные по порядку, на нашем тарифе Signal. Сначала измерить, потом убрать лишнее, а затем дать краулеру более короткий и лучше размеченный маршрут к каждой странице, где можно забронировать.
- VEC-1КУРС 030
Анализ лог-файлов
Серверные логи каждый день попадают в отчёт по Googlebot с проверкой через обратный DNS. У каждого класса URL есть своя доля краулинга, распределение кодов ответа и дата последнего визита, так что каждое следующее изменение измеряется визитами, а не догадками.
- VEC-2КУРС 060
Краулинговый бюджет
Параметры сортировки, сессии и печати закрыты в robots.txt; на фасеты глубже двух фильтров больше не ведут ссылки; истёкшие акции отдают 410 со ссылкой на актуальное направление; sitemap разделены по шаблонам, а lastmod меняется только при реальном изменении цены.
- VEC-3КУРС 090
Программное SEO
Шаблоны перестроены вокруг живого наличия: страница создаётся, только если на ней не меньше 12 вариантов для бронирования и собственные данные о ценах. 640 000 тонких страниц объединены или удалены; оставшиеся получили таблицы тарифов и сезонные гиды.
- VEC-4КУРС 120
Внутренняя перелинковка
Хабы регион → страна → город и модули изменения цен, которые ставят ссылки на только что обновлённые предложения с главной и хабов. Медианная глубина клика до доходных страниц сократилась с 7 до 3.
04Хронология · полётные ленты
16 месяцев, по одной ленте на месяц.
- 01LOGКРАУЛИНГ 30 %Запущен конвейер логов; снят 30-дневный базовый уровень Googlebot
- 02AUDКРАУЛИНГ 31 %Аудит классов URL: 1,4 млн фасетных комбинаций, 212 тыс. истёкших акций
- 03ROBКРАУЛИНГ 33 %Параметры сортировки, сессии и печати закрыты
- 04410КРАУЛИНГ 36 %Истёкшие акции переведены с 200 OK на 410 Gone
- 05FACКРАУЛИНГ 41 %На фасеты глубже двух фильтров больше не ведут ссылки
- 06MAPКРАУЛИНГ 47 %Sitemap разделены по шаблонам; lastmod привязан к изменениям цен
- 07PRGКРАУЛИНГ 53 %В программные шаблоны добавлен порог наличия
- 08PRNКРАУЛИНГ 58 %Первые 450 тыс. тонких страниц объединены или удалены
- 09HUBКРАУЛИНГ 62 %Запущены хабы регион → страна → город
- 10LNKКРАУЛИНГ 66 %Модули изменения цен на главной и в хабах
- 11TPLКРАУЛИНГ 69 %Таблицы тарифов и сезонные гиды на оставшихся страницах
- 12PRNКРАУЛИНГ 72 %Чистка завершена на 620 тыс.; редиректы сведены в карту
- 13QAКРАУЛИНГ 74 %Зачистка soft 404; доля страниц-сирот ниже 1%
- 14MONКРАУЛИНГ 76 %Алерты по задержке переобхода для топ-5 000 страниц
- 15TUNКРАУЛИНГ 77 %Выведены последние 20 тыс. тонких страниц; всего 640 тыс.
- 16HLDКРАУЛИНГ 78 %Стабильный режим: доля краулинга 78%, переобход за 2 дня
05Результаты · отчёт о посадке
Теперь краулер тратит топливо там, где бронируют.
Смоделированный сценарий для вымышленного бизнеса — не результат клиента. Позиции и трафик никогда не гарантируются; см. наши Условия.
ДОЛЯ КРАУЛИНГА НА ДОХОДНЫХ СТРАНИЦАХ
30% → 78%
СР. ВРЕМЯ ПЕРЕОБХОДА (КЛЮЧЕВЫЕ СТРАНИЦЫ)
19 дней → 2 дня
ОРГАНИЧЕСКИЕ БРОНИРОВАНИЯ
+41%
УДАЛЕНО ТОНКИХ СТРАНИЦ
640 000
| ЗАПРОС | ПОСАДОЧНАЯ СТРАНИЦА | ДО | ПОСЛЕ | Δ |
|---|---|---|---|---|
| lisbon city break deals | /destinations/lisbon | #14 | #3 | ▲11 |
| kyoto ryokan packages | /hotels/kyoto | #22 | #5 | ▲17 |
| last minute greece holidays | /deals/greece-live | #18 | #4 | ▲14 |
| iceland northern lights tours | /destinations/iceland | #11 | #2 | ▲9 |
| all inclusive cancun from seattle | /packages/cancun | #27 | #6 | ▲21 |
| patagonia trekking tour | /tours/patagonia | #24 | #4 | ▲20 |
| amalfi coast hotels with pool | /hotels/amalfi | #19 | #7 | ▲12 |
| costa rica family vacation package | /packages/costa-rica | #31 | #8 | ▲23 |
06Ваше разрешение на вылет
Получите такой же план
Большой каталог, медленный переобход, краулер застрял в фильтрах? Начнём с того же, с чего начали с Farwander: с логов.