Lumaktaw sa nilalaman
Get Ranked On TopHalimbawang case studySignal plan

Isang kathang-isip na negosyo. Ang mga numero ay modeladong senaryo, hindi resulta ng kliyente.

Granitefold Insurance · Home at auto insurance brokerage na may 35 agent · Burlington

Paano pinigilan ng isang insurance brokerage sa Vermont ang quote tool nito na lamunin ang crawl ng Google

Na-index ang bagong page sa loob ng 4 na araw imbes na 74, at +62% na organic quote request

11 buwan · Hilagang Amerika · Signal plan · Crawl budget · Pag-handle ng URL parameter · Log-file analysis · XML sitemap

Buwan 1
12%Bagyo
Buwan 11
90%Maaliwalas

ng mga request ng Googlebot ang umaabot sa totoong page

Crawl barometer · Burlington

01Ang hamon

Isang quote tool na gumagawa ng sarili nitong panahon.

Walang katapusang parameter URL ang nililikha ng quote tool nila, kaya naubos ang crawl budget at inabot ng ilang buwan bago ma-index ang mga bagong coverage page.

Para sa mga customer, ang quote tool ng Granitefold ang pinakamagandang bahagi ng site; para sa Googlebot, ito ang pinakamalala. Bawat ZIP code, sasakyan, antas ng coverage at deductible ay naging link na puwedeng i-crawl, at bawat bisita ay nagdadagdag pa ng session ID. Paulit-ulit na sinusundan ng Googlebot ang mga kombinasyon at bihira nitong maabot ang mga page na mahalaga: ang mga bagong gabay tungkol sa claim sa ice dam sa bubong, sa mga teen driver at sa mga cottage sa tabi ng lawa ay ilang linggong hindi natuklasan, tapos ilang linggo pang naghintay bago ma-index.

Isang quote form, pinarami

  1. 1,180ZIP code
  2. 30model year
  3. 46brand ng sasakyan
  4. 5antas ng coverage
  5. 4deductible

= 32,568,000

posibleng quote URL

Dagdagan pa ng bagong session ID sa bawat bisita, at wala na itong hangganan.

Ang kayang makita ng Googlebot · log scale

02Diyagnosis

Basahin muna ang presyon bago galawin ang salamin.

Log file

81%

ng mga request ng Googlebot ay napunta sa parameter URL

Labindalawang linggo ng server log, 538,000 hit ng Googlebot. Ang mga session ID pa lang ay kumain na ng halos isang-kapat ng crawl; ang 148 page na talagang gustong i-rank ng Granitefold ay naghati-hati sa 12%.

Natuklasan 1 sa 4

Discovery

412,000

parameter URL na alam ng Google

Sa crawl stats at page indexing report ng Search Console, daan-daang libong quote at calendar URL ang nakalistang na-crawl o natuklasan, kumpara sa 148 totoong page.

Natuklasan 2 sa 4

Indexing

74

median na araw bago ma-index ang bagong page

63 lang sa 148 na coverage at local page ang naka-index. Ang gabay sa ice-dam claim na na-publish noong Disyembre ay unang na-crawl noong huling bahagi ng Pebrero.

Natuklasan 3 sa 4

Internal link

2,340

link papunta sa quote tool na puwedeng i-crawl

Ang “Quote sa ZIP mo” na widget sa footer, mga shortcut ayon sa sasakyan at isang booking calendar na may walang katapusang “susunod na buwan” na link ang naglagay ng GET link sa bawat template.

Natuklasan 4 sa 4

Saan napunta ang mga request ng Googlebot

Buwan 1
  • Totoong page 12%
  • Parameter URL 81%
  • Redirect at error 7%
Buwan 11
  • Totoong page 90%
  • Parameter URL 6%
  • Redirect at error 4%

03Ang estratehiya

Takpan ang mga tagas, saka hayaang tumaas ang presyon.

Nakabatay sa aming Signal plan: ang technical na serbisyo para sa mga site kung saan ang crawl, rendering at architecture ang nagpapasya ng resulta.

Inalis na noong 2022 ang URL Parameters tool ng Search Console, kaya lahat ng kontrol ay kailangang nasa mismong site: robots.txt, form, link, canonical at sitemap.

  1. I

    Crawl budget

    Mga robots.txt rule para sa quote tool at sa calendar, isinulat lang matapos ipakita ng log kung aling mga pamilya ang nag-aaksaya ng crawl. Pinipigilan ng disallow ang fetch; hindi ito magagawa ng noindex, dahil kailangang i-crawl muna ng Googlebot ang page para mabasa ito.

    User-agent: *
    Disallow: /quote?
    Disallow: /*?*date=
  2. II

    Pag-handle ng URL parameter

    Naka-POST na ang pag-submit ng quote form, nasa loob na ng form ang pagpili ng ZIP at sasakyan, naging button ang mga sort link at tinanggal ang mga internal tracking tag. Nasa cookie na ang session, at ang mga lumang session URL ay nagre-redirect gamit ang 301 sa malinis nilang kakambal.

    <form method="post" action="/quote">
    <link rel="canonical" href="/coverage/home/">
  3. III

    Log-file analysis

    Araw-araw na pagpasok ng log sa buong engagement. Bawat natakpang trap ay sinuri sa loob ng isang linggo: bumababa ang request sa pamilyang iyon, tumataas ang request sa mga coverage page. Ang reading na iyon ang nagpapagalaw sa karayom ng barometer sa ibaba.

    66.249.66.1 "GET /quote?zip=05401&sessionid=8f3a2c91"
      200 "Googlebot/2.1"
  4. IV

    XML sitemap

    Isang sitemap bawat seksyon (coverage, local office, gabay) na canonical at 200 URL lang ang laman, may tapat na lastmod date, dagdag ang mga link mula sa isang coverage hub, kaya natutuklasan ang bagong page sa loob ng isang araw matapos itong ilabas.

    <loc>https://granitefold.example/coverage/auto/teen-drivers/</loc>
    <lastmod>2026-04-14</lastmod>

04Ang barometer

Isara isa-isa ang mga trap at panoorin ang karayom na lumipat mula Bagyo papuntang Maaliwalas.

Bawat switch ay nagtatakip ng isang pamilya ng parameter URL, ayon sa pagkakasunod ng aktuwal na trabaho. Ang asul na bakal na karayom ang nagpapakita kung ilang bahagi ng request ng Googlebot ang umaabot sa totoong page; ang tansong karayom ay nananatili kung saan ito nakatayo noong buwan 1.

Reading

Bagyo

Tansong karayom · buwan 1 · 12%

Crawl sa totoong page
12%
← 12%
Crawl sa parameter URL
81%
← 81%
Request kada araw sa totoong page
770
← 768
Araw bago ma-index ang bagong page
74
← 74
Hati ng crawl
  • Totoong page
  • Parameter URL
  • Redirect at error

Bagyo: 12% ng crawl ang umaabot sa totoong page, at na-iindex ang bagong page sa loob ng mga 74 araw.

  • Session ID sa mga link24% ng crawl

    /quote?zip=05401&sessionid=8f3a2c91

    AyosNasa cookie na ang session; bawat lumang sessionid URL ay nagre-redirect gamit ang 301 sa malinis nitong kakambal, kaya natututo ang Googlebot na iwan ang mga ito.

  • Quote link na may nakalagay nang ZIP19% ng crawl

    /quote?zip=05452

    AyosAng “Quote sa ZIP mo” na widget ay naging form na nagpo-POST, at naka-disallow ang /quote? sa robots.txt.

  • Mga kombinasyon ng sasakyan14% ng crawl

    /quote/auto?year=2019&make=subaru&model=outback

    AyosSa loob ng form pinipili ang taon, brand at model, at hindi na inaalok bilang link na puwedeng i-crawl.

  • Booking calendar na walang katapusan9% ng crawl

    /agents/book?date=2031-02-01

    AyosHanggang 60 araw na lang ang calendar, naging button ang “susunod na buwan” at naka-disallow ang mga date= URL.

  • Mga review na naka-sort at naka-page8% ng crawl

    /reviews?sort=oldest&page=212

    AyosNaging button ang mga sort option; simpleng ?page= URL na may self-referencing canonical ang mga review page.

  • Tracking tag sa mga internal link7% ng crawl

    /coverage/home/?utm_source=newsletter&ref=footer

    AyosTinanggal ang UTM at ref tag sa mga internal link; sa malinis na URL nakaturo ang canonical.

05Buwan-buwan

11 buwan mula bagyo hanggang aliwalas.

Reading ng barometer kada buwan
BagyoUlanPabago-bagoMaaliwalasB1B2B3B4B5B6B7B8B9B10B1112%90%
Median na araw bago ma-index ang mga page na na-publish sa buwang iyon
74B171B258B339B424B515B610B77B85B94B104B11
  1. Buwan 1–2

    Basahin

    Labindalawang linggo ng log, crawl stats ng Search Console, buong crawl ng site at listahan ng parameter: 41 pangalan ng parameter sa anim na pamilya.

  2. Buwan 3–4

    Takpan

    Naging form ang mga quote at vehicle link, naging cookie ang mga session ID, at nagkaroon ng robots.txt rule ang quote tool at ang calendar.

  3. Buwan 5–6

    Linisin

    Tinanggal ang tracking tag sa mga internal link, naging button ang mga sort link, sinuri ang canonical sa bawat template at pinaikli sa isang hop ang 1,960 redirect chain.

  4. Buwan 7–8

    Ituro

    Mga XML sitemap ayon sa seksyon na may tapat na lastmod date, isang coverage hub na naka-link sa bawat gabay, at mga bagong gabay na inilabas habang kalmado na ang crawl.

  5. Buwan 9–11

    Panatilihin

    Lingguhang pagsuri sa log para walang bagong parameter na magbukas ng panibagong tagas; nanatili ang karayom sa Maaliwalas sa buong winter quote season.

06Resulta

Gumanda ang panahon, at sumunod ang mga quote request.

Organic quote request

+62%

410 → 664 organic quote request kada buwan

Crawl na napunta sa parameter URL

81% → 6%

Bahagi ng request ng Googlebot, buwan 1 → buwan 11

Median na araw bago ma-index ang bagong page

74 → 4

Median para sa mga page na na-publish sa buwang iyon

Na-index na coverage page (sa 148)

63 → 146

2 pa ang naghihintay ma-index

Modelong senaryo para sa isang kathang-isip na negosyo — hindi resulta ng totoong kliyente. Hindi kailanman garantisado ang ranking at traffic; tingnan ang aming Mga Tuntunin.

Organic quote request kada buwan
Natakpan ang mga trap400500600700B1B2B3B4B5B6B7B8B9B10B11664410
148 page, isang kahon bawat isa
  • Naka-index na sa simula 63
  • Na-index habang ginagawa 83
  • Hindi pa naka-index 2

Kumuha ng ganitong forecast

May filter, calendar o quote tool bang kumakain ng crawl ninyo? Magsimula sa Signal plan, o sabihin sa amin kung ano ang ipinapakita ng inyong log.

← Lahat ng case study