🔥 แค่ 5 นาที เปลี่ยนมุมมองได้เลย

Crawl Budget Optimization: ทำให้ Googlebot เข้าเว็บเราบ่อยขึ้น

July 1, 2025

ยาวไป อยากเลือกอ่าน?

การเพิ่มประสิทธิภาพ Crawl Budget คือการทำให้ Googlebot ใช้ทรัพยากรกับหน้าที่มีมูลค่าอย่างมีประสิทธิภาพ โดยทำให้โครง URL สะอาด, ตั้งค่า sitemap/robots.txt ให้ถูกต้อง, ลดจำนวน 404 และรีไดเรกต์, จัดการพารามิเตอร์ซ้ำซ้อน, เร่งความเร็วเซิร์ฟเวอร์ และเชื่อม Internal Links อย่างมีบริบท

คู่มือ Crawl Budget Optimization: ทำให้บอทคลานครอบคลุม “หน้าเงิน” ก่อน

สำหรับเว็บไซต์ธุรกิจ/อีคอมเมิร์ซ/คอนเทนต์ขนาดกลาง–ใหญ่ เป้าหมายคือการให้เพจสำคัญถูกคลานและอัปเดตบ่อยขึ้น ลดการสิ้นเปลืองกับเพจซ้ำ/ช้า/ผิดพลาด และทำให้สัญญาณคุณภาพดีพอที่จะเพิ่มอัตราคลาน (crawl rate) ตามความสามารถของเซิร์ฟเวอร์

อาการ “สิ้นเปลือง Crawl” และวิธีแก้ที่ทำได้ทันที

อาการ	สัญญาณ	สาเหตุหลัก	วิธีแก้
บอทคลานหน้าที่ไม่ต้องการ	Log มี URL พารามิเตอร์/ฟิลเตอร์จำนวนมาก	Faceted/URL Parameters สร้างตัวแปรซ้ำ	Canonical สู่รุ่น canonical, `noindex` หน้าบางประเภท, บล็อกด้วย `robots.txt` เมื่อเหมาะสม, รวมฟิลเตอร์เป็นรูปแบบเดียว
งบคลานหมดกับ 404/รีไดเรกต์	สัดส่วน 404/3xx สูงในแล็อก	ลิงก์เก่า/โครง URL เปลี่ยนบ่อย	จัด 301 mapping, กำจัด redirect chain/hops, อัปเดต internal links ให้เป็นปลายทางสุดท้าย
เพจสำคัญคลานช้า	Last crawl เว้นนาน, Coverage ช้า	Internal Links ไปหน้าสำคัญน้อย/ลึก	เพิ่มลิงก์บริบทจากบทความ/หมวดไปหน้าเงิน, ใส่ในเมนู/ฟุตเตอร์อย่างพอดี
บอทชะลอคลาน	Average Response Time สูงใน Log	เซิร์ฟเวอร์ตอบช้า/บีบอัดไม่ดี	ใช้ CDN, เปิด HTTP/2–3, เปิด gzip/br, จัดแคช/ETag, ลด TTFB
ดัชนีเพี้ยน/ซ้ำ	มีหลาย URL เนื้อหาเดียวกัน	ไม่มี canonical/ลิงก์ภายในสับสน	กำหนด canonical ชัด, รวมสัญญาณไป URL เดียว, ใช้ pagination ที่ถูกต้อง

HowTo: Optimize Crawl Budget ใน 7 ขั้น

ทำ URL Inventory: สกัด URL ทั้งหมดจาก sitemap.xml + log แล้วจัดหมวด “สำคัญ/รอง/ควรบล็อก”.
ลดความซ้ำของพารามิเตอร์: กำหนด canonical, ปิด index หน้าที่ไม่ใช่เวอร์ชันหลัก, บล็อกการคลานบางพารามิเตอร์ด้วย robots.txt เมื่อไม่ต้องคลาน.
แก้ 404/Redirect Chain: ทำ 301 mapping, อัปเดต internal links ให้ยิงตรงปลายทาง.
เร่งเซิร์ฟเวอร์: CDN, แคช/ETag, บีบอัด, ปรับ TTFB ให้ต่ำเพื่อให้บอทคลานต่อเนื่อง.
ย้ายงบคลานไปหน้าเงิน: เสริม internal links บริบทจากบทความ/หมวด ไปยังเพจบริการ/คอนเวอร์ชัน.
อัปเดต Sitemap: ให้ครบ, ไม่รวม URL บล็อก, ระบุ lastmod สมเหตุผล.
ติดตามผล: ดู Crawl stats ใน Search Console + เซิร์ฟเวอร์ log รายสัปดาห์ แล้วปรับซ้ำ.

ตัวอย่างโค้ด/การตั้งค่าที่ใช้บ่อย

robots.txt (ตัวอย่างสำหรับพารามิเตอร์ฟิลเตอร์/จัดเรียง)

User-agent: *
Disallow: /*?sort=
Disallow: /*?filter=
Disallow: /*?price_min=
Disallow: /*?page=*&view=all
# อย่าบล็อกหน้า canonical หลัก
Sitemap: https://www.example.com/sitemap.xml

สคีมา Canonical + noindex (สำหรับหน้าพารามิเตอร์)

<link rel="canonical" href="https://www.example.com/category/widget" />
<meta name="robots" content="noindex,follow" />

HTTP Caching (ตัวอย่างหัวข้อแนะนำ)

Cache-Control: public, max-age=3600
ETag: "abc123"

KPI & เครื่องมือที่ควรติดตาม

KPI	ที่มา	เป้าหมาย/สัญญาณดี	หมายเหตุ
Crawled pages ต่อวัน (สำคัญ)	Search Console > Crawl stats	สัดส่วนเพจสำคัญถูกคลานเพิ่มขึ้น	ดูร่วมกับ last crawl ของเพจสำคัญ
% 200 OK vs 4xx/5xx	Server access log	200 สูง, 4xx/5xx ต่ำลงต่อเนื่อง	ลด 404/รีไดเรกต์ฟุ่มเฟือย
Average Response Time	Server access log	ต่ำกว่า 200ms	ปรับการทำงานเซิร์ฟเวอร์ให้เร็วขึ้น