งบประมาณการรวบรวมข้อมูลของ Google: วิธีการทำงานและวิธีเพิ่มงบประมาณของคุณ

สำหรับทุกเว็บไซต์บนอินเทอร์เน็ต Google มีงบประมาณคงที่สำหรับจำนวนหน้าที่บอทสามารถและยินดีที่จะรวบรวมข้อมูล อินเทอร์เน็ตเป็นสถานที่ขนาดใหญ่ ดังนั้น Googlebot สามารถใช้เวลามากในการรวบรวมข้อมูลและจัดทำดัชนีเว็บไซต์ของเราเท่านั้น การเพิ่มประสิทธิภาพงบประมาณการรวบรวมข้อมูลเป็นกระบวนการที่ทำให้มั่นใจว่าหน้าที่ถูกต้องของเว็บไซต์ของเราจะอยู่ในดัชนีของ Google และจะแสดงต่อผู้ค้นหาในท้ายที่สุด

คำแนะนำของ Google สำหรับการเพิ่มประสิทธิภาพงบประมาณการรวบรวมข้อมูลนั้นค่อนข้างจำกัด เนื่องจาก Googlebot รวบรวมข้อมูลผ่านเว็บไซต์ส่วนใหญ่โดยไม่จำกัดจำนวน แต่ไซต์ระดับองค์กรและอีคอมเมิร์ซที่มีหน้า Landing Page นับพันหน้ามีความเสี่ยงที่งบประมาณจะสูงสุด จากการศึกษาในปี 2018 พบว่าโปรแกรมรวบรวมข้อมูลของ Google ไม่สามารถรวบรวมข้อมูลหน้าเว็บมากกว่าครึ่งของไซต์ขนาดใหญ่ในการทดสอบได้

การมีอิทธิพลต่อการใช้งบประมาณการรวบรวมข้อมูลอาจเป็นการเพิ่มประสิทธิภาพทางเทคนิคที่ยากขึ้นสำหรับนักยุทธศาสตร์ที่จะนำไปใช้ แต่สำหรับไซต์ระดับองค์กรและอีคอมเมิร์ซ คุณควรพยายามเพิ่มงบประมาณการรวบรวมข้อมูลให้มากที่สุดเท่าที่จะทำได้ เจ้าของเว็บไซต์และนักวางกลยุทธ์ SEO สามารถแนะนำ Googlebot ให้รวบรวมข้อมูลและจัดทำดัชนีหน้าเว็บที่ทำงานได้ดีที่สุดเป็นประจำด้วยการปรับแต่งเล็กน้อย

Google กำหนดงบประมาณการรวบรวมข้อมูลอย่างไร

งบประมาณการรวบรวมข้อมูลเป็นเวลาและทรัพยากรโดยพื้นฐานที่ Google ยินดีที่จะใช้ในการรวบรวมข้อมูลเว็บไซต์ของคุณ สมการจะเป็นดังนี้:

งบประมาณการรวบรวมข้อมูล = อัตราการรวบรวมข้อมูล + ความต้องการในการรวบรวมข้อมูล

หน่วยงานของโดเมน ลิงก์ย้อนกลับ ความเร็วของไซต์ ข้อผิดพลาดในการรวบรวมข้อมูล และจำนวนหน้า Landing Page ล้วนส่งผลต่ออัตราการรวบรวมข้อมูลของเว็บไซต์ ไซต์ขนาดใหญ่มักจะมีอัตราการรวบรวมข้อมูลสูงกว่า ในขณะที่ไซต์ขนาดเล็กกว่า ไซต์ที่ช้ากว่า หรือไซต์ที่มีการเปลี่ยนเส้นทางมากเกินไปและข้อผิดพลาดของเซิร์ฟเวอร์ มักจะได้รับการรวบรวมข้อมูลน้อยกว่า

Google ยังกำหนดงบประมาณการรวบรวมข้อมูลด้วย "ความต้องการรวบรวมข้อมูล" URL ยอดนิยมมีความต้องการในการรวบรวมข้อมูลสูงกว่า เนื่องจาก Google ต้องการให้เนื้อหาที่ใหม่ที่สุดแก่ผู้ใช้ Google ไม่ชอบเนื้อหาที่เก่าเกินไปในดัชนี ดังนั้นหน้าเว็บที่ไม่ได้รับการรวบรวมข้อมูลในบางครั้งจะมีความต้องการสูงขึ้นเช่นกัน หากเว็บไซต์ของคุณต้องผ่านการโยกย้ายเว็บไซต์ Google จะเพิ่มความต้องการรวบรวมข้อมูลเพื่ออัปเดตดัชนีด้วย URL ใหม่ของคุณเร็วขึ้น

งบประมาณการรวบรวมข้อมูลของเว็บไซต์ของคุณอาจผันผวนและไม่คงที่อย่างแน่นอน หากคุณปรับปรุงการโฮสต์เซิร์ฟเวอร์หรือความเร็วของไซต์ Googlebot อาจเริ่มรวบรวมข้อมูลไซต์ของคุณบ่อยขึ้นโดยที่รู้ว่าไม่ได้ทำให้ประสบการณ์การใช้เว็บของผู้ใช้ช้าลง เพื่อให้ได้แนวคิดที่ดีขึ้นเกี่ยวกับอัตราการรวบรวมข้อมูลเฉลี่ยในปัจจุบันของไซต์ของคุณ ให้ดูที่รายงานการรวบรวมข้อมูลของ Google Search Console

ทุกเว็บไซต์จำเป็นต้องกังวลเกี่ยวกับงบประมาณการรวบรวมข้อมูลหรือไม่?

เว็บไซต์ขนาดเล็กที่เน้นไปที่การจัดอันดับหน้า Landing Page ไม่กี่หน้าเท่านั้น ไม่จำเป็นต้องกังวลเกี่ยวกับงบประมาณในการรวบรวมข้อมูล แต่เว็บไซต์ขนาดใหญ่ โดยเฉพาะเว็บไซต์ที่ไม่แข็งแรงซึ่งมีหน้าเสียและเปลี่ยนเส้นทางมากเกินไป สามารถเข้าถึงขีดจำกัดการรวบรวมข้อมูลได้อย่างง่ายดาย

ประเภทของเว็บไซต์ขนาดใหญ่ที่เสี่ยงต่อการใช้งบประมาณการรวบรวมข้อมูลสูงสุดมักจะมีหน้า Landing Page หลายหมื่นหน้า โดยเฉพาะเว็บไซต์อีคอมเมิร์ซรายใหญ่มักได้รับผลกระทบทางลบจากงบประมาณการรวบรวมข้อมูล ฉันเจอเว็บไซต์ขององค์กรหลายแห่งที่มีหน้า Landing Page จำนวนมากที่ไม่ได้จัดทำดัชนี ซึ่งหมายความว่ามีโอกาสเป็นศูนย์ในการจัดอันดับใน Google

มีเหตุผลบางประการที่ไซต์อีคอมเมิร์ซจำเป็นต้องให้ความสนใจเป็นพิเศษกับงบประมาณในการรวบรวมข้อมูล

• เว็บไซต์อีคอมเมิร์ซหลายแห่งสร้างหน้า Landing Page หลายพันหน้าโดยทางโปรแกรมสำหรับ SKU ของตนหรือสำหรับทุกเมืองหรือรัฐที่ขายผลิตภัณฑ์ของตน
• ไซต์ประเภทนี้จะอัปเดตหน้า Landing Page เป็นประจำเมื่อสินค้าหมดสต็อก มีการเพิ่มผลิตภัณฑ์ใหม่ หรือมีการเปลี่ยนแปลงสินค้าคงคลังอื่นๆ
• ไซต์อีคอมเมิร์ซมักมีหน้าซ้ำกัน (เช่น หน้าผลิตภัณฑ์) และตัวระบุเซสชัน (เช่น คุกกี้) Googlebot มองว่าทั้งคู่เป็น URL "มูลค่าเพิ่มต่ำ" ซึ่งส่งผลเสียต่ออัตราการรวบรวมข้อมูล

ความท้าทายอีกประการหนึ่งในการมีอิทธิพลต่องบประมาณการรวบรวมข้อมูลก็คือ Google อาจเพิ่มหรือลดงบประมาณได้ทุกเมื่อ แม้ว่าแผนผังเว็บไซต์จะเป็นขั้นตอนสำคัญสำหรับเว็บไซต์ขนาดใหญ่ในการปรับปรุงการรวบรวมข้อมูลและจัดทำดัชนีของหน้าที่สำคัญที่สุด แต่ก็ไม่เพียงพอที่จะทำให้มั่นใจว่า Google จะไม่ใช้งบประมาณการรวบรวมข้อมูลสูงสุดบนหน้าที่มีมูลค่าต่ำกว่าหรือมีประสิทธิภาพต่ำ

ดังนั้นเว็บมาสเตอร์สามารถดำเนินการเพิ่มประสิทธิภาพงบประมาณการรวบรวมข้อมูลได้อย่างไร

แม้ว่าเจ้าของเว็บไซต์จะตั้งขีดจำกัดการรวบรวมข้อมูลให้สูงขึ้นในบัญชี Google Search Console ของตนได้ แต่การตั้งค่านี้ไม่ได้รับประกันคำขอรวบรวมข้อมูลที่เพิ่มขึ้นหรือมีอิทธิพลต่อหน้าเว็บที่ Google ลงเอยด้วยการรวบรวมข้อมูล อาจรู้สึกว่าวิธีแก้ปัญหาที่เป็นธรรมชาติที่สุดคือการทำให้ Google รวบรวมข้อมูลเว็บไซต์ของคุณบ่อยขึ้น แต่มีการเพิ่มประสิทธิภาพที่จำกัดมากซึ่งมีความสัมพันธ์โดยตรงกับอัตราการรวบรวมข้อมูลที่เพิ่มขึ้น

เราทุกคนทราบดีว่าการจัดทำงบประมาณที่ดีไม่ได้เกี่ยวกับการเพิ่มวงเงินใช้จ่ายของคุณ มันเกี่ยวกับการเลือกสรรสิ่งที่คุณใช้จ่ายเงินมากขึ้น เมื่อคุณใช้แนวคิดเดียวกันนี้ในการตระเวนงบประมาณ จะสามารถให้ผลลัพธ์มหาศาล ต่อไปนี้คือขั้นตอนเชิงกลยุทธ์บางส่วนในการช่วยให้ Google ใช้งบประมาณของคุณให้เกิดประโยชน์

ขั้นตอนที่ 1: ระบุว่าหน้าใดที่ Google กำลังรวบรวมข้อมูลบนเว็บไซต์ของคุณ

ก่อนหน้านี้ รายงานการรวบรวมข้อมูลของ Google Search Console บอกเพียงเจ้าของไซต์ว่าได้รับคำขอรวบรวมข้อมูลกี่ครั้งที่ไซต์ของตนได้รับในแต่ละวัน แม้ว่ารายงานสถิติการรวบรวมข้อมูลใหม่ของ Google จะให้ข้อมูลโดยละเอียดเกี่ยวกับการรวบรวมข้อมูล แต่ที่ที่ดีที่สุดที่จะทำความเข้าใจว่า Google รวบรวมข้อมูลไซต์ของคุณอย่างไรยังอยู่ในไฟล์บันทึกของเซิร์ฟเวอร์

เมื่อ Google เยี่ยมชมเว็บไซต์ของคุณ พวกเขาใช้ตัวแทนผู้ใช้เฉพาะ ซึ่งจะทำให้เซิร์ฟเวอร์ของคุณทราบว่าการรับส่งข้อมูลเป็น Googlebot จริงๆ ไม่ใช่บุคคลจริง

(คุณจะพบบอทของ Bingbot และ Ahrefs ที่นั่นด้วย)

ตัววิเคราะห์บันทึกการรวบรวมข้อมูล

การวิเคราะห์ไฟล์บันทึกสำหรับการตรวจสอบบอทและการปรับงบประมาณการตระเวนให้เหมาะสม ตรวจหาปัญหาความสมบูรณ์ของไซต์และปรับปรุงความถี่ในการรวบรวมข้อมูลของคุณ

เรียนรู้เพิ่มเติม

เจ้าของไซต์ที่วิเคราะห์เนื้อหาของไฟล์บันทึกนี้จะได้รับข้อมูลมากมายเกี่ยวกับงบประมาณการรวบรวมข้อมูลของ Google สำหรับไซต์ของตน ไฟล์จะเปิดเผยบางสิ่ง:

• หน้าใดที่ตัวแทนผู้ใช้เข้าชม
• จำนวนหน้าที่เจ้าหน้าที่รวบรวมข้อมูลต่อวัน
• หน้าที่รวบรวมข้อมูลใด ๆ นั้น 404ing หรือใช้งานไม่ได้หรือไม่

ตามหลักการแล้ว คุณต้องการให้ Google รวบรวมข้อมูลหน้า Landing Page บนเว็บไซต์ของคุณซึ่งได้รับการปรับให้เหมาะสมสำหรับคำหลักที่มีมูลค่าสูงสุด นอกจากนี้ เจ้าของไซต์ไม่ควรเปลืองงบประมาณในการรวบรวมข้อมูลเป็น 404s Google Search Console จะแสดงเฉพาะข้อผิดพลาด soft 404 บางส่วนเท่านั้น แต่คุณสามารถระบุข้อผิดพลาดทั้งหมดได้ในบันทึกเซิร์ฟเวอร์ของคุณ

เมื่อคุณมีข้อมูลโดยละเอียดมากขึ้นว่าหน้าใดในเว็บไซต์ของคุณกำลังถูกรวบรวมข้อมูล ให้ดำเนินการตามรายการการทำงานต่อไปนี้:

• เพิ่มแท็กโรบ็อต: หาก Googlebot กำลังรวบรวมข้อมูล 404 หรือหน้าที่เสียหาย ลำดับความสำคัญอันดับหนึ่งควรเพิ่มแท็กโรบ็อต [noindex, nofollow] เพื่อป้องกันไม่ให้ Googlebot รวบรวมข้อมูลและจัดทำดัชนีหน้าเหล่านั้น
• ปรับแผนผังไซต์ของคุณ: หากบันทึกเซิร์ฟเวอร์ของคุณเปิดเผยว่า Google ไม่ได้รวบรวมข้อมูลหน้าที่มีประสิทธิภาพสูงของคุณ ให้เพิ่มหน้าเหล่านี้ในแผนผังไซต์เพื่อให้แน่ใจว่ามีการรวบรวมข้อมูล

ขั้นตอนที่ 2: ยอมรับว่าหน้า Landing Page ของคุณบางหน้าไม่จำเป็นต้องมีอันดับใน Google

สาเหตุหลักที่เว็บไซต์ระดับองค์กรจำนวนมากใช้งบประมาณในการรวบรวมข้อมูลเพราะอนุญาตให้ Google รวบรวมข้อมูลหน้า Landing Page ทุกหน้าในเว็บไซต์ของตน เว็บไซต์หลายแห่งชอบที่จะใส่หน้าทั้งหมดลงในแอพมือถือเพื่อให้ Google สามารถค้นหาและรวบรวมข้อมูลทั้งหมดได้ นี่เป็นความผิดพลาด เพราะในความเป็นจริง ไม่ใช่ทุกหน้า Landing Page ของเราจะได้รับการจัดอันดับ

อะไรคือคุณค่าของการมีหน้า Landing Page ในดัชนีของ Google? การจัดอันดับและการแปลง หากเว็บไซต์ของคุณมีหน้า Landing Page ที่ไม่ดึงน้ำหนักด้วยการจัดอันดับสำหรับคำหลักหลายคำหรือเปลี่ยนผู้เยี่ยมชมเว็บไซต์เป็นโอกาสในการขายและรายได้ เหตุใดจึงต้องเสี่ยงที่จะปล่อยให้ Google รวบรวมข้อมูลจากพวกเขา

เจ้าของเว็บไซต์ระดับองค์กรและอีคอมเมิร์ซควรรู้ว่าหน้าใดของเว็บไซต์ของตนที่ได้รับการปรับให้เหมาะสมสำหรับการแปลงและมีโอกาสสูงที่สุดในการจัดอันดับและการแปลง จากนั้น พวกเขาควรใช้ข้อได้เปรียบทุกประการเพื่อให้แน่ใจว่า Google ใช้งบประมาณการรวบรวมข้อมูลในหน้าที่มีประสิทธิภาพสูงเหล่านั้น

หน้า Landing Page ของเว็บไซต์ของคุณที่มีอันดับสูงและมีโอกาสแปลงเป็นมูลค่าการใช้งบประมาณการรวบรวมข้อมูล ต่อไปนี้คือเคล็ดลับบางประการเพื่อให้แน่ใจว่า Googlebot จะรวมหน้าเหล่านั้นไว้ในงบประมาณของคุณ

• ลดจำนวนหน้าในแผนผังเว็บไซต์ เน้นเฉพาะในหน้าเว็บที่มีโอกาสดีในการจัดอันดับและได้รับการเข้าชมแบบอินทรีย์
• ลบหน้าที่มีประสิทธิภาพต่ำหรือไม่จำเป็น ลบเพจที่ไม่ก่อให้เกิดคุณค่าเนื่องจากไม่มีการจัดอันดับ การแปลง หรือวัตถุประสงค์ในการใช้งาน
• เนื้อหา ลูกพรุน . ตัดหน้าที่ไม่ได้รับการเข้าชมที่เกิดขึ้นเองและเปลี่ยนเส้นทางไปยังหน้า Landing Page อื่น ๆ ในไซต์ของคุณที่เกี่ยวข้องและได้รับการเข้าชม โปรดทราบว่าการเปลี่ยนเส้นทางใช้งบประมาณในการรวบรวมข้อมูลเล็กน้อย ดังนั้นพยายามใช้ให้น้อยลงและอย่าใช้ซ้ำ 2 ครั้งติดต่อกัน

เป็นเรื่องยากสำหรับเจ้าของไซต์ที่จะละทิ้งเนื้อหา แต่การป้องกัน Google จากการรวบรวมข้อมูลหน้าเว็บบางหน้าทำได้ง่ายกว่าการที่ Google เพิ่มงบประมาณการรวบรวมข้อมูลโดยรวมของคุณ ทำความสะอาดไซต์ของคุณ เพื่อให้โปรแกรมรวบรวมข้อมูลของ Google มีแนวโน้มที่จะค้นหาและจัดทำดัชนีสิ่งที่ดีที่สุดมีความสำคัญสูงสุด หากคุณต้องการใช้งบประมาณการรวบรวมข้อมูลอย่างชาญฉลาด

ขั้นตอนที่ 3: ใช้ลิงก์ภายในเพื่อยกระดับหน้าที่มีประสิทธิภาพสูงสำหรับโปรแกรมรวบรวมข้อมูลของ Google

เมื่อคุณระบุได้ว่าหน้าใดที่ Google กำลังรวบรวมข้อมูล เพิ่มแท็กโรบ็อตที่จำเป็น ลบหรือตัดหน้าที่มีประสิทธิภาพต่ำกว่าเกณฑ์ และทำการปรับเปลี่ยนแผนผังเว็บไซต์ โปรแกรมรวบรวมข้อมูลของ Google จะมีแนวโน้มมากขึ้นที่จะใช้งบประมาณในหน้าที่ถูกต้องของเว็บไซต์ของคุณ

แต่เพื่อที่จะเพิ่มงบประมาณได้อย่างแท้จริง หน้าเว็บของคุณจำเป็นต้องมีสิ่งที่จำเป็นสำหรับการจัดอันดับ แนวทางปฏิบัติที่ดีที่สุดสำหรับ SEO บนหน้าเป็นกุญแจสำคัญ แต่กลยุทธ์ทางเทคนิคขั้นสูงคือการใช้โครงสร้างการเชื่อมโยงภายในของคุณเพื่อยกระดับหน้าที่มีประสิทธิภาพสูงเหล่านั้น

เช่นเดียวกับ Googlebot ที่มีงบประมาณในการรวบรวมข้อมูลที่จำกัด เว็บไซต์ของคุณมีส่วนของเว็บไซต์ตามปริมาณอินเทอร์เน็ตเท่านั้น เป็นความรับผิดชอบของคุณในการมุ่งเน้นส่วนได้เสียของคุณอย่างชาญฉลาด นั่นหมายถึงการนำความเท่าเทียมกันของไซต์ไปยังหน้าเหล่านั้นที่กำหนดเป้าหมายคำหลักที่คุณมีโอกาสที่ดีในการจัดอันดับและจากหน้าเว็บที่นำการเข้าชมมาสู่คุณด้วยประเภทลูกค้าที่เหมาะสม ผู้ที่มีแนวโน้มที่จะแปลงและมีมูลค่าทางเศรษฐกิจจริงๆ

กลยุทธ์ SEO นี้เรียกว่าการแกะสลักเพจแรงก์ หากคุณมีเว็บไซต์ขนาดใหญ่ที่มีหน้า Landing Page หลายพันหน้า นักยุทธศาสตร์ขั้นสูงสามารถเรียกใช้การทดสอบ SEO เพื่อเพิ่มประสิทธิภาพโปรไฟล์การเชื่อมโยงภายในของเว็บไซต์ของคุณเพื่อการกระจาย PageRank ที่ดีขึ้น หากคุณเป็นเว็บไซต์ใหม่ คุณสามารถนำหน้าด้วยการผสมผสาน PageRank เข้ากับสถาปัตยกรรมเว็บไซต์ของคุณ และพิจารณาถึงความเท่าเทียมกันของเว็บไซต์กับหน้า Landing Page ใหม่ทุกหน้าที่คุณสร้างขึ้น

ต่อไปนี้คือกลยุทธ์สองข้อที่ฉันชื่นชอบในการวิเคราะห์หน้าเว็บของฉัน เพื่อดูว่าวิธีใดจะได้รับประโยชน์มากที่สุดจากการแกะสลักเพจแรงก์

• ค้นหาหน้าเว็บไซต์ของคุณที่มีอัตราการเข้าชมที่ดี แต่มี PageRank ไม่เพียงพอ ค้นหาวิธีเพิ่มลิงก์ภายในให้กับหน้าเหล่านั้น และส่ง PageRank ไปที่นั่นเพิ่มเติม การเพิ่มลงในส่วนหัวหรือส่วนท้ายของเว็บไซต์ของคุณเป็นวิธีที่ยอดเยี่ยมในการดำเนินการอย่างรวดเร็ว แต่อย่าหักโหมลิงก์ในเมนูการนำทางของคุณ
• เน้นที่หน้าที่มีลิงก์ภายในจำนวนมาก แต่ไม่ได้รับการเข้าชมมากนัก การแสดงผลจากการค้นหา และอันดับสำหรับคำหลักเพียงไม่กี่คำ เพจที่ได้รับลิงก์ภายในจำนวนมากมักมีเพจแรงก์จำนวนมาก หากพวกเขาไม่ได้ใช้ PageRank นั้นเพื่อนำการเข้าชมแบบออร์แกนิกมาที่ไซต์ของคุณ แสดงว่าพวกเขากำลังสูญเสียมันไป จะดีกว่าที่จะย้าย PageRank นั้นไปยังหน้าที่สามารถขยับเข็มได้จริง

การทำความเข้าใจบทบาทที่ทุกลิงก์ในเว็บไซต์ของคุณไม่เพียงแต่ส่ง Googlebot ไปรอบๆ เว็บไซต์ของคุณเท่านั้น แต่ยังรวมถึงการกระจายส่วนของลิงก์ด้วย ถือเป็นขั้นตอนสุดท้ายในการเพิ่มประสิทธิภาพงบประมาณการรวบรวมข้อมูล การทำให้โครงสร้างการเชื่อมโยงภายในของคุณถูกต้องสามารถนำไปสู่การปรับปรุงอันดับอย่างมากสำหรับหน้าเงินของคุณ ในท้ายที่สุด วิธีที่ดีที่สุดในการใช้งบประมาณการรวบรวมข้อมูลของคุณคือในหน้า Landing Page ที่มีแนวโน้มว่าจะสร้างรายได้เข้ากระเป๋าของคุณมากที่สุด

หลังจากที่คุณใช้การเปลี่ยนแปลงของคุณแล้ว คอยดูการจัดอันดับคำหลักสำหรับหน้าที่ปรับปรุงเหล่านั้นในเครื่องมือ Google Search Console หากอันดับดีขึ้นสำหรับหน้าเหล่านั้น แสดงว่าการเพิ่มประสิทธิภาพงบประมาณการตระเวนของคุณทำงาน จากนั้น เมื่อคุณเพิ่มหน้าใหม่ลงในเว็บไซต์ของคุณ ให้เลือกมากขึ้นว่าพวกเขาสมควรที่จะกินงบประมาณการรวบรวมข้อมูลของคุณหรือไม่ หากไม่เป็นเช่นนั้น ให้นำโปรแกรมรวบรวมข้อมูลไปยังหน้าที่ทำงานหนักที่สุดสำหรับแบรนด์ของคุณเท่านั้น