Webinar Digest: การตรวจสอบ SEO แบบสดและบันทึกไฟล์ด้วย Bill Hartzer

เผยแพร่แล้ว: 2018-10-02

เมื่อวันที่ 25 กันยายน OnCrawl ยินดีที่จะโฮสต์ Bill Hartzer สำหรับการสัมมนาผ่านเว็บเกี่ยวกับการวิเคราะห์ไฟล์บันทึก และเหตุใดจึงสำคัญสำหรับการตรวจสอบ SEO เขาเปิดเว็บไซต์ของตัวเองเพื่อแสดงผลกระทบของการเพิ่มประสิทธิภาพต่อกิจกรรมของบ็อตและความถี่ในการรวบรวมข้อมูล

แนะนำ Bill Hartzer

Bill Hartzer เป็นที่ปรึกษา SEO และผู้เชี่ยวชาญด้านชื่อโดเมนที่มีประสบการณ์มากกว่า 20 ปี Bill ได้รับการยอมรับในระดับสากลว่าเป็นผู้เชี่ยวชาญในสาขาของเขา และเพิ่งได้รับการสัมภาษณ์ทาง CBS News ว่าเป็นหนึ่งในผู้เชี่ยวชาญด้านการค้นหาชั้นนำของประเทศ

ตลอดการสัมมนาผ่านเว็บที่ยาวนานเป็นชั่วโมง Bill ให้เราเห็นไฟล์บันทึกของเขาและอภิปรายว่าเขาใช้ไฟล์เหล่านี้อย่างไรในบริบทของการตรวจสอบไซต์ เขานำเสนอเครื่องมือต่างๆ ที่เขาใช้เพื่อตรวจสอบประสิทธิภาพของไซต์และพฤติกรรมของบอทบนไซต์ของเขา

สุดท้าย Bill ตอบคำถามเกี่ยวกับวิธีใช้ OnCrawl เพื่อแสดงผลลัพธ์ที่มีความหมาย และให้คำแนะนำแก่ SEO อื่นๆ

วิธีเข้าถึงไฟล์บันทึกของคุณผ่านปลั๊กอิน cPanel สำหรับ WordPress

หากเว็บไซต์ของคุณสร้างด้วย WordPress และคุณใช้ปลั๊กอิน cPanel คุณสามารถค้นหาบันทึกเซิร์ฟเวอร์ของคุณได้โดยตรงในอินเทอร์เฟซ WordPress

ไปที่ Metrics จากนั้นไปที่ Raw Access ที่นั่น คุณสามารถดาวน์โหลดไฟล์บันทึกรายวันจากตัวจัดการไฟล์ รวมถึงไฟล์บันทึกที่เก่ากว่าแบบซิป

ตรวจสอบเนื้อหาของล็อกไฟล์

ไฟล์บันทึกคือไฟล์ข้อความขนาดใหญ่ที่มีข้อมูลเกี่ยวกับผู้เยี่ยมชมเว็บไซต์ของคุณทั้งหมด รวมถึงบ็อต คุณสามารถเปิดโดยใช้โปรแกรมแก้ไขข้อความพื้นฐาน

การระบุตัวตนของบอทที่อาจเกิดขึ้นจาก googlebot หรือ bing นั้นไม่ใช่เรื่องยาก ซึ่งระบุตัวเองในไฟล์บันทึก แม้ว่าจะเป็นความคิดที่ดีที่จะยืนยันการระบุบอทโดยใช้การค้นหา IP

คุณอาจพบบ็อตอื่นๆ ที่รวบรวมข้อมูลไซต์ของคุณ แต่อาจไม่เป็นประโยชน์สำหรับคุณ คุณสามารถบล็อกบอทเหล่านี้ไม่ให้เข้าถึงไซต์ของคุณได้

OnCrawl จะประมวลผลการวิเคราะห์แบบดิบในไฟล์บันทึกของคุณเพื่อให้คุณเห็นมุมมองที่ชัดเจนของบอทที่เข้าชมไซต์ของคุณ

การใช้ไฟล์บันทึกของคุณเพื่อดูข้อมูลเพิ่มเติมเกี่ยวกับ Crawl Stats

ข้อมูลเกี่ยวกับสถิติการรวบรวมข้อมูลมีอยู่ใน Google Search Console เวอร์ชันเก่าภายใต้การรวบรวมข้อมูล > สถิติการรวบรวมข้อมูลใช้ความหมายใหม่เมื่อเทียบกับข้อมูลในไฟล์บันทึกของคุณ

คุณควรทราบว่าข้อมูลที่แสดงใน Google Search Console ไม่ได้จำกัดเฉพาะบอท SEO ของ Google และอาจมีประโยชน์น้อยกว่าข้อมูลที่แน่ชัดกว่าที่คุณจะได้รับจากการวิเคราะห์ไฟล์บันทึกของคุณ

เหตุการณ์ล่าสุดของกิจกรรมการรวบรวมข้อมูลที่ผิดปกติ

บิลจะดูการเพิ่มขึ้นอย่างรวดเร็วสามจุดล่าสุดที่มองเห็นได้ในสถิติการรวบรวมข้อมูลใน Google Search Console สิ่งเหล่านี้สอดคล้องกับเหตุการณ์ใหญ่ที่กระตุ้นกิจกรรมการรวบรวมข้อมูลที่เพิ่มขึ้น

เข็มดัชนีการจัดทำดัชนีครั้งแรกบนมือถือ

การเพิ่มขึ้นอย่างรวดเร็วในวันที่ 7 กันยายนใน Google Search Console อาจดูเหมือนไม่เกี่ยวข้องกับกิจกรรมบนเว็บไซต์ในตอนแรก อย่างไรก็ตาม ดูการวิเคราะห์บันทึกใน OnCrawl ที่ให้เบาะแส:


การวิเคราะห์ไฟล์บันทึกช่วยให้เราดูรายละเอียดของบ็อตต่างๆ ที่ Google ใช้ในการรวบรวมข้อมูลหน้า เป็นที่ชัดเจนว่ากิจกรรมของ Googlebot บนเดสก์ท็อปลดลงอย่างรวดเร็วก่อนวันที่นี้ และการเพิ่มขึ้นอย่างรวดเร็วนี้ ซึ่งแตกต่างจากการเพิ่มขึ้นอย่างรวดเร็วที่เล็กกว่าก่อนหน้านี้ ประกอบขึ้นจาก Hit เกือบทั้งหมดบนหน้าเว็บที่ไม่ซ้ำใครและจัดทำดัชนีแล้วโดย Google bot บนมือถือ

การเข้าชมที่เกิดขึ้นเองที่เพิ่มขึ้น 50% ที่บันทึกโดย Google Analytics ยืนยันว่าการเพิ่มขึ้นอย่างรวดเร็วนี้สอดคล้องกับการจัดทำดัชนี Mobile First ของเว็บไซต์ในช่วงต้นเดือนกันยายน สัปดาห์ก่อนที่ Google จะส่งการแจ้งเตือน

การปรับเปลี่ยนโครงสร้าง URL สำหรับไซต์

กลางเดือนสิงหาคม Bill ได้ทำการเปลี่ยนแปลงโครงสร้าง URL ของเขาเพื่อให้เป็นมิตรกับ SEO มากขึ้น

Google Search Console ได้บันทึกการเพิ่มขึ้นอย่างรวดเร็วสองครั้งหลังจากการแก้ไขนี้ เป็นการยืนยันว่า Google ระบุเหตุการณ์สำคัญของไซต์และใช้เป็นสัญญาณในการรวบรวมข้อมูล URL ของเว็บไซต์อีกครั้ง

เมื่อเราสังเกตการแยกย่อยของ Hit เหล่านี้ใน OnCrawl จะเห็นได้ว่าการเพิ่มขึ้นอย่างรวดเร็วครั้งที่สองนั้นเพิ่มขึ้นน้อยกว่า แต่อัตราการรวบรวมข้อมูลหน้าเว็บบนเว็บไซต์นี้ในระดับสูงยังคงดำเนินต่อไปในช่วงหลายวัน เป็นที่ชัดเจนว่า Google ได้ทำการเปลี่ยนแปลงดังกล่าวแล้ว เนื่องจาก Bill สามารถยืนยันได้โดยการสังเกตความแตกต่างในกิจกรรมการรวบรวมข้อมูลในช่วงหลายวันหลังจากการเปลี่ยนแปลงของเขา

รายงาน OnCrawl และคุณลักษณะที่เป็นประโยชน์สำหรับการดำเนินการตรวจสอบทางเทคนิค

การเข้าชม SEO และหน้า SEO Active

OnCrawl ประมวลผลข้อมูลไฟล์บันทึกของคุณเพื่อให้ข้อมูลที่ถูกต้องเกี่ยวกับการเข้าชม SEO หรือผู้เข้าชมที่เป็นมนุษย์ที่มาจากรายชื่อ Google SERP

คุณสามารถติดตามจำนวนการเข้าชม หรือดูหน้า SEO ที่ใช้งานอยู่ ซึ่งเป็นหน้าแต่ละหน้าบนเว็บไซต์ที่ได้รับการเข้าชมแบบออร์แกนิก

สิ่งหนึ่งที่คุณอาจต้องการพิจารณาเพื่อเป็นส่วนหนึ่งของการตรวจสอบก็คือเหตุผลที่หน้าการจัดอันดับบางหน้าไม่ได้รับการเข้าชมที่เกิดขึ้นเอง (หรือกล่าวคือ ไม่ใช่หน้าที่ใช้งาน SEO)

อันดับสด

ตัวชี้วัดเช่นอันดับสดของ OnCrawl ให้ข้อมูลที่จำเป็น ในกรณีนี้: ความล่าช้าโดยเฉลี่ยในวันที่ Google รวบรวมข้อมูลหน้าเว็บเป็นครั้งแรกและเมื่อหน้าเว็บได้รับการเข้าชม SEO ครั้งแรก


กลยุทธ์การโปรโมตเนื้อหาและการพัฒนาลิงก์ย้อนกลับสามารถช่วยเพิ่มอัตราการเข้าชมสำหรับหน้าใหม่ บางหน้าบนไซต์ในการตรวจสอบนี้ เช่น โพสต์บนบล็อกที่ได้รับการส่งเสริมผ่านเครือข่ายสังคมออนไลน์ ได้รับอันดับ Fresh ที่ต่ำกว่ามาก

บอทเข้าชมหน้าและทรัพยากรตามรหัสสถานะ

บอทอาจกำลังเยี่ยมชม URL ที่ส่งคืนข้อผิดพลาด 404 หรือ 410 ซึ่งอาจเกี่ยวข้องกับทรัพยากรต่างๆ เช่น CSS, JavaScript, PDF หรือไฟล์รูปภาพ

นี่คือองค์ประกอบที่คุณต้องการตรวจสอบอย่างแน่นอนในระหว่างการตรวจสอบ การเปลี่ยนเส้นทาง URL เหล่านี้และการลบลิงก์ภายในไปยัง URL เหล่านี้สามารถให้ผลลัพธ์ที่รวดเร็ว

ในระหว่างการตรวจสอบ การจดบันทึกเกี่ยวกับองค์ประกอบที่ควรได้รับการแก้ไข เช่น URL ที่ส่งคืนข้อผิดพลาดสถานะไปยังบอทอาจเป็นประโยชน์

รายงาน Data Explorer: รายงานที่กำหนดเอง

OnCrawl Data Explorer เสนอตัวกรองอย่างรวดเร็วเพื่อสร้างรายงานที่คุณอาจสนใจ แต่คุณยังสามารถดึงรายงานของคุณเองตามเกณฑ์ที่คุณสนใจ ตัวอย่างเช่น คุณอาจต้องการสำรวจ SEO Active Pages ด้วยการตีกลับและเวลาในการโหลดสูง

รายงาน Data Explorer: Active Orphan Pages

ด้วยการรวมข้อมูลการวิเคราะห์ การรวบรวมข้อมูล และบันทึกไฟล์ OnCrawl สามารถช่วยให้คุณค้นพบหน้าเว็บที่มีการเข้าชมแบบออร์แกนิกจากมนุษย์ซึ่งไม่ได้สร้างคุณค่าให้กับเว็บไซต์ของคุณเสมอไป ข้อดีของการใช้ข้อมูลจากไฟล์บันทึกคือ คุณจะค้นพบทุกหน้าในไซต์ของคุณที่เคยเข้าชม รวมถึงหน้าเว็บที่อาจไม่มีโค้ด Google Analytics อยู่ด้วย

บิลสามารถระบุการเข้าชมแบบออร์แกนิก SEO ในหน้าฟีด RSS ได้ ซึ่งน่าจะมาจากลิงก์จากแหล่งภายนอก หน้าเหล่านี้เป็นหน้าเด็กกำพร้าในไซต์ของเขา พวกเขาไม่มีหน้า "หลัก" ที่เชื่อมโยงไปยังพวกเขา หน้าเหล่านี้ไม่ได้ให้คุณค่าเพิ่มเติมแก่กลยุทธ์ SEO ของเขา แต่ยังคงได้รับการเข้าชมเล็กน้อยจากการเข้าชมที่เกิดขึ้นเอง

หน้าเหล่านี้เป็นตัวเลือกที่ดีในการเริ่มเพิ่มประสิทธิภาพ

การวิเคราะห์การค้นหาสำหรับการจัดอันดับคำหลัก

ข้อมูลสำหรับการจัดอันดับสามารถดึงมาจาก Google Search Console ใน Google Search Console เวอร์ชันเก่าโดยตรง คุณสามารถไปที่ปริมาณการค้นหา จากนั้นค้นหา Analytics และดูการคลิก การแสดงผล CTR และตำแหน่งในช่วง 90 วันที่ผ่านมา

OnCrawl มีรายงานที่ชัดเจนว่าข้อมูลนี้เกี่ยวข้องกับเว็บไซต์ทั้งหมดอย่างไร ช่วยให้คุณสามารถเปรียบเทียบจำนวนหน้าทั้งหมดบนไซต์ จำนวนหน้าการจัดอันดับ และจำนวนหน้าที่ได้รับการคลิก

การแสดงผล CTR และการคลิก

การแบ่งส่วนไซต์ทำให้คุณสามารถยืนยันได้ในพริบตาว่าประเภทหรือกลุ่มของหน้าใดในไซต์ของคุณมีการจัดอันดับ และหน้าใดของผลลัพธ์

ในการตรวจสอบนี้ Bill สามารถใช้ตัวชี้วัดของ OnCrawl เพื่อระบุประเภทของหน้าเว็บที่มีแนวโน้มว่าจะอยู่ในอันดับที่ดีได้ เหล่านี้เป็นประเภทของหน้าเว็บที่เขารู้ว่าเขาควรดำเนินการผลิตต่อไปเพื่อเพิ่มการเข้าชมเว็บไซต์

การคลิกในหน้าการจัดอันดับมีความสัมพันธ์อย่างมากกับอันดับการจัดอันดับ: อันดับมากกว่า 10 จะไม่อยู่ในหน้าแรกของผลการค้นหาอีกต่อไป ซึ่งในจุดนี้จำนวนการคลิกจะลดลงอย่างรวดเร็วสำหรับคำหลักส่วนใหญ่

การแบ่งส่วนเว็บไซต์

การแบ่งกลุ่มของ OnCrawl เป็นวิธีการจัดกลุ่มหน้าเว็บของคุณให้เป็นชุดที่มีความหมาย ในขณะที่มีการแบ่งกลุ่มอัตโนมัติ คุณสามารถแก้ไขตัวกรองหรือสร้างการแบ่งกลุ่มของคุณเองตั้งแต่เริ่มต้น เมื่อใช้ตัวกรองภาษาคิวรี OnCrawl คุณสามารถรวมหรือยกเว้นเพจในกลุ่มตามเกณฑ์ต่างๆ มากมาย

ในเว็บไซต์ Bill ดูในการสัมมนาทางเว็บ การแบ่งส่วนจะขึ้นอยู่กับไดเร็กทอรีต่างๆ บนเว็บไซต์

หน้าในโครงสร้าง > รวบรวมข้อมูล > อันดับ > ใช้งานอยู่

ในรายงานการจัดอันดับ OnCrawl แผนภูมิ “เพจในโครงสร้าง > รวบรวมข้อมูล > อันดับ > ใช้งานอยู่” สามารถแจ้งเตือนคุณถึงปัญหาในการจัดอันดับและเข้าชมเพจของคุณ

แผนภูมินี้แสดงให้คุณเห็น:

  • หน้าในโครงสร้าง: จำนวนหน้าที่สามารถเข้าถึงได้ผ่านลิงค์ต่าง ๆ ในเว็บไซต์ของคุณ
  • รวบรวมข้อมูลแล้ว: หน้าที่ Google ได้รวบรวมข้อมูล
  • อันดับ: หน้าที่ปรากฏใน Google SERPs
  • ใช้งานอยู่: เพจที่มีการเข้าชมแบบออร์แกนิก

การตรวจสอบของคุณจะต้องการพิจารณาสาเหตุของความแตกต่างระหว่างแท่งกราฟในกราฟนี้

อย่างไรก็ตาม ความแตกต่างระหว่างจำนวนหน้าในโครงสร้างและจำนวนหน้าที่รวบรวมข้อมูลอาจเป็นความตั้งใจ ตัวอย่างเช่น หากคุณป้องกันไม่ให้ Google รวบรวมข้อมูลบางหน้าโดยการไม่อนุญาตโรบ็อตในไฟล์ robots.txt นี่คือสิ่งที่คุณต้องการตรวจสอบระหว่างการตรวจสอบของคุณ

คุณสามารถดูข้อมูลประเภทนี้ได้ใน OnCrawl โดยคลิกที่กราฟ

ประเด็นที่สำคัญ


ประเด็นสำคัญจากการสัมมนาผ่านเว็บนี้รวมถึง:

  • การเปลี่ยนแปลงครั้งใหญ่ในโครงสร้างของเว็บไซต์สามารถสร้างการเปลี่ยนแปลงครั้งใหญ่ในกิจกรรมการรวบรวมข้อมูล
  • เครื่องมือที่ไม่เสียค่าใช้จ่ายของ Google จะรายงานข้อมูลที่รวบรวม หาค่าเฉลี่ย หรือปัดเศษในลักษณะที่ทำให้ดูไม่ถูกต้อง
  • ไฟล์บันทึกช่วยให้คุณเห็นพฤติกรรมของบอทจริงและการเข้าชมแบบออร์แกนิก เมื่อรวมกับข้อมูลการรวบรวมข้อมูลและการตรวจสอบรายวันแล้ว สิ่งเหล่านี้เป็นเครื่องมือที่มีประสิทธิภาพสำหรับการตรวจจับหนามแหลม
  • ข้อมูลที่ถูกต้องเป็นสิ่งจำเป็นในการทำความเข้าใจสาเหตุและสิ่งที่เกิดขึ้น และสามารถทำได้โดยการวิเคราะห์ข้ามการวิเคราะห์ การรวบรวมข้อมูล การจัดอันดับ และข้อมูลไฟล์บันทึกโดยเฉพาะในเครื่องมืออย่าง OnCrawl

ลอง OnCrawl ฟรี

คุณสนใจที่จะใช้เทคนิคเหล่านี้กับไซต์ของคุณสำหรับข้อมูลเชิงลึกในการตรวจสอบที่นำไปปฏิบัติได้หรือไม่

เริ่มการทดลองใช้ฟรีของคุณ

พลาดถ่ายทอดสด? ชมย้อนหลัง!

แม้ว่าคุณจะไม่สามารถทำการสัมมนาผ่านเว็บแบบสดได้ หรือไม่สามารถอยู่ต่อสำหรับเซสชั่นแบบเต็มได้ คุณยังสามารถดูเวอร์ชันเต็มได้