5 tips menghemat waktu menggunakan OnCrawl

Cara memanfaatkan fitur OnCrawl canggih untuk meningkatkan efisiensi Anda selama pemantauan SEO harian.
OnCrawl adalah alat SEO yang kuat yang membantu Anda memantau dan mengoptimalkan visibilitas mesin pencari dari situs web e-niaga, penerbit online, atau aplikasi. Alat ini dibangun berdasarkan satu prinsip sederhana: membantu pengelola lalu lintas menghemat waktu dalam proses analisis mereka dan dalam manajemen proyek SEO harian mereka.

Selain sebagai alat audit di tempat, berdasarkan platform SaaS yang didukung oleh API yang menggabungkan semua data situs web, ini juga merupakan penganalisis log yang menyederhanakan ekstraksi dan analisis data dari file server log.

Kemungkinan OnCrawl cukup luas tetapi perlu dikuasai. Pada artikel ini, kami akan membagikan 5 tips menghemat waktu untuk penggunaan harian perayap SEO dan penganalisis log kami.

1# Cara mengkategorikan url HTTP dan HTTPS

Migrasi HTTPS adalah topik hangat di bidang SEO. Untuk menangani langkah kunci ini dengan sempurna, penting untuk mengikuti perilaku bot dengan tepat di kedua protokol.
Pengalaman menunjukkan bahwa bot membutuhkan lebih banyak atau lebih sedikit waktu untuk sepenuhnya beralih dari HTTP ke HTTPS. Rata-rata, transisi tersebut membutuhkan waktu beberapa minggu atau bulan, bergantung pada faktor eksternal dan internal yang terkait dengan kualitas dan migrasi situs.

Untuk memahami dengan tepat fase transisi itu, di mana anggaran perayapan Anda sangat terpengaruh, sebaiknya pantau hit bot. Oleh karena itu, perlu untuk menganalisis log server. Bot, sebagai pengguna biasa, meninggalkan jejak di setiap halaman, sumber daya, dan permintaan yang dibuatnya. Log Anda memiliki port yang telah mengirimkan panggilan ini. Dengan demikian, Anda dapat memvalidasi kualitas migrasi situs web HTTPS Anda.

Metode untuk menyiapkan kumpulan halaman http vs https khusus

Di rumah proyek Lanjutan Anda, Anda dapat menemukan tombol "pengaturan" di sudut kanan atas. Kemudian, pilih menu “Configure Page Group”. Sesampai di sini, buat "Buat Kumpulan Grup" baru dan beri nama "HTTP vs HTTPS".

Untuk mengakses log Anda, penting untuk memilih opsi “Saya ingin menggunakan set ini pada pemantauan log dan dasbor analisis silang” .

• HTTPS : “URL lengkap” / “mulai dengan” / https
• HTTP : “url lengkap” / “tidak dimulai dengan” / https

Setelah disimpan, Anda akan mengakses tampilan migrasi HTTPS Anda (jika Anda telah menambahkan port permintaan di baris log Anda. Anda dapat melihat panduan kami.)

QuickFilter kami dapat ditemukan di Data Explorer. Mereka telah dibuat untuk memudahkan akses ke beberapa metrik SEO penting seperti tautan yang mengarah ke 404, 500 atau 301/302, halaman yang terlalu lambat atau terlalu buruk, dll.

Berikut daftar lengkapnya:

• 404 kesalahan
• 5xx kesalahan
• halaman aktif
• Halaman aktif tidak dirayapi oleh Google
• Halaman aktif dengan kode status yang ditemukan oleh Google berbeda dari 200
• Kanonik tidak cocok
• Kanonis tidak disetel
• Halaman yang dapat diindeks
• Tidak ada halaman yang dapat diindeks
• Halaman aktif anak yatim
• Halaman yatim piatu
• Halaman dirayapi oleh Google
• Halaman yang dirayapi oleh Google dan OnCrawl
• Halaman dalam struktur tidak dirayapi oleh Google
• Halaman yang menunjukkan kesalahan 3xx
• Halaman yang menunjukkan kesalahan 4xx
• Halaman yang menunjukkan kesalahan 5xx
• Halaman dengan h1 yang buruk
• Halaman dengan h2 buruk
• Halaman dengan deskripsi meta yang buruk
• Halaman dengan judul yang buruk
• Halaman dengan masalah duplikasi HTML
• Halaman dengan kurang dari 10 inlink
• Arahkan ulang 3xx
• Halaman Terlalu Berat
• Halaman Terlalu Lambat

Namun terkadang, QuickFilter ini tidak menjawab semua masalah bisnis Anda. Dalam hal ini, Anda dapat memulai dari salah satunya dan membuat "Filter Sendiri" dengan menambahkan potongan di filter dan dengan menyimpannya untuk menemukan filter dengan cepat setiap kali Anda terhubung ke alat.

Misalnya, dari tautan yang mengarah ke 4xx, Anda dapat memilih untuk memfilter tautan yang memiliki jangkar kosong: "Anchor" / "is" / "" dan simpan filter itu. Setelah disimpan, dapat dimodifikasi sebanyak yang diperlukan.

Anda sekarang memiliki akses langsung ke "Quickfilter" tertentu di daftar "Select a Quickfilter" di bagian bawah bagian "Own" seperti yang terlihat pada tangkapan layar di bawah.

3# Bagaimana cara mengatur Bidang Kustom terkait DataLayer?

Anda dapat menggunakan segmentasi jenis halaman terkait saat Anda menentukan tag alat analitik Anda misalnya. Kode khusus itu sangat menarik untuk mengelompokkan atau menyilangkan data dari OnCrawl dengan data eksternal Anda.
Untuk memungkinkan Anda membuat "kolom penting" untuk analisis Anda, kami dapat mengekstrak potongan kode ini selama perayapan dan mengembalikannya sebagai jenis data proyek Anda.
Opsi "Bidang Kustom" memungkinkan untuk mengikis elemen apa pun dari halaman kode sumber berkat regex atau XPath. Bahasa-bahasa ini memiliki definisi dan aturannya sendiri. Anda dapat menemukan informasi tentang XPath di sini dan tentang regex di sini.

Kasus penggunaan 1: mengekstraksi data lapisan data dari kode sumber halaman

Kode untuk dianalisis:

Solusi : Gunakan “regex” : s.prop2=”([^”]+)” / Extract : Mono-value / Field Format : Value

• Temukan string karakter s.prop2="
• Kikis semua karakter yang bukan “ (karakter pertama setelah data yang akan diekstrak)
• String untuk mengekstrak dapat ditemukan sebelum penutupan “

Setelah perayapan, di penjelajah data, Anda akan menemukan di kolom sProp2, sProp3 atau di Nama bidang Anda, data yang diekstraksi:

Gunakan XPATH
Kode untuk dianalisis:

Anda hanya perlu menyalin/menempel elemen Xpath yang ingin Anda kikis langsung dari penganalisis kode Chrome. Hati-hati, jika kode dirender dalam JavaScript, Anda perlu menyiapkan proyek scrape khusus. Bahasa Xpath sangat kuat dan sulit untuk dimanipulasi, jadi jika Anda memerlukan bantuan, hubungi pakar kami.

Kasus penggunaan 3: menguji keberadaan tag analitik selama fase penerimaan

Gunakan ekspresi reguler
Kode untuk dianalisis:

Solusi : Gunakan “regex” : '_setAccount', 'UA-364863-11' / Ekstrak : Periksa apakah ada

Anda akan mendapatkan di Data Explorer "benar" jika string ditemukan, "salah" sebaliknya.

4# Cara memvisualisasikan frekuensi perayapan Google di setiap bagian situs web Anda

Anggaran perayapan adalah inti dari setiap masalah SEO. Ini sangat terkait dengan konsep "Kepentingan Halaman" dan penjadwalan perayapan Google. Kami mengetahui prinsip-prinsip ini, yang diperkenalkan dalam paten Google sejak 2012, memungkinkan masyarakat Mountain View mengoptimalkan sumber daya yang didedikasikan untuk perayapan web.
Google tidak menghabiskan energi yang sama di setiap bagian situs web Anda. Frekuensi perayapannya di setiap bagian situs web Anda memberi Anda wawasan yang tepat tentang pentingnya halaman Anda di mata Google.

Halaman penting lebih banyak dirayapi oleh bot Google karena anggaran perayapan sangat terkait dengan keterampilan peringkat halaman.

Proyek OnCrawl Advanced memungkinkan Anda melihat anggaran perayapan secara asli di bagian "Pemantauan log" / "Perilaku Perayapan" / "Perilaku Perayapan Berdasarkan Grup".

Anda dapat melihat bahwa grup "Halaman Beranda" memiliki frekuensi perayapan tertinggi. Itu normal karena Google terus mencari artikel baru dan umumnya terdaftar di halaman beranda. Ide Pentingnya Halaman sangat terkait dengan konsep Google Freshness. Halaman beranda Anda adalah halaman terpenting untuk memprioritaskan anggaran perayapan Google Anda. Kemudian, optimasi disebarkan ke halaman lain mengenai kedalaman dan popularitas.
Namun sulit untuk melihat perbedaan frekuensi. Dengan demikian Anda perlu mengklik grup yang ingin Anda hapus (dengan mengklik legenda) dan melihat datanya muncul.

5# Cara menguji kode status dari daftar URL setelah migrasi

Saat Anda ingin menguji kode status dengan cepat dari sekumpulan URL, Anda dapat mengubah setelan perayapan baru:

• Tambahkan semua URL awal (tombol ("tambahkan url mulai")
• Tentukan kedalaman maksimum hingga 1

Perayapan khusus ini akan mengembalikan data kualitatif mengenai kumpulan url ini.

Anda akan dapat memeriksa apakah pengalihan diatur dengan baik atau mengikuti evolusi kode status dari waktu ke waktu. Pikirkan tentang keuntungan merangkak secara teratur, Anda akan dapat secara otomatis mengikuti url lama.

Mengapa Anda tidak membuat dasbor otomatis melalui API kami dan membuat pemantauan pengujian otomatis pada aspek ini.

Kami berharap peretasan ini akan membantu Anda meningkatkan efisiensi menggunakan OnCrawl. Kami masih memiliki banyak trik lanjutan untuk ditunjukkan kepada Anda. Silakan berbagi dengan kami di Twitter #oncrawlhacks Anda misalnya, kami senang pengguna kami dapat bersenang-senang seperti yang kami miliki dengan alat kami.