5 kunci analisis file log yang dibutuhkan setiap SEO

File log adalah cerminan yang tepat dari kehidupan situs web Anda. Baik oleh pengguna atau bot, di halaman atau di sumber daya, semua aktivitas di situs web Anda disimpan di log Anda.
Berisi informasi seperti alamat IP, kode status, agen pengguna, referensi dan data teknis lainnya, setiap baris dalam log (data berbasis server) dapat membantu Anda melengkapi analisis situs web Anda, yang biasanya sebagian besar didasarkan pada data analitik (data pengguna- berorientasi data).
Data yang akan Anda temukan di log Anda dapat, dengan sendirinya, membantu Anda memfokuskan strategi SEO Anda.

1. Status kesehatan situs web Anda

Di antara informasi yang dapat Anda peroleh melalui log, kode status , ukuran respons , dan waktu respons adalah indikator yang sangat baik untuk kesehatan situs web Anda.
Faktanya adalah umum untuk kehilangan lalu lintas atau konversi tanpa benar-benar memahami alasannya. Itu karena penjelasannya terkadang bisa teknis.
Di antara petunjuk yang perlu dipertimbangkan adalah beberapa yang berhubungan langsung dengan 3 bidang yang baru saja kami sebutkan.
Contoh 1: peningkatan jumlah kesalahan server (“5xx”) dapat menunjukkan masalah teknis yang dapat tidak terdeteksi jika Anda hanya menavigasi dari halaman ke halaman.
Contoh 2: beberapa penelitian telah menunjukkan dampak waktu buka pada rasio konversi untuk situs web e-niaga. Penurunan pendapatan penjualan Anda dapat berkorelasi dengan peningkatan waktu buka halaman Anda.
Selain itu, Google menawarkan kalkulator yang memungkinkan Anda untuk mensimulasikan hubungan antara waktu buka dan pendapatan (untuk diambil dengan sebutir garam).

Contoh 3: terkadang server Anda, karena berbagai masalah teknis, mengembalikan halaman kosong. Dalam hal ini, pemantauan sederhana terhadap kode status Anda tidak akan cukup untuk mengingatkan Anda. Itulah mengapa mungkin berguna untuk menambahkan ukuran respons ke data yang Anda pantau: halaman kosong (atau kosong) ini biasanya lebih ringan dari biasanya.
Dengan mengelompokkan situs web Anda berdasarkan berbagai jenis URL/halaman, Anda akan dapat mengisolasi sumber masalah teknis dengan lebih mudah, yang akan membuat pemecahan masalah menjadi lebih sederhana.

2. Frekuensi hit bot

Untuk anggota komunitas SEO, log mewakili banyak informasi berguna tentang bagaimana bot dari mesin pencari “mengkonsumsi” situs web mereka.
Misalnya, mereka memberi tahu kami saat bot mengunjungi halaman untuk pertama atau terakhir kalinya.
Mari kita ambil contoh situs web berita yang secara logis membutuhkan mesin pencari untuk menemukan dan mengindeks konten segarnya dengan cepat. Menganalisis bidang log yang menunjukkan tanggal dan waktu memungkinkan untuk menentukan waktu rata -rata antara publikasi artikel dan penemuannya oleh mesin pencari.
Dari sana, akan menarik untuk menganalisis jumlah hit bot harian (atau frekuensi perayapan ) di halaman beranda situs web, halaman kategori… Ini akan memudahkan untuk menentukan di mana menempatkan tautan ke artikel baru yang perlu ditemukan.

Teori yang sama dapat diterapkan pada situs web e-niaga untuk menemukan produk baru dalam katalog, seperti produk yang ingin Anda soroti agar tetap mengikuti tren yang muncul.

3. Anggaran perayapan

Anggaran perayapan (semacam kredit bandwidth perayapan yang dipersembahkan oleh Google dan rekan-rekannya untuk sebuah situs) adalah subjek favorit para pakar SEO, dan pengoptimalannya telah menjadi kewajiban wajib.
Di luar log, hanya Google Search Console (versi lama untuk saat ini) yang akan memberi Anda gambaran dasar tentang anggaran yang diberikan mesin telusur ke situs web Anda. Namun tingkat akurasi di Search Console tidak akan benar-benar membantu Anda mengetahui di mana harus memusatkan upaya Anda. Terutama karena data yang dilaporkan sebenarnya adalah kumpulan data yang dikumpulkan dari semua Googlebot.
Namun, log, berkat analisis bidang agen pengguna dan URL , dapat mengidentifikasi halaman (atau sumber daya) mana yang dikunjungi bot dan berapa tarifnya.
Informasi ini akan memberi tahu Anda jika Googlebots secara berlebihan menelusuri bagian situs web Anda yang tidak penting untuk SEO, membuang anggaran yang dapat berguna untuk halaman lain.
Jenis analisis ini dapat digunakan untuk menyusun strategi penautan internal Anda, manajemen file robots.txt Anda, penggunaan tag meta yang menargetkan bot…

4. Mobile-First & migrasi

Beberapa tidak sabar untuk itu, yang lain takut akan hal itu, tetapi hari itu pasti akan datang ketika Anda akan menerima email dari Google yang menunjukkan bahwa situs web Anda telah dialihkan ke indeks mobile-first yang terkenal.
Anda dapat memprediksi kapan peralihan akan terjadi dengan mengikuti perubahan rasio antara klik Googlebot-desktop dan klik Googlebot-seluler .
Porsi perayapan oleh Googlebot seluler umumnya akan meningkat, memungkinkan Anda memprediksi dan merencanakan peralihan.
Di sisi lain, tidak melihat perubahan dalam rasio ini juga dapat menjadi indikasi signifikan dari kesesuaian situs web Anda dengan kriteria Google untuk beralih indeks.

Anda juga dapat memantau perubahan lain: migrasi (dari HTTP ke HTTPS , misalnya), atau modifikasi pada struktur situs web Anda .
Jika kita berkonsentrasi pada contoh pertama — pada modifikasi protokol yang digunakan — indeksasi URL aman dan pengalihan, serta “penolakan” progresif dari URL lama, dapat dengan mudah dipantau berkat log.
Memantau perubahan dalam kode status akan menjadi sekutu terbaik Anda!

5. Tetangga yang usil

Anda adalah SEO yang luar biasa dan upaya Anda telah membuahkan hasil!
Ini telah membangkitkan rasa ingin tahu pesaing Anda (dan orang usil lainnya) yang ingin memahami bagaimana Anda menariknya dan yang telah memutuskan untuk merayapi seluruh situs web Anda.
Ini buruk. Tapi tidak biasa (bahkan sebaliknya).
Tugas Anda sekarang adalah menemukan pengintai..
Yang paling halus dari mereka akan mencoba untuk melewatkan bot mereka sebagai Googlebots dengan menggunakan agen pengguna Google . Dan di sinilah alamat IP yang disimpan dalam log bisa sangat berguna.
Namun kenyataannya, Googlebots resmi hanya menggunakan rentang alamat IP yang terdokumentasi dengan baik. Google menyarankan webmaster untuk melakukan pencarian DNS terbalik untuk memverifikasi asal bot.
Jika tes ini gagal, hasil (atau hasil pelacakan geografis IP) dapat membantu Anda memutuskan apa yang harus dilakukan.
Sebagai catatan, pakar keamanan digital di Imperva Incapsula memimpin sebuah penelitian yang diterbitkan pada tahun 2016 yang menunjukkan bahwa 28,9% dari bandwidth yang dianalisis dikonsumsi oleh “bot yang buruk” (dibandingkan dengan 22,9% oleh “bot yang baik” dan 48,2% oleh pengguna ). Melihat log Anda dapat membantu Anda menghindari pengurasan sumber daya yang berlebihan dengan mendeteksi bot yang tidak diinginkan.