Local SEO indonesia
No. 10 · November 2026

← Index

Comparison · Issue · 12 menit

Log File Analysis SEO: Screaming Frog vs GoAccess

Log file analysis SEO untuk toko online: bandingkan Screaming Frog Log File Analyser, GoAccess, dan Crawl Stats GSC, plus cara verifikasi Googlebot asli.

Freemium · $0 Recommended 4.4 / 5 15 November 2026

Di production, kami tidak menebak

Di tim backend, ada satu kebiasaan yang ditanamkan sejak hari pertama: kalau ada yang aneh, jangan berdebat soal teori. Buka log, termasuk untuk log file analysis SEO. Log tidak punya opini. Ia hanya mencatat siapa yang datang, jam berapa, meminta apa, dan dibalas dengan kode apa.

Anehnya, di dunia SEO kebiasaan ini justru jarang dipakai. Pertanyaan seperti “kenapa halaman kategori baru belum terindeks?” atau “apakah Googlebot sudah melihat landing page 12.12 kita?” biasanya dijawab dengan tebakan, padahal jawabannya sudah tercatat di server. Itulah inti log file analysis SEO: membaca access log untuk melihat URL mana yang benar-benar dirayapi Googlebot, seberapa sering, dan respons apa yang ia terima.

Momennya pas. Pertengahan November, kampanye 11.11 baru lewat, dan banyak toko sedang menyiapkan halaman Harbolnas 12.12. Daripada menunggu sambil berharap, lebih baik pastikan dari log.

Di artikel ini saya membandingkan tiga alat:

  • Screaming Frog Log File Analyser: aplikasi desktop khusus analisis log untuk SEO.
  • GoAccess: penganalisis log open source yang berjalan di terminal dan bisa menghasilkan laporan HTML.
  • Laporan Crawl Stats di Google Search Console: data rayapan versi Google sendiri, gratis, tanpa perlu menyentuh server.

Di akhir artikel, rekomendasinya saya bedakan untuk toko di shared hosting dan toko di VPS, karena kondisi kedua lingkungan itu memang berbeda jauh.


Apa itu log file analysis SEO dan isi access log

Sebagian besar server web memakai format log yang disebut combined. Ini format bawaan Nginx dan format yang umum dipakai Apache di hosting cPanel. Satu baris log terlihat seperti ini:

66.249.66.1 - - [14/Nov/2026:10:01:02 +0700] "GET /produk/kopi-arabika HTTP/1.1" 200 5123 "-" "Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/130.0.0.0 Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"

Urutannya: IP klien, identitas dan user (biasanya -), waktu, request (metode, path, protokol), kode status, ukuran respons dalam byte, referer, lalu user-agent. IP di contoh di atas dipakai Google sendiri sebagai contoh di dokumentasi verifikasinya. Saya pakai ulang supaya mudah dicek.

Dari baris-baris seperti ini, ada lima pertanyaan yang bisa dijawab dengan pasti:

  1. URL mana yang paling sering dirayapi Googlebot, dan mana yang tidak pernah disentuh.
  2. Berapa banyak rayapan yang terbuang ke URL tak berguna: parameter ?add-to-cart=, ?orderby=, pencarian internal ?s=, atau halaman filter.
  3. Kode status apa yang diterima Googlebot: 200, 301, 404, atau 5xx.
  4. Kapan landing page baru pertama kali dirayapi.
  5. Apakah yang mengaku Googlebot memang Googlebot.

Poin kelima sering dilupakan, padahal paling penting. Kita bahas di section tersendiri.


Mengambil log: dari cPanel atau dari Nginx

Shared hosting dengan cPanel

Di cPanel, buka Metrics → Raw Access. Di sana Anda bisa mengunduh log akses mentah per domain dalam bentuk file terkompresi .gz. Di halaman yang sama biasanya ada opsi untuk mengarsipkan log ke folder home setiap kali statistik diproses. Aktifkan opsi ini. Di banyak shared hosting, log hanya disimpan dalam rentang waktu pendek, dan tanpa arsip Anda tidak punya data historis untuk dibandingkan.

Hosting murah di Indonesia, termasuk paket yang banyak dipakai UMKM Tangerang, hampir selalu memakai cPanel, tetapi retensi lognya bervariasi. Panel selain cPanel punya menu masing-masing, dan sebagian paket hosting murah tidak menyediakan log mentah sama sekali. Kalau menunya tidak ada, tanyakan langsung ke support hosting: “Apakah saya bisa mengunduh raw access log dalam format combined?”

VPS dengan Nginx

Di Debian atau Ubuntu, log Nginx biasanya ada di /var/log/nginx/access.log, dan logrotate memutarnya menjadi access.log.1, access.log.2.gz, dan seterusnya. File log itu umumnya hanya bisa dibaca root atau grup adm, jadi pakai sudo.

Ambil semua baris yang mengaku Googlebot, termasuk dari file yang sudah di-gzip, lalu tarik ke laptop:

# di server: gabungkan log aktif dan log rotasi, simpan baris yang mengaku Googlebot
sudo sh -c 'zcat -f /var/log/nginx/access.log*' | grep 'Googlebot' > ~/googlebot-mentah.log

# di laptop: unduh hasilnya
scp user@ip-vps-anda:~/googlebot-mentah.log ./

zcat -f membaca file .gz sekaligus file biasa, jadi log yang belum dikompres ikut terbaca.

Kalau Anda ingin log Googlebot terpisah sejak awal, Nginx bisa menulis log kedua secara kondisional. Taruh map di blok http, dan access_log tambahan di blok server situs Anda:

# di dalam blok http { ... }
map $http_user_agent $ua_googlebot {
    default      0;
    ~*googlebot  1;
}

# di dalam blok server { ... }, di samping access_log yang sudah ada
access_log /var/log/nginx/googlebot.log combined if=$ua_googlebot;

Jalankan sudo nginx -t untuk cek konfigurasi, lalu sudo systemctl reload nginx. Log utama tetap berjalan seperti biasa, dan googlebot.log hanya berisi baris yang user-agent-nya memuat “googlebot”. Jangan lupa tambahkan file ini ke konfigurasi logrotate supaya tidak membengkak.

Dua jebakan sebelum menganalisis

  • CDN di depan server. Kalau situs Anda di belakang Cloudflare atau CDN lain, permintaan yang dilayani dari cache CDN tidak pernah sampai ke server asal, jadi tidak tercatat di log Nginx. Selain itu, kolom IP di log bisa berisi IP CDN, bukan IP Googlebot, kecuali Anda sudah mengonfigurasi modul real_ip Nginx untuk membaca IP asli dari header CDN. Tanpa itu, verifikasi Googlebot di bawah akan selalu gagal.
  • Zona waktu. Log mencatat waktu server. Kalau server Anda di Singapura atau Eropa, sesuaikan saat membandingkan dengan jadwal publikasi atau data GSC.

Verifikasi Googlebot: jangan percaya user-agent

User-agent hanyalah string yang dikirim klien. Siapa pun bisa menulis “Googlebot” di sana, dan banyak scraper serta pemindai celah keamanan melakukannya supaya tidak diblokir. Di log toko WordPress, “Googlebot” palsu yang mengetuk wp-login.php atau xmlrpc.php itu pemandangan biasa.

Google menjelaskan cara verifikasi Googlebot di dokumentasi Search Central:

  1. Lakukan reverse DNS lookup pada IP dari log.
  2. Pastikan hostname-nya berakhiran googlebot.com, google.com, atau googleusercontent.com. Crawler umum seperti Googlebot biasanya ber-hostname crawl-...googlebot.com.
  3. Lakukan forward DNS lookup pada hostname tersebut, dan pastikan hasilnya kembali ke IP yang sama.

Langkah ketiga wajib. Pemilik IP bisa mengatur PTR record-nya sendiri menjadi apa saja, termasuk sesuatu yang mirip googlebot.com. Yang tidak bisa mereka palsukan adalah forward DNS di domain milik Google.

Secara manual, dengan contoh dari dokumentasi Google:

host 66.249.66.1
# 1.66.249.66.in-addr.arpa domain name pointer crawl-66-249-66-1.googlebot.com.

host crawl-66-249-66-1.googlebot.com
# crawl-66-249-66-1.googlebot.com has address 66.249.66.1

Untuk banyak IP, saya pakai skrip kecil ini. Butuh dig, yang di Ubuntu ada di paket dnsutils dan di macOS sudah terpasang:

#!/usr/bin/env bash
# verifikasi-googlebot.sh
# Pemakaian: ./verifikasi-googlebot.sh 66.249.66.1
# Output (dipisah tab): IP, STATUS, hostname
ip="$1"
ptr=$(dig +short -x "$ip" | head -n1 | sed 's/\.$//')

if [[ -z "$ptr" ]]; then
  printf '%s\tPALSU\t(tidak ada PTR)\n' "$ip"; exit 1
fi

case "$ptr" in
  *.googlebot.com|*.google.com|*.googleusercontent.com) ;;
  *) printf '%s\tPALSU\t%s\n' "$ip" "$ptr"; exit 1 ;;
esac

rr=A; [[ "$ip" == *:* ]] && rr=AAAA
if dig +short "$ptr" "$rr" | grep -qxF "$ip"; then
  printf '%s\tASLI\t%s\n' "$ip" "$ptr"
else
  printf '%s\tPALSU\t%s (forward DNS tidak cocok)\n' "$ip" "$ptr"; exit 1
fi

Lalu jalankan untuk semua IP unik, dan saring log hanya untuk IP yang lolos:

chmod +x verifikasi-googlebot.sh

# 1. IP unik yang mengaku Googlebot
awk '{print $1}' googlebot-mentah.log | sort -u > ip-kandidat.txt

# 2. Verifikasi satu per satu
while read -r ip; do ./verifikasi-googlebot.sh "$ip"; done < ip-kandidat.txt > hasil-verifikasi.tsv

# 3. Simpan hanya baris dari IP yang terverifikasi
awk -F'\t' '$2 == "ASLI" {print $1}' hasil-verifikasi.tsv > ip-asli.txt
awk 'NR==FNR {ok[$1]; next} $1 in ok' ip-asli.txt googlebot-mentah.log > googlebot-asli.log

Kalau IP-nya ribuan, DNS lookup satu per satu akan lambat. Alternatif yang juga didukung Google adalah mencocokkan IP dengan file googlebot.json, daftar rentang IP Googlebot yang dipublikasikan di dokumentasi Search Central. Unduh file itu, lalu:

#!/usr/bin/env python3
# cek_rentang.py
# Pemakaian: python3 cek_rentang.py googlebot.json < ip-kandidat.txt
import ipaddress
import json
import sys

with open(sys.argv[1]) as f:
    data = json.load(f)

jaringan = [
    ipaddress.ip_network(p.get("ipv4Prefix") or p.get("ipv6Prefix"))
    for p in data["prefixes"]
]

for baris in sys.stdin:
    ip = baris.strip()
    if not ip:
        continue
    alamat = ipaddress.ip_address(ip)
    status = "ASLI" if any(alamat in n for n in jaringan) else "BUKAN-GOOGLEBOT"
    print(f"{ip}\t{status}")

Daftar rentang IP itu diperbarui Google dari waktu ke waktu. Unduh ulang setiap kali analisis, jangan disimpan permanen.


Screaming Frog Log File Analyser: GUI khusus SEO

Gambaran

Log File Analyser adalah produk terpisah dari Screaming Frog SEO Spider, dengan lisensi sendiri. Aplikasinya berjalan di Windows, macOS, dan Linux. Anda membuat project, menyeret file log ke dalamnya (format umum seperti Apache dan Nginx combined, W3C/IIS, dan beberapa format load balancer serta CDN didukung), lalu aplikasi mengolahnya menjadi tab-tab yang sudah berorientasi SEO: URL, kode respons, user-agent, direktori, IP, dan event per waktu.

Yang membuatnya unggul untuk SEO

  • Verifikasi bot bawaan. Saat impor, aplikasi bisa memverifikasi bot mesin pencari lewat DNS dan memisahkan bot asli dari yang palsu. Pekerjaan yang di atas butuh skrip, di sini cukup satu centang di pengaturan project.
  • Perbandingan dengan data crawl. Anda bisa mengimpor hasil crawl SEO Spider atau daftar URL dari sitemap, lalu mencocokkannya dengan log. Hasilnya dua daftar yang sangat berguna: URL yang ada di situs tapi tidak pernah dirayapi Googlebot (misalnya halaman kategori yang tautan internalnya lemah), dan URL yang dirayapi Googlebot tapi tidak ada di crawl Anda (sering berupa URL lama, parameter, atau halaman yatim).
  • Dipisah per jenis bot. Googlebot Smartphone, Googlebot Desktop, dan bot lain bisa dilihat terpisah.

Kekurangan

  • Versi gratis sangat terbatas. Batasnya satu project dan sekitar 1.000 baris event log. Untuk toko kecil pun, seribu baris bisa habis dalam hitungan hari, tergantung ukuran situs dan seberapa aktif Googlebot. Versi gratis cocok untuk mencoba alur kerjanya, bukan untuk analisis bulanan.
  • Lisensi tahunan berbayar dalam pound sterling, terpisah dari lisensi SEO Spider. Cek harga terbaru di situs resminya sebelum memutuskan.
  • Berjalan di laptop. File log harus diunduh dulu. Untuk log berukuran gigabyte, impor bisa makan waktu dan memori.

Cocok untuk

Konsultan SEO atau pemilik toko yang sudah memakai SEO Spider dan ingin analisis log tanpa menulis perintah terminal sama sekali.


GoAccess: open source, cepat, tanpa basa-basi

Gambaran

GoAccess adalah penganalisis log web open source berlisensi MIT. Ia membaca format log umum, termasuk combined, dan menampilkan dashboard interaktif di terminal atau menghasilkan satu file laporan HTML mandiri. Panelnya mencakup URL yang paling sering diminta, permintaan file statis, URL yang mengembalikan 404, IP dan hostname pengunjung, sistem operasi, browser dan crawler, distribusi waktu, referer, dan kode status.

Pemasangannya sederhana:

# Debian / Ubuntu (versi di repositori distro bisa agak tertinggal)
sudo apt install goaccess

# macOS
brew install goaccess

Pakai GoAccess untuk analisis Googlebot

Untuk GoAccess Nginx, kuncinya adalah memberinya log yang sudah bersih, yaitu googlebot-asli.log dari langkah verifikasi:

goaccess googlebot-asli.log --log-format=COMBINED -o laporan-googlebot.html

Buka laporan-googlebot.html di browser. Panel URL sekarang menjawab “halaman mana yang paling sering dirayapi Googlebot”, dan panel 404 menunjukkan URL rusak yang terus diketuk Googlebot.

Ada juga opsi --crawlers-only. Opsi ini hanya menyaring berdasarkan user-agent dan mencampur semua bot, termasuk yang palsu, jadi menurut saya kurang tepat untuk analisis Googlebot. Ada pula mode --real-time-html untuk dashboard yang terus diperbarui. Kalau Anda memakainya, jangan taruh laporannya di folder web publik tanpa autentikasi, karena laporan itu berisi IP dan URL internal Anda.

Pertanyaan cepat langsung dari terminal

Kadang GoAccess pun terasa berlebihan. Untuk log combined, awk sudah cukup. Dengan memisahkan kolom berdasarkan tanda kutip, request ada di kolom kedua dan kode status di awal kolom ketiga:

# 20 URL yang paling sering dirayapi Googlebot terverifikasi
awk -F'"' '{split($2, r, " "); print r[2]}' googlebot-asli.log | sort | uniq -c | sort -rn | head -20

# Distribusi kode status yang diterima Googlebot
awk -F'"' '{split($3, s, " "); print s[1]}' googlebot-asli.log | sort | uniq -c | sort -rn

# Jumlah rayapan per hari
awk '{print substr($4, 2, 11)}' googlebot-asli.log | sort -t/ -k3,3n -k2,2M -k1,1n | uniq -c

# Berapa rayapan terbuang ke URL parameter umum WooCommerce dan pencarian internal
awk -F'"' '{split($2, r, " "); print r[2]}' googlebot-asli.log | grep -cE '[?&](add-to-cart|orderby|s)='

# Kapan landing page 12.12 pertama kali dirayapi (sesuaikan path-nya)
grep -m1 '"GET /promo-12-12' googlebot-asli.log

Kekurangan

  • Tidak ada verifikasi bot berbasis forward-confirmed DNS. Itu tugas Anda sebelum log masuk ke GoAccess.
  • Tidak ada fitur bawaan untuk membandingkan log dengan hasil crawl atau sitemap. Kalau perlu, Anda yang menulis skripnya.
  • Butuh kenyamanan dengan terminal.

Cocok untuk

Toko di VPS yang dikelola orang teknis, atau siapa pun yang ingin analisis log rutin tanpa biaya lisensi.


Crawl Stats Google Search Console: baseline gratis untuk semua orang

Laporan Crawl Stats Google Search Console ada di Setelan → Statistik crawling. Laporan ini hanya tersedia untuk properti tingkat root, yaitu properti domain atau properti awalan URL di root situs, bukan subfolder.

Isinya kira-kira 90 hari terakhir:

  • Total permintaan crawl, total ukuran unduhan, dan rata-rata waktu respons.
  • Status host: masalah pengambilan robots.txt, resolusi DNS, dan konektivitas server.
  • Rincian menurut respons (200, 301, 404, 5xx, dan lain-lain), menurut jenis file, menurut tujuan (penemuan URL baru atau refresh URL lama), dan menurut jenis Googlebot (smartphone, desktop, gambar, pemuatan resource halaman, dan lainnya).

Kelebihannya jelas: datanya dari Google sendiri, jadi tidak ada urusan bot palsu, CDN, atau akses server. Batasannya juga jelas. URL yang ditampilkan hanyalah contoh, bukan daftar lengkap. Anda tidak bisa menjawab pertanyaan seperti “berapa kali halaman kategori X dirayapi minggu lalu”. Untuk itu, Anda butuh log.

Cara saya memakainya: Crawl Stats sebagai alarm, log sebagai alat diagnosis. Kalau grafik respons 5xx naik atau rata-rata waktu respons melonjak, barulah buka log untuk mencari URL dan jam kejadiannya.


Perbandingan langsung

AspekScreaming Frog Log File AnalyserGoAccessCrawl Stats GSC
ModelAplikasi desktopOpen source, terminal dan HTMLLaporan web di GSC
BiayaGratis terbatas, lisensi tahunan berbayarGratisGratis
Butuh akses log serverYaYaTidak
Verifikasi GooglebotBawaan (DNS)Tidak, lakukan sendiriTidak perlu
Data per URL lengkapYaYaHanya contoh URL
Bandingkan dengan crawl atau sitemapYaTidak bawaanTidak
Rentang waktuSepanjang log yang Anda simpanSepanjang log yang Anda simpanSekitar 90 hari
Kurva belajarRendahSedang (terminal)Rendah
Bisa dijadwalkan otomatisTerbatasYa, lewat cronOtomatis dari Google

Pertanyaan Screaming Frog Log File Analyser vs GoAccess pada dasarnya soal siapa yang mengerjakan: aplikasinya, atau Anda. Screaming Frog mengemas verifikasi bot dan perbandingan crawl dalam GUI yang siap pakai. GoAccess memberi mesin yang cepat dan gratis, tapi logika SEO-nya Anda tulis sendiri.


Pilihan saya: shared hosting vs VPS

Toko di shared hosting (WordPress/WooCommerce di cPanel)

  1. Crawl Stats GSC sebagai baseline. Cek tiap minggu, terutama status host dan rincian respons.
  2. Aktifkan arsip Raw Access di cPanel supaya log tidak hilang.
  3. Screaming Frog Log File Analyser di laptop untuk analisis bulanan. Coba versi gratis dulu dengan sampel log. Kalau alur kerjanya terasa berguna dan seribu baris tidak cukup, baru pertimbangkan lisensi. Alasan saya memilih ini untuk shared hosting: biasanya tidak ada akses SSH yang layak, pemiliknya jarang nyaman di terminal, dan verifikasi bot bawaan menghemat satu langkah yang rawan salah.

Kalau Anda nyaman dengan terminal, GoAccess juga bisa dijalankan di laptop untuk log yang diunduh dari cPanel. Skrip verifikasi di atas tetap berlaku.

Toko di VPS dengan Nginx

  1. Log Googlebot terpisah lewat map dan access_log ... if= seperti contoh di atas.
  2. Skrip verifikasi plus GoAccess dijadwalkan lewat cron, misalnya seminggu sekali, menghasilkan laporan HTML yang disimpan di lokasi yang tidak publik.
  3. Crawl Stats GSC sebagai pembanding. Kalau angka di log Anda dan tren di GSC bergerak berlawanan arah, curigai CDN atau konfigurasi real_ip.
  4. Screaming Frog Log File Analyser opsional, untuk audit mendalam beberapa kali setahun ketika Anda butuh perbandingan log dengan hasil crawl.

Toko di Shopify atau platform hosted

Anda tidak memegang log server. Andalkan Crawl Stats dan URL Inspection di GSC. Itu sudah cukup untuk menangkap masalah besar.


Kesimpulan

Log file analysis SEO bukan pekerjaan eksotis untuk situs raksasa. Ini kebiasaan sederhana yang dipinjam dari dunia engineering: sebelum menyimpulkan, lihat datanya. Untuk toko online, datanya menjawab hal-hal yang sangat praktis, misalnya apakah halaman promo sudah dirayapi, apakah Googlebot sibuk di URL ?add-to-cart=, dan apakah ada error yang hanya dialami bot.

Ringkasnya:

  • Crawl Stats GSC: wajib untuk semua, gratis, dan jadi alarm pertama.
  • Screaming Frog Log File Analyser: pilihan terbaik untuk shared hosting dan untuk yang ingin GUI dengan verifikasi bot bawaan.
  • GoAccess: pilihan terbaik untuk VPS, gratis, dan mudah diotomatisasi, asal verifikasi Googlebot Anda kerjakan sendiri.

Untuk konteks lebih luas, baca juga Page Speed Insights vs GTmetrix untuk toko lokal dan filter query lokal di Search Console, karena kecepatan respons server dan data GSC saling melengkapi dengan temuan di log.

Dan apa pun alatnya, satu aturan tidak bisa ditawar: verifikasi dulu bahwa Googlebot itu asli. Analisis yang dibangun di atas user-agent palsu hanya akan memberi Anda kesimpulan yang salah dengan rasa yakin yang tinggi.


FAQ

Apakah Screaming Frog Log File Analyser gratis atau berbayar, dan bagaimana GoAccess Nginx?

Screaming Frog Log File Analyser punya versi gratis yang dibatasi satu project dan sekitar 1.000 baris event log, sedangkan versi tanpa batas memakai lisensi tahunan berbayar. GoAccess sepenuhnya gratis dan open source. Untuk GoAccess Nginx, cukup arahkan ke access log format combined, idealnya log Googlebot yang sudah diverifikasi, lalu hasilkan laporan HTML dengan satu perintah.

Apakah toko online kecil perlu log file analysis SEO?

Perlu, tapi bukan karena crawl budget. Dokumentasi Google tentang pengelolaan crawl budget ditujukan terutama untuk situs sangat besar (sekitar sejuta halaman unik ke atas) atau situs menengah (sekitar 10 ribu halaman ke atas) yang isinya berubah sangat cepat. Toko dengan ratusan atau beberapa ribu produk umumnya tidak berada di kategori itu. Manfaat log untuk toko kecil lebih praktis: menemukan URL yang membuang jatah rayapan seperti parameter add-to-cart, sorting, dan pencarian internal, melihat error 404 dan 5xx yang dialami Googlebot, dan memastikan halaman kategori atau landing page promo yang baru benar-benar sudah dirayapi sebelum Anda bertanya-tanya kenapa belum terindeks.

Kenapa harus verifikasi Googlebot? Bukankah user-agent-nya sudah tertulis Googlebot?

User-agent hanyalah teks yang dikirim oleh klien, dan siapa pun bisa memalsukannya. Scraper, bot SEO, dan pemindai celah keamanan sering menyamar sebagai Googlebot supaya tidak diblokir. Kalau baris palsu ini ikut dihitung, analisis Anda bisa menyimpulkan Googlebot rajin merayapi wp-login.php atau URL aneh lainnya. Cara verifikasi yang dijelaskan Google: lakukan reverse DNS pada IP, pastikan hostnamenya berakhiran googlebot.com, google.com, atau googleusercontent.com, lalu lakukan forward DNS pada hostname itu dan pastikan hasilnya kembali ke IP yang sama. Alternatifnya, cocokkan IP dengan daftar rentang IP Googlebot dalam format JSON yang dipublikasikan Google.

Toko saya di Shopify atau marketplace, tidak ada akses log server. Lalu bagaimana?

Platform hosted seperti Shopify umumnya tidak memberi akses ke log server mentah, dan halaman toko di marketplace jelas di luar kendali Anda. Untuk kasus ini, laporan Crawl Stats di Google Search Console adalah sumber data rayapan terbaik yang tersedia: total permintaan, rincian kode respons, jenis file, jenis Googlebot, dan status host selama sekitar 90 hari terakhir. Lengkapi dengan URL Inspection untuk mengecek kapan sebuah URL terakhir dirayapi. Datanya berupa ringkasan dan contoh URL, bukan daftar lengkap, tapi cukup untuk menangkap lonjakan error atau penurunan rayapan.

Tools dibahas: Screaming Frog Log File Analyser · GoAccess · Google Search Console · Nginx

/related/

Comparison lain

3 review
№ 01
Freemium Conditional

Sebelum data GSC 16 bulan hilang: 3 tool laporan SEO tahunan klien

Laporan SEO tahunan untuk klien lokal hanya sekuat arsip datanya. Google Search Console cuma menyimpan sekitar 16 bulan, jadi di akhir November 2026 data sebelum kira-kira Agustus 2025 sudah tidak bisa dibuka. Saya menguji AgencyAnalytics, DashThis, dan Looker Studio untuk rekap year-over-year: perbandingan YoY, penyimpanan data historis, waktu setup, dan keterbacaan bagi pemilik usaha.

№ 02
Freemium Recommended

Kompres gambar website: Squoosh vs TinyPNG vs ShortPixel vs Imagify

Uji empat tool untuk kompres gambar website: Squoosh, TinyPNG, ShortPixel, Imagify. Satu pick untuk unggah manual, plugin WordPress, dan situs non-WordPress.

№ 03
Freemium Conditional

Aplikasi booking barbershop: Fresha, Booksy, atau WA di Maps?

Aplikasi booking barbershop untuk Serpong: bandingkan link WhatsApp, Fresha/Booksy, dan Reserve with Google dari biaya, data, dan beban kasir.


← All reviews Comparison archive