Phân tích log file: Googlebot thu thập trang nào
Tải lên access log (nginx, Apache): đếm lượt bot Google, Bing, bot AI theo ngày, trang được thu thập nhiều nhất, mã lỗi bot gặp. Xử lý trên trình duyệt.
Miễn phí, dùng ngayHướng dẫn
Thả tệp access.logĐịnh dạng combined của nginx hoặc Apache. Tệp đọc trên máy bạn, không tải lên.
Phân tích log máy chủ hoạt động thế nào
Log máy chủ là nguồn sự thật về việc bot đã vào những đâu. Công cụ đọc định dạng combined (nginx/Apache), nhận diện bot theo user-agent, và cho biết bot đang tốn lượt vào trang nào, gặp bao nhiêu lỗi 4xx/5xx.
Nguồn dữ liệu: Tệp log người dùng tải lên, xử lý cục bộ.
Cách dùng
- Tải tệp access.log (hoặc .log, .txt, tối đa khoảng 200 MB) từ máy chủ.
- Kéo thả vào ô.
- Xem biểu đồ lượt bot theo ngày và bảng trang được thu thập.
- Lọc theo bot và mã trạng thái.
Câu hỏi thường gặp
Log có bị gửi lên máy chủ ALODEV không?
Không. Tệp được đọc ngay trong trình duyệt. Log chứa IP người dùng nên không nên tải lên dịch vụ lạ.
Làm sao biết đó là Googlebot thật?
User-agent có thể giả. Muốn chắc cần tra ngược DNS của IP (googlebot.com). Công cụ đánh dấu bot theo user-agent và ghi rõ điều này.