Help Không thấy bọn ROBOTS viếng thăm...

[Jindo_Katori]

Site của em trước giờ ngày nào bọn robots cũng viếng thăm 24/24 (tuy không nhiều nhưng lúc nào cũng có 1 em). Tự nhiên khoảng thời gian gần đây không thấy em nào. Trong khi bài viết thì mình rõ chăm viết rõ nhiều (có bài được nhiều view).
Vào google kiểm tra thì nó báo thế này (hình như là bị lỗi gì robots không đến nữa hay sao ấy).
Nhờ các bác sĩ khoa nội phẫu thuật, chẩn đoán chữa trị.

 

[Blue]

Bệnh nhân đâu, mẫu virus đâu, đưa cho bác sĩ xem nhé chú :v

 

[MacKen]

robot báo lỗi >>> xóa dòng lời coi thế nào

 

[Jindo_Katori]

Bệnh nhân đâu, mẫu virus đâu, đưa cho bác sĩ xem nhé chú :v

Đây bác: http://tuyhoaplus.com/
Định vào sửa lại bài viết mà không tùm thấy chỗ sữa nữa. Hết cho mem edit thread rồi hả xếp

robot báo lỗi >>> xóa dòng lời coi thế nào

Cái bản robots.txt này em đã đăng cách đây cả 1 năm rồi : http://vnxf.vn/tao-file-robots-txt-chuan-cho-xenforo.t40.html

Nên em nghĩ không phải do bản robots.txt này đâu

 

[THB]

Chắc thấy đổi link.
Cap nhật sitemap lại thử.

 

[Jindo_Katori]

Chắc thấy đổi link.
Cap nhật sitemap lại thử.

Em cập nhật bên google webmaster rồi xếp

 

[Blue]

À bữa anh chưa xem kỹ, file robots.txt như em ghi dòng crawl delay gì đó không đúng chuẩn nên nó báo lỗi, ngoài ra nó không phải là nguyên nhân google bot ít ghé thăm. Chỉ không ghé thăm khi cấm nó vào bằng dòng Disallow thôi.

 

[Hoàng Hải 229]

Bác bỏ mấy cái chặn bot này đi http://tuyhoaplus.com/robots.txt

User-agent: Baiduspider
Disallow: /

User-agent: YandexBot
Disallow: /

User-Agent: Wada.vn Vietnamese Search
Disallow: /

User-Agent: coccoc
Crawl-delay: 1

User-Agent: itim
Disallow: /

User-agent: bingbot
Crawl-delay: 1

 

[Blue]

Sr mình lại ko xem kỹ, toàn disallow, bỏ file luôn cho rồi...

 

[Jindo_Katori]

Không biết vì sao cái hình em up ở bài đầu tiên không mở xem to được.
Các bác chịu khó chọn "open new tab" nhìn cho rõ nhé
Còn phần nội dung robots.txt là em copy hướng dẫn trên google (bài nào thì không thể nhớ nổi) : mà em thấy bên mình hướng dẫn cũng toàn disallow không mà xếp ?
http://vnxf.vn/tao-file-robots-txt-chuan-cho-xenforo.t40.html (tiện thể mấy xếp cho màu link đậm lên xíu ạ, mờ mờ khó thấy quá)