[ HELP ] Bantu ane Mastah : Blog gak bisa di-crawl, problem robot.txt

Salam blogging ...

Ijin buka trit om admin, tolong kalo salah kamar jangan di banned y, ditunjukin aja jalan yg benar kemana.

langsung deh,

Blog ane beberapa hari terakhir down, visitor nya jatuh berkali lipat. pas ane coba liat laporan di google webmaster tools ternyata ada pemberitahuan bahwa google mencoba meng-crawl blog ane, tapi terjadi masalah denga robot.txt ... padahal selama ini ane gak pernah gangguin blog itu lagi.

Lebih detil, begini laporan / message :
View attachment 36875
trus ...

View attachment 36877


mohon bantuannya apa yg harus ane lakukan untuk mengatasi masalah ini ...
mungkin ada kawan2 mastah yg pernah mengalami atau paham dgn masalah kek begini

pliss HELP ME !!!

Saya ucaplam terima kasih, semoga bantuannya terbalas dgn balasan setimpal.

 

di fetch as google bot aja gan.. tar juga normal lagi.. kemungkinan bot dateng waktu blog agan down..

 

hapus dari webmaster, kembalikan ke versi cepotnya, kemudian Set ulang DNS domain, kemudian daftar ulang di webmaster
Nih dari pengalama ane doang yah

 

dulu ane pernah kayak gini gan, cuma gak separah agan sampai satu site kayak gitu. Cuma beberapa post aja yang gagal crawl. Setelah ane cek, ternyata permasalahan ada di pihak hostingan. Mereka make semacam "word filtering", jadi jika ada beberapa kata yang tidak di ijinkan, maka langsung kode akses forbidden dah...:capedeh. Di fetch as google juga sama aja, post ane tetep gak bisa di crawl. Solusinya ane pindah hosting aja, huehehehehe..
coba agan cek lagi ke pihak hosting, siapa tahu ada pencerahan.

Terus yang masalah structured data, cek aja postingan ini.
hxxp://fivera.net/hatom-feed-hatom-entry-error-wordpress-solution/
ikuting langkahnya satu2, dijamin langsung tuh beres tuh structured data.