Bagaimana Cara Custom robots.txt di Blogspot? Apa itu robots.txt? Mungkin bagi seorang newbie atau blogger baru belum tau tentang robot.txt Ok deh langsung ja Robot.txt dapat membantu perayapan robot pada blog yang kita miliki dan membantu indexing blog kita, maka dari itu menggunakan robot yang baik akan membantu index blog kita dan di google dapat melakukan berbagai macam kostumisasi perintah untuk mengizinkan/tidak mengizinkan robot crawler search engine melakukan crawl terhadap direktori atau halaman tertentu. Sehingga robots.txt merupakan bagian penting di salam sebuah struktur web.
Berikut ini Cara Membuat atau Custom robots.txt di Blogspot
1.Pergi ke dashboard > settings > search preferences > crawlers and indexing > custom robots.txt
2.Lalu kemudian klik edit lalu klik yes
3.Setalah itu isikan kode perintah robot.txt
User-agent: Mediapartners-Google4.Save !
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap: http://dedepurnama.blogspot.com/feeds/posts/default?orderby=updated
Semoga bermanfaat....
Tidak ada komentar:
Posting Komentar