Kalau seandainya saja saya tahu, kapan bot mesin pencari datang ke blog nyonge Belajar Ngeblog ini untuk silaturahmi. Tentunya Oka Mahendra akan jamu si mr bot itu sebaik-baiknya hehe dan meminta si mr bot itu menginap barang sehari saja di blog okamahendra.com ini 😀
Seperti yang kita tau crawl yang dilakukan bot search engine ke blog kita sangatlah cepat untuk setiap kedatangannya. Oleh karena itu kita harus benar2 memanfaatkan waktu yang singkat itu untuk mengarahkan bot mesin pencari meng_crawl data2 penting dari blog kita. Ini bisa dilakukan salah satunya dengan memodifikasi file robot.txt.
Modifikasinya akan coba saya buat diartikel berikutnya hehe sementara masih dalam persiapan dulu. Dan perlu kita ingat, harus sering2lah mengupdate blog kita, supaya si mr bot tidak bosan-bosan mendatangi blog kita.
Kayanya modif robot.txt-nya buat wp user nih 🙂
hehe, wp dulu ya om, sesuai platform blog ini
Yah, cuma intro
sampeyan buat artikelnya dulu donk mas, nanti aku jd dapet inspirasi hehe