Kalau seandainya saja saya tahu,  kapan bot mesin pencari datang ke blog nyonge Belajar Ngeblog ini untuk silaturahmi. Tentunya Oka Mahendra akan jamu si mr bot itu sebaik-baiknya hehe dan meminta si mr bot itu menginap barang sehari saja di blog okamahendra.com ini

Seperti yang kita tau crawl yang dilakukan bot search engine ke blog kita sangatlah cepat untuk setiap kedatangannya. Oleh karena itu kita harus benar2 memanfaatkan waktu yang singkat itu untuk mengarahkan bot mesin pencari meng_crawl data2 penting dari blog kita. Ini bisa dilakukan salah satunya dengan memodifikasi file robot.txt. (more…)