Tutorial pemakaian Robotxt

Robottxt adalah file text yang digunakan di webhosting untuk mengatur mana folder atau bagian dari website yang boleh dan tidak boleh diakses oleh Mesin pencari.  Robottxt sangat bermanfaat untuk menjaga conent content sensitif muncul di hasil pencarian.

Contoh real adalah kita tidak membolehkan Crawler mesin pencari untuk mengakses folder admin, atau mengakses folder digital content yang kita jual semisal ebook, software atau lagu. Untuk membuat robot.txt kita cukup menggunakan sembarang editor seperti notepad dan harus diletaka di root direktori webserver. Sebagai contoh, anda punya website www.coolweb.com, maka robot.txt harus diletakan di www.coolweb.com/robot.txt.

Web Crawler/bot itu apa?

Web Crawler atau robot adalah software yang bertugas mengumpulkan dan mengambil isi sebuah website. sofware jenis inid sebut web crawler atau robot; singkatnya di sebut Bot. Di internet, robot robot ini berkeliaran kesuluruh penjuru website. Bukan hanya mesin pencari seperti Google yang mempunyai boot, tapi juga para spammer, atau Email harvester dari spammer yang mengumpulkan email juga tergolong bot. Untuk selanjutnya kita akan menyebut Web Crawler dengan Bot.

Dari sini kita bisa tahu bahwa tidak setiap pengunjung website kita adalah manusia, sebagian lagi robot, Robot yang berkeliaran diinternet juga banyak, Database robot bisa anda akses di http://www.robotstxt.org/db.html.

Aturan penulisan di robottxt pun sangat mudah dipahami. Berikut ini saya beri contoh dari isi robot.txt

Semua Bot boleh mengakses seluruh file/halaman di website

User-agent: *
Disallow:

Semua Bot tidak diperbolehkan mengakses seluruh website

User-agent: *
Disallow: /

Memblokir  Akas Boot  untuk direktori tertentu

User-agent: *
Disallow: /cgi-bin/
Disallow: /admin/
Disallow: /upload/

Bot tidak boleh mengakses isi folder kecuali file tertentu

User-agent: *
Disallow: /upload/
Allow: /upload/logo.jpg

Blokir Robot tertentu

contoh ini dipakai untuk memblokir Googlebot mengakses folder /download/. Aturan ini hanya memblokir Google
saja, artinya Bot yang lain tetap bisa mengaksesnya.

User-agent: GoogleBot
Disallow: /download/

Pertanyaan selanjutnya, apakah cara diatas bisa mengamankan file penting kita dari Bot? tentu tidak, semau itu hanya aturan saja, untuk mesin pencari besar seperti Bing dan Google, aturan diatas akan dipatuhi, namun bagi para spammer dan pengumpul email biasany akan mengabaikannya. Makanya cara diatas bukanlah cara untuk mengamankan data penting. Cara untuk mengamankan folder di webserver bisa menggunakan htacess yang akan saya bahas setelah artikel ini.

Referensi

  1. http://www.feedthebot.com/robottxt.html
  2. http://www.robotstxt.org/robotstxt.html
  3. http://en.wikipedia.org/wiki/Robots_exclusion_standard

Review Tablet Lenovo IdeaTab A1000

Mencari tablet berkualitas dan murah itu gampang gampang susah. Kemarin, saya ingin sekali membeli Asus HD7 yang speknya tinggi, branded dan harga nyaman dikantong, tapi ternyata produk ini tidak beredar di indonesia.
Akhirnya saya memutuskan untuk membeli Tablet dari Lenovo, Tablet ini bernama IdeaTab A1000, Tidak disangka dan diduga, toko komputer yang saya kunjungi mengatakan kalo stoknya kosong/habis. Wah berarti nih barang bagus, akhirnya saya bisa mendapatkan produk ini di Jogjatronik dengan harga Rp 1.425,000. Harga ini cukup mahal karena dipasaran harusnya sekitar 1.325-1.375 tapi namanya produk langka otomatis harga terkerek juga.

Lenovo Ideatab A1000
Lenovo Ideatab A1000

Spesifikasi Teknis

Saya sudah mengunjungi website gsmarena.com dan tabloidpulsa.co.id serta situs resmi lenovo, ketiga tiganya banyak perbedaan yang cukup mencolok. Misal katanya tidak mendukung GSM, tidak ada radio ukuran memori ada yang bilang 400M ada yang bilang 4GB dan informasi ga jelas bersliweran.

Biar anda juga tidak bingung, silahkan klik informasi resmi dari Lenovo. Namun ternyata disitus lenovo itu juga speknya kurang lengkap dan sedikit berbeda dengan yang dipasar indonesia, atau minimal yang saya beli. Berikut ini spek yang benar berdasarkan tablet ideatab yang saya beli.

  1. Prosesor DualCore 1.2Ghz
  2. Memori 1GB
  3. Dolby sound stereo
  4. Layar HD, enak buat nonton Youtube
  5. Ada Radio FM
  6. ada Slot SDCard
  7. ada slot SIMCard GSM untuk telpon dan SMS (hanya 2G)
  8. Camera depan 0.3M VGA
  9. android jellybean 4.1.2
  10. Ada GPS sensor

Catatan tambahan :

Dalam spesifikasinya, Memori memang 4GB namun memori ini terpartisi menjadi dua bagian yaitu sistem dan USB Storage. Partisi system yang bisa dipakai oleh user hanya 400-an MB sedangkan partisi Penyimpana USBnya 2GB. Jika kurang silahkan tambah SDCard.

Tablet bisa dipakai untuk telpon dan SMS. Internetan menggunakan jalur GSM juga bisa tapi cuma mamakai Jalur EDGE. Lambat, tapi cukup buat chating atau browsing website. Kalau mau cepet, gunakan jalur Wifi.

Kelebihan

Yang saya suka dari tablet ini adalah layarnya cerah (Resolusi HD) dan enak buat nonton Video. Suara sound systemnya mantap dengan dukungan dolby audio. Dan yang bikin saya kaget ada GSMnya bro. Ini benar benar ga nyangka, soalnya hampir sebagian besar website menyatakan bahwa A1000 ini tidak mendukung simcard /GSM.

Kekurangan

Kekurangan dari Tablet ini adalah :

  1. TIdak ada camera belakang, hanya camera depan resolusi 0.3M VGA, gelap banget bro. Gambar ga jelas
  2. TIdak support 3G. Nah ini speknya nanggung banget, sudah ada GSM tapi ga bisa 3G.
  3. Media penyimpan kecil, space yang bisa dipakai cuma 400MB, jadi kalau kita banyak install aplikasi, harus di move ke SDcard/Penyimpanan USB.
  4. Tidak support BBM, waduh ini yang gue ga nyangka, padahal katanya BBM support android 4.0 keatas, tapi kenyataanya waktu mau install BBM ga bisa. Semoga kedepannya bisa deh, masih berharap.

Kesimpulan

Bagi yang punya dana terbatas tapi ingin mendapatkan tablet branded dengan dukungan Telpon/SMS, maka A1000 adalah pilihan yang tepat. Namun bagi yang tidak puas dengan ‘kekurangan’ yang ada, maka kekurangan itu bisa diatasi jika anda membeli ‘kakak’ dari tablet ini yaitu IdeaTab A3000 dengan harga 2.1jutaan.  Namun sekali lagi, tanyakan kepada pihak penjual untuk memastikan kebenaran spesifikasinya :).