gan url dicekal robot txt maksudnya apa? apa itu b...

gan url dicekal robot txt maksudnya apa? apa itu b...

	Subur Setyo 12:46pm Aug 12 gan url dicekal robot txt maksudnya apa? apa itu berpengaruh terhadap indeks google? terimkasih
	Ricky Pratama 11:52pm Aug 12 Maksudnya robot Google dilarang oleh robots.txt untuk merayapi URL-URL tersebut. Jika robots.txt melarang robot merayapi suatu halaman, maka tentu saja tidak akan masuk ke dalam indeks.
	Subur Setyo 12:16pm Aug 13 ric ky@untuk mengetahui url mana yang dicekal bagaimana ya mas? terimakash jwbannya mas