XtGem Forum catalog
image Like our facebook Fan Page
News: Xtgem Wapmaster Good news hindi sms grabber script Click here

22-12-2024 11:29:58 am

Best High Speed Play Store
Free Calling World Wide!
funmaza
Forum
*Post reply · Invite friends · From end
* Trick765 Make Effective Use of robots.txt


A "robots.txt" file tells search engines whether they can access and therefore crawl parts of your site. This file, which must be named "robots.txt", is placed in the root directory of your site.


img


imgindex


imgrobots.txt


The data inside robot.txt looks like this


User-agent: *
disallow: /images/
disallow: /search



All compliant search engine bots (denoted by the wildcard * symbol) shouldn't access and crawl the content under /images/ or any URL whose path begins with /search. You may not want certain pages of your site crawled because they might not be useful to users if found in a search engine's search results.


imgTip to Create Good robots.txt


Use more secure methods for sensitive content- You shouldn't feel comfortable using robots.txt to block sensitive or confidential material. One reason is that search engines could still reference the URLs you block (showing just the URL, no title or snippet) if there happen to be links to those URLs somewhere on the Internet (like referrer logs). Also, non-compliant or rogue search engines that don't acknowledge the Robots Exclusion Standard could disobey the instructions of your robots.txt. Finally, a curious user could examine the directories or subdirectories in your robots.txt file and guess the URL of the content that you don't want seen. Encrypting the content or password-protecting it with .htaccess are more secure alternatives.
2014-03-13 05:14 (edited 2014-03-13 09:05 by Trick765 ) · Reply · (0)
dukun pesugihan asli * Trick765 ASSALAMUALAIKUM SALAM SAYA YANTI DI MALAYSIA
Maaf sebelumnya jika lewat Tempat ini saya menceritakan kisah hidup saya niat saya hanyalah semata ingin berbagi tapi semua tergantung Anda percaya atau tidak yg jelasnya inilah kenyataannya...
Syukur alhamdulillah kini saya bisa menghirup udara segar di indonesia karnah sudah sekian lama saya ingin pulang ke kampung halaman namun tak bisa karna ada hutang yang harus saya bayar di majikan yaitu 370 juta untuk uang indo namun,saya tidak pusing lagi sebab kemaring saya di berikan Info oleh seseorang yang tidak saya kenal,katanya kalau mengalami kesulitan Ekonomi,Terlilit hutang silahkan minta bantuan sama NYAI RONGGENG di Nomor Telpon ( +6285286344499 ) di jamin bantuan beliau 100% …
BANTUAN DARI NYAI RONGGENG
1.PESUGIHAN
2.TOGEL
3. DANAH GHAIB
4.PENGGANDAAN UANG
5.UANG BALIK
6.PEMIKAT
7.PENGLARIS BISNIS (Jualan,Tokoh,warung)
8.PERLANJAR DALAM BERBAGAI HAL
Jadi saya beranikan diri menghubungi beliau dan menyampaikan semua masalah saya dan alhamdulillah saya bisa di bantu,kini semua hutang saya sama majikan di Saudi semua bisa terlunasi dan punya modal untuk pulang kampung,,,,
Jadi buat yang pengen seperti saya silahkan Hubungi NYAI RONGGENG di nomor (-085-286-344-499-) Anda tidak usah ragu akan adanya penipuan atau hal semacamnya sebab saya dan yg lainnya sudah membuktikan keampuhan bantuan beliau kini giliran Anda trimahkasi…ATAU KLIK DI SINI
http://pesugihanuanggaibsakti.blogspot.co.id/
2018-03-17 22:37 · Reply · (0)
dukun pesugihan asli * Trick765 ASSALAMUALAIKUM SALAM SAYA YANTI DI MALAYSIA
Maaf sebelumnya jika lewat Tempat ini saya menceritakan kisah hidup saya niat saya hanyalah semata ingin berbagi tapi semua tergantung Anda percaya atau tidak yg jelasnya inilah kenyataannya...
Syukur alhamdulillah kini saya bisa menghirup udara segar di indonesia karnah sudah sekian lama saya ingin pulang ke kampung halaman namun tak bisa karna ada hutang yang harus saya bayar di majikan yaitu 370 juta untuk uang indo namun,saya tidak pusing lagi sebab kemaring saya di berikan Info oleh seseorang yang tidak saya kenal,katanya kalau mengalami kesulitan Ekonomi,Terlilit hutang silahkan minta bantuan sama NYAI RONGGENG di Nomor Telpon ( +6285286344499 ) di jamin bantuan beliau 100% …
BANTUAN DARI NYAI RONGGENG
1.PESUGIHAN
2.TOGEL
3. DANAH GHAIB
4.PENGGANDAAN UANG
5.UANG BALIK
6.PEMIKAT
7.PENGLARIS BISNIS (Jualan,Tokoh,warung)
8.PERLANJAR DALAM BERBAGAI HAL
Jadi saya beranikan diri menghubungi beliau dan menyampaikan semua masalah saya dan alhamdulillah saya bisa di bantu,kini semua hutang saya sama majikan di Saudi semua bisa terlunasi dan punya modal untuk pulang kampung,,,,
Jadi buat yang pengen seperti saya silahkan Hubungi NYAI RONGGENG di nomor (-085-286-344-499-) Anda tidak usah ragu akan adanya penipuan atau hal semacamnya sebab saya dan yg lainnya sudah membuktikan keampuhan bantuan beliau kini giliran Anda trimahkasi…ATAU KLIK DI SINI
http://pesugihanuanggaibsakti.blogspot.co.id/
2018-03-17 22:41 · Reply · (0)

Online: Guests: 1