<p><strong>Mencegah Website Terindeks Search Engine &#8211; </strong>Pada tutorial kali ini saya akan memberikan tutorial tentang bagaimana cara mencegah website terindeks search engine. Karena sesuatu hal terkadang kita ingin agar website kita tidak terindex oleh google atau mesin pencari lainnya yaitu dengan membuat file robots.txt. Hal ini diperlukan misalnya ketika kita sedang dalam proses pembuatan website, atau karena ingin menyembunyikan folder/file tertentu agar orang lain tidak bisa menemukannya melalui mesin pencari.</p>
<p>Cara ini bisa anda gunakan untuk anda pengguna <a href="https://www.tutorialpedia.net/cara-install-ssl-di-wordpress-melalui-cpanel/" target="_blank" rel="noopener">wordpress</a> maupun platform blog lainnya seperti blogger, joomla dsb. Karena untuk mencegah website terindeks search engine kita hanya perlu mengubah script di robots.txt. Yang mana robots txt ini tersedia disemua platform blog karena robots tersebut merupakan aturan dasar yang diterapkan oleh google untuk para blogger yang ingin menampilkan situs mereka di mesin pencari. Tidak hanya google, mesin pencari yang lain seperti BING, YAHOO pun menerapkan hal yang sama.
<div class="wpcd-coupon wpcd-coupon-default wpcd-coupon-id-6441" >
 <div class="wpcd-col-1-8">
 <div class="wpcd-coupon-discount-text">
			Free $10 </div>
		 <div class="coupon-type">
				Coupon </div>
		 </div>
 <div class="wpcd-coupon-content wpcd-col-7-8">
 <div class="wpcd-coupon-header">
 <div class="wpcd-col-3-4">
										<h1 class="wpcd-coupon-title">
							<a href="https://www.tutorialpedia.net/go/vultr" target="_blank" rel="nofollow">Free $10 Vultr</a>
 		</h1>
					 </div>
 <div class="wpcd-col-1-4">
				 <div class="wpcd-coupon-code">
 <a rel="nofollow" href="https://www.tutorialpedia.net/go/vultr"
 class="wpcd-btn-6441 masterTooltip wpcd-btn wpcd-coupon-button"
 target="_blank"
 title=""
 data-clipboard-text="CLICK TO OPEN">
 <span class="wpcd_coupon_icon">
 	<img class="" src="https://www.tutorialpedia.net/wp-content/plugins/wp-coupons-and-deals/assets/img/coupon-code-24.png" style="width: 100%;height: 100%;" >
 </span>

 CLICK TO OPEN </a>
 </div>

					 </div>

 </div>
 <div class="wpcd-extra-content">
 <div class="wpcd-col-3-4">
 <div class="wpcd-coupon-description">
 <span class="wpcd-full-description"><p>Gratis $100 dollar dari vultr jika anda mendaftar menggunakan link berikut ini. Syarat minimal anda melakukan top up minimal $10 dan saldo anda menjadi $20</p></span>
 <span class="wpcd-short-description"></span>
 </div>
 </div>
 <div class="wpcd-col-1-4">
				 <div class="wpcd-coupon-expire">
								Doesn't expire </div>
						 </div>
 </div>
 </div>
 <script type="text/javascript">
		window.addEventListener('DOMContentLoaded', function() {
			var clip = new ClipboardJS('.wpcd-btn-6441');
		});

 </script>
 <div class="clearfix"></div>
 </div>


<h2><strong>Mencegah Website Terindeks Search Engine</strong></h2>
<p>Caranya anda buat file robots.txt di root folder website anda dan isi dengan command sesuai keinginan anda, sebagai contoh:<br />
1. Command ini berfungsi untuk mencegah semua jenis bot (program) dari mesin pencari untuk mengindex semua file anda (root dan turunannya).</p>
<pre class="lang:default decode:true ">User-agent: * 
Disallow: /</pre>
<p>2. Command ini berarti mencegah semua jenis bot mesin pencari untuk mengindex semua file yang berada di folder administration</p>
<pre class="lang:default decode:true ">User-agent: * 
Disallow: /administration/</pre>
<p>3. Command ini berarti mencegah bot dari google ntuk mengindex semua file anda (root dan turunannya).</p>
<pre class="lang:default decode:true ">User-Agent: googlebot 
Disallow: / 
</pre>
<p>4. Command ini berarti mencegah bot dari google ntuk mengindex semua file gambar anda (root dan turunannya).</p>
<pre class="lang:default decode:true ">User-agent: Googlebot-Image 
Disallow: /</pre>
<p>5. Command ini berarti mencegah semua jenis bot mesin pencari kecuali google untuk mengindex semua file yang berada di folder root dan turunannya, bot dari google boleh mengindex kecuali untuk folder cgi-bin dan privatedir</p>
<pre class="lang:default decode:true ">User-agent: * 
Disallow: / 
User-agent: Googlebot 
Disallow: /cgi-bin/ 
Disallow: /privatedir/</pre>
<p>6. Command ini berarti mencegah semua jenis bot mesin pencari untuk mengindex semua file yang berada di folder root dan turunannya, tetapi utk bot alexa (ia_archiver) diperbolehkan, karena disallow nya dikosongkan yang fungsinya spt tombol on/off</p>
<pre class="lang:default decode:true ">User-agent: * 
Disallow: / 
User-agent: ia_archiver 
Disallow:</pre>
<p>Dari beberapa <em>command </em>diatas, anda bisa gunakan salah satu yang sesuai dengan keinginan anda.</p>
<p>Demikian tutorial singkat <strong>Mencegah Website Terindeks Search Engine. </strong>Jika ada yang ingin ditanyakan silahkan tinggalkan komentar dibawah ini.</p>

Mencegah Website Terindeks Search Engine
Recent Articles
Kumpulan DNS Gratis Tercepat!
DNS merupakan sebuah sistem yang bertugas menyimpan semua informasi data domain dalam jaringan. Dengan adanya DNS, domain atau hostname yang ada akan ditranslate dan...
Apa itu DNS ? Dan Fungsinya
Apa itu DNS? - DNS (Domain Name System) adalah sebuah sistem yang bertugas menyimpan semua informasi data domain dalam jaringan. Dengan adanya DNS, domain...
Apa itu OLT ? Serta Fungsinya Dalam Jaringan
Apa itu olt ? OLT (Optical Line Termination) adalah perangkat keras yang berfungsi sebagai titik akhir (end-point) dari layanan jaringan optik pasif (Passive Optical...
Template Voucher Untuk Mixradius
Template Voucher Untuk Mixradius - Pasti kalian bosen kan dengan template voucher default mixradius? tenang. kali ini saya akan memberikan template untuk voucher mixradius kamu agar...
Daftar Port Game Online Mikrotik Terbaru
Daftar port game online dibawah ini bisa digunakan untuk membuat rule agar koneksi ke game online tersebut bisa lancar, bisa juga untuk memisahkan antara...
