Robots.txt İçerisinde Neler Bulunmalı?

Durumu:
Çevrimiçi

Location

admin
Katılım
8 Kas 2013
Mesajlar
10,752
Beğeniler
46
Favori Oyun
AoE
Meslek
Yazılım Mühendisi
Discord
#8372
İsim
-
Robots.txt sitenize giren botların nasıl hareket edeceğini belirten, onları yönelten bir dosyadır. Sitenize giren tüm botlara izin veren genel bir Wordpress robots.txt dosyası:


XML:
User-agent: *

Sitemap: https//www.siteadresi.com/sitemap.xml
User-agent: * Tüm botların girişine izin verir.
Disallow: /engellenen-link/ komutu ile botların sitenizde giriş yapmasını istemedğiniz sayfalara ekleyebilirsiniz örneğin admin paneli gibi.
 
Durumu:
Çevrimiçi

#Master

Üye
Katılım
19 Tem 2011
Mesajlar
4,071
Beğeniler
18
Favori Oyun
Meslek
FORUMEXE
Discord
İsim
Merthan Mu
Google robots.txt yi kaldiracağını soylemisti ne oldu o olay
 
Durumu:
Çevrimdışı

#Respect

Yönetici
Katılım
30 Eki 2012
Mesajlar
30,774
Beğeniler
12
Favori Oyun
Nostale
Meslek
Grafiker/Reklamcı
Discord
İsim
Teşekürler.
 
Durumu:
Çevrimiçi

HermeS♚

Asistan
Katılım
22 Eyl 2019
Mesajlar
27
Beğeniler
3
Favori Oyun
Meslek
YAZILIM
Discord
İsim
Yiğit Can
Teşekkürler
 
Durumu:
Çevrimiçi

Shydox

Asistan
Katılım
21 Eyl 2019
Mesajlar
57
Beğeniler
4
Favori Oyun
Meslek
Yazılımcı
Discord
İsim
Mücahit
Teşekkürler
 
Hakkımızda Türkiye'nin Lider Oyun Forumu Forumexe
2008 - 2019
Faydalı Linkler Çerez Politikası
Gizlilik Politikası
Hakkımızda
İletişim [email protected]
Üst Alt