Robots.txt (Tüm siteler için) Robots.txt Oluşturma?

Konu

#1
Robots.txt nedir? Robots.txt google panelde google ye sitemiz hakkında yol gosteren rehberdir.

bakıyorum sankı her sıtenın her yazılımın ayrı Robots.txt si varmıs gibi anlatımlar mevcut. arkadaslar bu ısın mantıgı soyle.

Masaustunde ıken sağ tıklatın ve yeni bir metin belgesi olusturun adınıda robots yapın. yaptınız mı bitti mi acın sımdı bunu en uste bunu yazın User-agent: * alt satıra gecın ve baslayın Allow: / google dizine ekle demek Disallow: google dizine ekleme demek. burada soyle ınce bir ayrıntı var allow kullanmanıza cokta gerek yok disallow la engellecek sayfaları belırtmenız yeterlıdır dısallow dısında kalan tum verılerı google ındexler. en alt satırada site harıtanızın yolunu gosterın ıslem bu kadar.
PHP Kod:
User-agent: *

Disallow: /  ekleme demek
Allow
: /       ekle demek

Sitemap
https://www.maxiforum.net/sitemap.xml 
Örnek:

PHP Kod:
User-agent: *

Disallow: /nembers (üyeleri indexleme dedim)

Sitemaphttps://www.maxiforum.net/sitemap.xml 
Son orneğe allow kodu girmedim cunku disallow dısında kalan tum dızınler allow ıslemı gorur...

Not: robots dosyanızı olsuturup ftp ye ana dızıne upload edınız.
Cevapla

Bir hesap oluşturun veya yorum yapmak için giriş yapın

Yorum yapmak için üye olmanız gerekiyor

ya da
Task
Kayıt Ol
Discord Adresimize Katılın