Xenforo Standart Robots.txt Dosyası Nasıl Olmalı?

[XFB] Konu Bilgileri

Konu Hakkında Merhaba, tarihinde Xenforo kategorisinde root tarafından oluşturulan Xenforo Standart Robots.txt Dosyası Nasıl Olmalı? başlıklı konuyu okuyorsunuz. Bu konu şimdiye dek 33 kez görüntülenmiş, 0 yorum ve 0 tepki puanı almıştır...
Kategori Adı Xenforo
Konu Başlığı Xenforo Standart Robots.txt Dosyası Nasıl Olmalı?
Konbuyu başlatan root
Başlangıç tarihi
Cevaplar
Görüntüleme
İlk mesaj tepki puanı
Son Mesaj Yazan root
Kayıtlı
1 Yıl 4 Ay 1 Gün
Katılım
6 Şub 2024
Konular
0
Mesajlar
272
Rep
0
Tepkime puanı
0
Yaş
25
Konum
bayram.moon
Bildiğiniz üzere robots.xt dosyası botlara sınırlama getirmenizi sağlıyor Xenforo da standart robots.txt dosyası aşağıdaki şekilde olmalıdır.Siz kendi gereksinimlerinize göre ekleme veya çıkarmalar yapabilirsiniz

Kod:
User-agent: Yandex
Crawl-delay: 2

User-agent: Mediapartners-Google*
Disallow:

User-agent: Baiduspider
Disallow: /

User-agent: Baiduspider-video
Disallow: /

User-agent: Baiduspider-image
Disallow: /

User-agent: *
Disallow: /admin.php
Disallow: /account/
Disallow: /attachments/
Disallow: /conversations/
Disallow: /find-new/
Disallow: /goto/
Disallow: /login/
Disallow: /register/
Disallow: /search/
Allow: /

Sitemap: http://www.siteadresi.com/sitemap.php
 

Create an account or login to comment

You must be a member in order to leave a comment

Create account

Create an account on our community. It's easy!

Log in

Already have an account? Log in here.

Üst