# robots.txt za netvision.rs
# Ovaj fajl upravlja načinom na koji pretraživači pristupaju sajtu

# Dozvoli sve relevantne pretraživače
User-agent: *
Allow: /

# Postavljanje kašnjenja između poseta botova
Crawl-delay: 10

User-agent: *
Disallow: /*/trackback/
User-agent: *
Disallow: /.well-known/

# Blokiraj administrativne fajlove ili stranice koje nisu korisne za indeksiranje
Disallow: /cgi-bin/
Disallow: /tmp/
Disallow: /log/

# Blokiraj nepotrebne fajlove
Disallow: /404.html
Disallow: /privatnost.html
Disallow: /terms-and-conditions.html

# Blokiraj parametre URL-ova (ako postoje)
Disallow: /*?*

# Specifikuj mapu sajta
Sitemap: https://www.netvision.rs/sitemap.xml