# robots.txt - Firmam.org

# Bu dosya arama motoru botlarına hangi sayfaların taranabileceğini söyler

# Tüm botlar için geçerli kurallar
User-agent: *

# İzin verilen dizinler (varsayılan olarak tümü izinli)
Allow: /

# Yasaklı dizinler ve dosyalar
Disallow: /admin/
Disallow: /includes/
# /api/ genel olarak engelli, ama resim endpoint'leri izinli
# ÖNCE Allow (daha spesifik kurallar önce gelmeli)
Allow: /api/firm-image.php
Disallow: /api/
Disallow: /cron/
Disallow: /assets/js/
Disallow: /assets/css/
Disallow: /*.php$
Disallow: /config.php
Disallow: /error_log.txt
Disallow: /ftp_upload.php
Disallow: /database_setup.php
Disallow: /setup_db.php
Disallow: /404.php
Disallow: /giris.php
Disallow: /kayit.php
Disallow: /cikis.php
Disallow: /profil.php

# Özel dosyalar
Disallow: /.htaccess
Disallow: /.git/
Disallow: /.env
Disallow: /composer.json
Disallow: /composer.lock
Disallow: /package.json
Disallow: /package-lock.json

# Sitemap konumu (sitemap.xml oluşturulduğunda aktif olacak)
Sitemap: https://firmam.org/sitemap.xml

# Crawl-delay (isteğe bağlı - sunucu yükünü azaltmak için)
# Crawl-delay: 1

# Özel botlar için kurallar
User-agent: Googlebot
Allow: /
# ÖNCE Allow (daha spesifik kurallar önce gelmeli)
Allow: /api/firm-image.php
Disallow: /admin/
Disallow: /includes/
Disallow: /api/
Disallow: /cron/

User-agent: Googlebot-Image
Allow: /
Allow: /api/firm-image.php
Disallow: /admin/
Disallow: /includes/
Disallow: /api/
Disallow: /cron/

User-agent: Bingbot
Allow: /
# ÖNCE Allow (daha spesifik kurallar önce gelmeli)
Allow: /api/firm-image.php
Disallow: /admin/
Disallow: /includes/
Disallow: /api/
Disallow: /cron/

User-agent: Yandex
Allow: /
# ÖNCE Allow (daha spesifik kurallar önce gelmeli)
Allow: /api/firm-image.php
Disallow: /admin/
Disallow: /includes/
Disallow: /api/
Disallow: /cron/

# Sosyal medya botları (Open Graph, Twitter Card için)
User-agent: facebookexternalhit
Allow: /

User-agent: Twitterbot
Allow: /

User-agent: LinkedInBot
Allow: /

# Kötü niyetli botlar (isteğe bağlı)
User-agent: AhrefsBot
Crawl-delay: 10

User-agent: SemrushBot
Crawl-delay: 10