Analiz etmem gereken, farklı alanlardaki robots.txt dosyalarının uzun bir listesi var. SF’nin orada hangi metnin olduğunu göstermesinin bir yolu var mı? Bunların HTML dosyaları olmadığı göz önüne alındığında bunu özel çıkarma (?) yoluyla nasıl yaparım?