रोबोट्स.txt चेकर

किसी वेबसाइट के लिए robots.txt नियम प्राप्त करें और पार्स करें