Robots.txt Checker

Kunin at i-parse ang mga panuntunan ng robots.txt para sa isang website