robotparser.pyi

   1 class RobotFileParser:\r
   2     def set_url(self, url: str): ...\r
   3     def read(self): ...\r
   4     def parse(self, lines: str): ...\r
   5     def can_fetch(self, user_agent: str, url: str): ...\r
   6     def mtime(self): ...\r
   7     def modified(self): ...\r