您即将离开知乎,请注意您的帐号和财产安全。
https://docs.python.org/3.6/library/urllib.robotparser.html#urllib.robotparser.RobotFileParser