一定要查看网页的robots 协议。切勿盲目爬取,触犯了法律。