Website Downloader:URL爬虫网站

通过 URL 下载任意网站的源码和相关静态内容,然后通过邮箱把文件发给你,这个跟SiteSucker类似,不过好的是你只需要填写URL,其它的不用管,它会自动后台完成再Email给你,某些条件场景下还是有不一样的用途。针对这些应用,我觉得从网络安全的角度上可以研究一下,如何有效反爬虫~~。
websitedownloader

https://websitedownloader.io