最近几天一直找整站下载的软件,找了很多,没有一个比较完美的。。。现在网站论坛什么的登陆验证机制比较复杂,用这些老软件爬登陆验证都有一些问题,后来我终于认识到,只能自己写爬虫了。
测试了很多扒站软件,却有一个比较意外的收获,就是:仿站小工具+V8.2, 这个软件用来扒Lander真是太合适了。虽[……]
最近几天一直找整站下载的软件,找了很多,没有一个比较完美的。。。现在网站论坛什么的登陆验证机制比较复杂,用这些老软件爬登陆验证都有一些问题,后来我终于认识到,只能自己写爬虫了。
测试了很多扒站软件,却有一个比较意外的收获,就是:仿站小工具+V8.2, 这个软件用来扒Lander真是太合适了。虽[……]
虽然我学了一段时间的python爬虫,但是水平是个半吊子。而且定制爬虫比较费时间,最近有整站下载的需求,就找现成的解决方案(免费的)。找到了httrack和Cyotek, httrack是一个历史悠久的整站下载软件,多平台,功能丰富。而cyotek是比较新的软件,功能不太完善,目前20180929最[……]
在服务器上DD安装windows是我在hostloc学习到的技术,在vultr上面安装windows系统很简单,vultr提供了一个Custom IOS的功能,但是我一直觉得vultr不如linode高端,无论是机器性能还是SLA的角度。所以我尝试在linode上面安装windows。在linode[……]
博客环境从vestacp换成了军哥lnmp
wordpress对ssl支持好像一般般,加了ssl以后不能加载js css,懒得折腾了,安装了一个“SSL 不安全内容修复器”的插件搞定”
设置http跳转https的时候总是有问题,设置301跳转以后,浏览器提示redirect too m[……]