这个爬虫的作用是采集神社的资源,然后放到自己的WordPress网站上,所以前期需要先安装好Apache/Nginx、Mysql、PHP以及WordPress。使用前请先在pipeline中设置数据库地址和账号密码。
先放效果:
Yaodo·2020-03-22·539 次阅读
这个爬虫的作用是采集神社的资源,然后放到自己的WordPress网站上,所以前期需要先安装好Apache/Nginx、Mysql、PHP以及WordPress。使用前请先在pipeline中设置数据库地址和账号密码。
先放效果:
虽说是整站爬虫,但只采集了文章和评论,没有采集分类、标签和作者信息。
神社没有开启防盗链,我也没有下载上面的图片,直接用了原文附带的图片链接。
可以稍微改动点代码把图片采集到本地,修改起来也比较简单,就不做了。
其实这个爬虫真的很简单,但是我在本地装xampp的时候总是出错,总是不能访问数据库,搞这个搞了大半天,真的是烦,还好最后解决了。
题外话:解决mysql“Access denied for user 'root'@'IP地址'
其实网上的教程很多,那为什么我还是弄了很久呢?
原因是我的电脑执行
FLUSH PRIVILEGES;
并没有用,光重启Mysql也没有用,必须先执行这个命令,再重启。真是坑。
代码在这里:
放一个仿琉璃神社的主题:
Comments | NOTHING