开发了几个小程序,给大家开源下,希望对大家有多帮助。
1、自动采集热门文章,自动发布到zblog博客程序。在上面修改后分发。
百家号、惠头条、趣头条、早期的头条号,可以直接通过rss协议发布,非常的方便。
百家号现在还可以秒发。
2、做了一个服务端的聚合程序,每天采集5000篇文章更新到网站。
注意事项:
1、浏览器部分基于精益web浏览器,程序需要一个“node.dll”文件,和软件放一起才能用,文件太大,没有上传,大家自己上传下。
2、登陆的部分,很多人估计会说不能用什么的,你可以自己修改成填表。或者使用post方法。
值得注意的是,精益web浏览器,可以直接 Ajax 发post或者get请求,甚至根本不用考虑各种参数,什么cookies等,特别适合新手,具体的看子程序“post请求”
3、里面还做了一些解析真实地址的例子,你完全可以发挥脑洞做出来各种功能。
比如采集下来,生成自己的网页,等等。相当于把文章内容标准化,自己也可以做一些处理。 然后用在其他方面。
4、因为是之前做的,可能有一些遗漏,大家可以做一下参考。这个我们用了大约3个月。
更多什么爬虫模式等细节,大家可以下载源码看下。
上一篇 抖音主页采集工具最新版