最近闲来无事写了一个抓取豆瓣小组内容入库到Wordpress的插件FetchPost。
其实豆瓣小组里面的内容还挺有意思的。
由于豆瓣网禁止抓取内容且是https协议,所以我们这里仅能使用Linux自带的curl抓取。
2016/09/08更新:
1.初始化插件,支持抓取豆瓣小组内容。
2.支持抓取帖子全部分页内容。
3.入库到Wordpress。
4.支持入库时自定义标签功能。
最近闲来无事写了一个抓取豆瓣小组内容入库到Wordpress的插件FetchPost。
其实豆瓣小组里面的内容还挺有意思的。
由于豆瓣网禁止抓取内容且是https协议,所以我们这里仅能使用Linux自带的curl抓取。
1.初始化插件,支持抓取豆瓣小组内容。
2.支持抓取帖子全部分页内容。
3.入库到Wordpress。
4.支持入库时自定义标签功能。
Helping millions of developers easily build, test, mana […]
Vultr Global Cloud Hosting – Brilliantly Fast SSD […]
2011 年成立以来,七牛云致力于成为全球领先的一站式场景化智能视频云服务商,围绕数字化浪潮下的在线音视频需求 […]
选择您的网站托管解决方案,打造完美网站!从共享主机和域名到VPS – 我们拥有您网上成功所需的一切 […]
Our web hosting is trusted by more than 2,800,000 domai […]
主机商介绍:RAKsmart是知名的美国服务器租用商,包括美国站群服务器、美国cn2服务器、香港服务器等热门产 […]
评论已关闭