一口气做了218个采集模板,从此我们将是爬虫采集界的美图秀秀
我觉得今天应该出来吹下牛逼,因为我们觉得都快被自已感动哭了。近期我们整个运营团队天天加班一口气做了这218个采集模板,放到我们神奇的八爪鱼简易采集里面去,覆盖140个以上的网站,采集模板字段全配齐,适应不同用户不同场景下的需求,从此用户只需要输入几个参数,点一下启动采集即可获取数据。
一张图是无法将logo全摆上的!
本地生活
大众点评 |
携程 |
美团 |
房天下 |
百姓网 |
赶集网 |
黄页88 |
58同城 |
51JOB |
安居客 |
瓜子 |
驴妈妈 |
蚂蜂窝 |
穷游网 |
微医 |
搜房网 |
途牛网 |
房多多 |
春雨医生 |
下厨房 |
育儿网 |
寻医问药 |
饿了么 |
爱彼迎 |
链家 |
馒友帮 |
|
|
电子商务
京东 |
天猫 |
淘宝 |
amazon |
阿里巴巴 |
唯品汇 |
当当网 |
1号店 |
ebay |
速卖通 |
蘑茹街 |
苏宁易购 |
媒体阅读
腾讯网 |
微博网页 |
东方财经 |
新浪新闻 |
新浪财经 |
悟空问答 |
猎云网 |
铅笔道 |
人民网 |
时光网 |
文玩迷 |
VR186 |
一点资讯 |
雅虎 |
雪球 |
凤凰网 |
新浪汽车 |
新华社 |
部落 |
线报屋 |
太平洋 |
果壳网 |
中新网 |
虎嗅网 |
I黑马 |
IT桔子 |
东方财富 |
百度百家 |
好奇心 |
华尔街 |
环球网 |
简书 |
界面 |
今日头条 |
梨视频 |
36Kr |
她生活 |
搜狐新闻 |
搜狐新车 |
B站 |
搜索与社交
百度 |
搜狗 |
豆瓣 |
糗百 |
博客园 |
网易 |
多玩 |
家长帮 |
天涯网 |
|
|
|
其他
好大夫 |
39健康网 |
智联 |
英雄联盟 |
站长之家 |
87870 |
音频应用 |
中国政府采集网 |
虾米音乐 |
AcFun |
爱奇艺 |
雪球 |
应用宝 |
优酷 |
字幕组 |
360 |
QQ音乐 |
爱游网 |
拉勾 |
|
*以上网站的采集规则都配置好模板,大家可以直接使用即可采集。
未完待续,敬请期待
除了以上100多个网站的218个模板外,我们后续还会再制作上百个网站数百个模板,让用户从此采集更多网站无需配置采集规则。
这些模板对应的网站,都是用户大多数想要采集的网站,以大众点评为例,大多数都在采集商家列表,商家详情,团购详情等等,我们运营的同学先帮大家把这些采集规则配置好,大家只需要填入一些参数(如城市入口地址,翻多少页等等)即可进行采集,页面上所有字段几乎都会包含,如遇到不需要的删除即可。
并且有些模板还帮用户做了特殊处理,进行了云优化与云突破,可以在云端无限采集,无需担心封IP等防采集策略。
简易采集界面也对采集字段,参数配置,样例数据做了详细的说明,保证每个点都说到位,并且运营同学还会对规则做定期的维护与更新,最后达到一个效果,你只需点击一个“立即使用”,即可获取数据。
我们运营的同学戏称,从前我们是图片处理界的PS,功能强大,从此,我们是图片处理界的美图秀秀,不仅功能强大还简易,大家可以直接开挂采集数据了。
此处应该有掌声
最后用一首诗来结束今天的微信
我们一直走跟别人不一样的路
从此许多网站采集不再需要配置规则
《未选择的路》
第一节
Two roads diverged in a yellow wood,
And sorry I could not travel both
And be one traveler, long I stood
And looked down one as far as I could
To where it bent in the undergrowth.
第二节
Then took the other, as just as fair,
And having perhaps the better claim,
Because it was grassy and wanted wear;
Though as for that the passing there
Had worn them really about the same.
第三节
And both that morning equally lay
In leaves no step had trodden back.
Oh, I kept the first for another day!
Yet knowing how way leads on to way,
I doubted if I should ever come back.
第四节
I shall be telling this with a sigh
Somewhere ages and ages hence
Two roads diverged in a wood, and I--
I took the one less traveled by,
And that has made all the difference.
黄色的树林里分出两条路,
可惜我不能同时去涉足,
我在那路口久久伫立,
我向着一条路极目望去,
直到它消失在丛林深处。
但我却选了另外一条路,
它荒草萋萋,十分幽寂,
却显得更诱人、更美丽,
虽然在这两条小路上,
都很少留下旅人的足迹,
虽然那天清晨落叶满地,
两条路都未经脚印污染。
呵,留下一条路等改日再见!
我知道路径延绵无尽头,
但恐怕我难以再回返。
也许多少年后在某个地方,
我将轻声叹息把往事回顾,
一片树林里分出两条路,
而我选了人迹更少的一条,
从此改变了我一生。
-- 弗罗斯特
服务提示