爬取几个网站内的文字和图片信息,目标网站完全没有反爬机制,重点就是要快,越快越好。要图片信息和少量文字信息。举例来说 opentopia.com skylinewebcams.com 内的视频图像和视频的 url 和文字信息。详讯麻花腾:腰腰霸腰霸叁叁玲叁伍 null。真的超级紧急,工作量真的很少。
|
1
哈哈,我想起了产品经理说工作量很少
|
|
yech1990Jan 17, 2018 via Android
2
应该不难啊, 具体哪个网站?
--- 如果你想爬点训练集,这个是跑不掉的,不如花点时间钻研。 其他用途就另一回事了。 |
|
wyan453351466Jan 17, 2018 via iPhone
3
|
|
4
@yech1990 不超过 10 个网站,不要求量。我本身自己能写,原来爬过 insecam 的爬了 3w 多条,现在是实在紧急,工作量上我真不觉得大。
|
|
ryV60sJan 17, 2018
6
@wyan453351466 使劲点菜单,然后所有操作都 404 ?
|
|
carsonlee32Jan 17, 2018
7
产品 [我需要这个页面加载速度快很多] 开发 [多快?] 产品 [快很多]
|
|
lieh222Jan 17, 2018
8
@wyan453351466 你站上的知乎日报是不是挂了
|
|
wyan453351466Jan 17, 2018 via iPhone
9
@lieh222 没有啊
|
|
xiaoheijwJan 20, 2018
10
工作量小是多小?
|
|
11
已经搞定了,感谢几位出力的大佬。
|