爱意满满的作品展示区。
O21

豆瓣 妹子 采集器 小更新(距离上一次更新 325 天 >.<)

  •  
  •   O21 ·
    ShenXuGongZi · Jun 3, 2015 · 8159 views
    This topic created in 4171 days ago, the information mentioned may be changed or developed.

    豆瓣小组图片采集程序

    By 肾虚公子

    官网: https://github.com/ShenXuGongZi/DouBanGroupPic

    主程序:dou2.py

    Mac/Liunx 运行程序(python dou2.py)即可。

    Windows用户请下载压缩包: 下载

    程序基本功能

    • 用户可以自由选择用户组下载图片支持豆瓣所有小组
    • 本程序自动采集代理
    • 采集代理后随机选择
    • 自动下载图片并保存

    获取用户组ID方法
    http://www.douban.com/group/264964/ #只需要输入人group/后面的字符 不包括斜杠

    2015-6-3 更新
    • 无需用户手动创建文件夹
    • 更新可用性去掉代理采集
    • 优化Windows客户端大小以及文件数量
    2014-7-17 更新
    • 修改程序Bug
    • 增加错误输出
    • 加快程序执行效率
    • 尝试启用多线程失败!
    2014-7-16 更新
    • 用户可以自由选择用户组下载图片支持豆瓣所有小组
    • 增加默认功能
    • 模拟UA
    • 更换代理源
    • Win版支持
    • 优化程序
    • 美化程序
    38 replies  •  2015-06-07 17:44:32 +08:00
    Showfom
    Showfom
    PRO
    Jun 3, 2015 via iPhone
    1
    Linux 用户
    KillPaul
    KillPaul
    Jun 3, 2015
    2
    然并卵?
    unique
    unique
    Jun 3, 2015 via Android
    3
    mark
    chendeshen
    chendeshen
    Jun 3, 2015 via Android
    4
    mark
    braineo
    braineo
    Jun 3, 2015
    5
    大有搞头啊,可以多加一些功能,例如只扒热帖之类的
    或者是搞上图片识别把汉子全部去掉
    kingname
    kingname
    Jun 3, 2015
    6
    我看了一下楼主的采集器。
    有三个建议:
    1.使用requests而不是urllib库
    2.使用xpath而不是正则表达式
    3.没有必要每一句中文都先decode再encode.
    won
    won
    Jun 3, 2015
    7
    win7测试失败,启用兼容模式,但还是采集不下来
    catface
    catface
    Jun 3, 2015
    8
    怎么识别妹子的
    O21
    O21
    OP
    Jun 3, 2015 via Smartisan T1
    9
    @won 啊。。。我的可以。。
    O21
    O21
    OP
    Jun 3, 2015 via Smartisan T1
    10
    @kingname 多谢。。 我今天改改
    O21
    O21
    OP
    Jun 3, 2015 via Smartisan T1
    11
    @KillPaul 确实没啥用 失眠的作品
    flied
    flied
    Jun 3, 2015
    12
    必须加一个豆瓣用户采集的功能呀。

    很多豆瓣用户自拍质量那是杠杠的,还有一些专门收集的豆瓣相册,好东西不仅仅在小组里。

    ps,最好能取到相册的大图而不是那个小图
    bao3
    bao3
    Jun 3, 2015
    13
    不见得是否有用,而在于是否好玩,我觉得挺不错,假装自己是人妖,可以不停的换头像,有这么多妹子呢,哈哈哈。虽然我永不到,肯定有人会用到的。
    b821025551b
    b821025551b
    Jun 3, 2015
    14
    为什么我每次看见这个标题都自动解读成 ”妹子小便采集器“,我真的不是变态啊啊啊啊啊!!!!
    jianzong
    jianzong
    Jun 3, 2015
    15
    @b821025551b 正想回复一样的内容。。。
    inmyfree
    inmyfree
    Jun 3, 2015
    16
    @b821025551b
    @jianzong 目测节操已掉,三观不正了
    yellowV2ex
    yellowV2ex
    Jun 3, 2015
    17
    能不能加一个自动约到如家订房的功能呢?
    O21
    O21
    OP
    Jun 3, 2015
    18
    @yellowV2ex =,= Good idea
    nowit
    nowit
    Jun 3, 2015
    19
    Win7 第一次采集成功,然后采集测试都失败了!
    Ryans
    Ryans
    Jun 3, 2015
    20
    赞赞赞
    O21
    O21
    OP
    Jun 3, 2015
    21
    @nowit 嗯 没加http代理 豆瓣封IP了 没找到好的代理网站 模块已经写好了
    ledzep2
    ledzep2
    Jun 3, 2015
    22
    @b821025551b 不要怀疑自己. 你就是.
    djyde
    djyde
    Jun 4, 2015
    23
    O21
    O21
    OP
    Jun 4, 2015 via Smartisan T1
    24
    @djyde python的代理采集有问题 那个源网站不行 你把代理模块注释掉
    O21
    O21
    OP
    Jun 4, 2015 via Smartisan T1
    25
    @djyde 打错是Linux的有问题 Win的我编译的时候把代理模块去掉了
    exuxu
    exuxu
    Jun 4, 2015
    26
    曾经用bash wget 下来一大堆图片,然后自己默默的筛选...
    lux182
    lux182
    Jun 4, 2015
    27
    我以前搞过某榴妹汁采集和故事采集
    iloveayu
    iloveayu
    Jun 4, 2015
    28
    肾虚公子。。。
    jedicxl
    jedicxl
    Jun 4, 2015 via iPhone
    29
    @b821025551b 含泪+1
    mjever
    mjever
    Jun 4, 2015
    30
    现在真改名肾虚公子了!
    realfreesky
    realfreesky
    Jun 4, 2015
    31
    好像只能爬下一大堆图,并不会筛选出妹纸
    lonelygo
    lonelygo
    Jun 4, 2015
    32
    弱弱的问下,我怎么知道哪个小组有让我肾虚的妹纸呢?
    vjnjc
    vjnjc
    Jun 4, 2015
    33
    同楼上问。
    给几个测试case呗~
    yren
    yren
    Jun 4, 2015
    34
    猥琐的收藏了
    cskeleton
    cskeleton
    Jun 5, 2015
    35
    邪恶的问一下有不有能够收集妹汁的程序~
    O21
    O21
    OP
    Jun 5, 2015 via Smartisan T1
    36
    @cskeleton 这。。。。。。
    fange01
    fange01
    Jun 7, 2015
    37
    win8.1测试可用。抽空学习下代码
    mingyun
    mingyun
    Jun 7, 2015
    38
    学习Python中
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   3339 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 70ms · UTC 10:39 · PVG 18:39 · LAX 02:39 · JFK 05:39
    ♥ Do have faith in what you're doing.