推荐工具
› RoboMongo
推荐书目
› 50 Tips and Tricks for MongoDB Developers
Related Blogs
› Snail in a Turtleneck
Livid
403.84D
565.6D
V2EX  ›  MongoDB

目前国内有哪些公司在大规模使用 MongoDB 呢?

  •  
  •   Livid ·
    PRO
    · Sep 26, 2011 via iPhone · 38415 views
    This topic created in 5520 days ago, the information mentioned may be changed or developed.
    84 replies  •  2024-01-03 11:51:37 +08:00
    ri0day
    ri0day
    Sep 26, 2011
    1
    我们有用 ,大概800G左右的图片 。还有一些日志。日志很小。
    adamsxu
    adamsxu
    Sep 26, 2011
    2
    我们在用,LS猛啊,这么多数据量,我们才80G...
    c
    c
    Sep 26, 2011
    3
    @Livid 莫非tornado版本选择MongoDB作为数据库?
    Livid
    Livid
    MOD
    OP
    PRO
    Sep 26, 2011
    4
    @c 确实有这样的考虑。

    如果 MongoDB 确实会成为下一个 most popular DB 的话,我现在动手恐怕都有点晚了。
    ratazzi
    ratazzi
    PRO
    Sep 26, 2011
    5
    我之前的公司在用,现在的公司只是辅助性的试用
    Livid
    Livid
    MOD
    OP
    PRO
    Sep 26, 2011
    6
    大家如果方便的话,不妨留一下公司的名字吧。
    ratazzi
    ratazzi
    PRO
    Sep 26, 2011
    7
    公司很小,直接贴 url 吧
    http://www.ibuonline.com
    我的第一份工作,见笑了
    summic
    summic
    Sep 26, 2011❤️1
    8
    linnchord
    linnchord
    Sep 26, 2011
    9
    了解国内比较大的就是 chinavisual.com,有一个他们相关的技术演讲 http://www.infoq.com/cn/interviews/pf-mongodb-develop
    Just1n
    Just1n
    Sep 26, 2011
    10
    麦库 note.sdo.com 貌似也是用的MongoDB。
    kongruxi
    kongruxi
    Sep 26, 2011
    11
    我们公司也在用,不过那产品还没有上线,而且目前只是很简单地使用

    @ri0day 你是将图片储存在GridFS上吗?实施效果如何?可以分享一下经验吗?
    muxi
    muxi
    Sep 26, 2011
    12
    @Livid 小范围试用了一下,技术不精,暂时搞不定好多东西,弃用。5个字评价:看起来很美
    Los
    Los
    Sep 26, 2011
    13
    尝试使用过,但发觉在某个数量级的应用中还是mysql好用,而更大的数量级应用自身还没有,实在没必要为新技术而新技术,弃用。现在唯一用到它的项目是用于存储爬回来的数据,方便。
    zicjin
    zicjin
    Sep 26, 2011
    14
    在公司已经大量使用了,具体多少G我都不清楚。主要是因为方便好用,性能方面我估计大家都没有过多深究,因为这公司奢侈惯了。
    www.eastmoney.com
    imonyse
    imonyse
    Sep 27, 2011
    15
    Some quotes:

    "Unless you're already running tens of thousands of dollars a month in servers and think MongoDB was a better fit for the nature of your data, you probably wasted a lot of time for negative benefit. "

    "MongoDB is fun to toy with, but it's almost never a better choice than Postgres/MySQL/SQL Server/etc. for production applications."

    "It's beta quality and the list of deployments( http://www.mongodb.org/display/DOCS/Production+Deployments ) is misleading. Most of those companies listed have used MongoDB for one side project, they aren't running their main services on it. Read the comments next to each company name -- one used it to track a single web form, another used it for an internal reporting application, etc. "

    "One of the few that actually uses MongoDB for their main service is Foursquare, and that came back to bite them with days of downtime which would not have occurred if they were using a RDBMS."
    iandyh
    iandyh
    Sep 27, 2011
    16
    MongoDB 不确定的地方还是很多。因为 Cache 使用 Memory-mapped 的原因,在进行 sharding 的时候,sharding key 选择要很小心,不然像出现 4sq 那样的问题,修都没法修,只能停掉整站重新做 sharding。
    也因为 cache 的原因,一些随机 I/O 也很讨厌。

    现在 MongoDB 的写入锁还是全局的,没法实现单一 collection 的写锁。这个有点要命。虽然写入内存的速度很快,但是谁也不知道大数据量的时候会怎样。

    使用 replica set 之后网络间的通信也是一个问题。sourceforge 为此采用了读写都在 master 上进行这样的架构。

    http://www.quora.com/Quora-Infrastructure/Why-does-Quora-use-MySQL-as-the-data-store-instead-of-NoSQLs-such-as-Cassandra-MongoDB-CouchDB-etc

    引用 Adam D'Angelo 的更新:a friend's startup that was going through explosive growth tried to switch to MongoDB and gave up after a month due to instability

    MongoDB 也是给有钱人用的,没有大内存的机子很难发挥优势。况且使用 BSON 后也十分消耗硬盘。有兴趣的人可以那这个和 MySQL 做比较。

    所以我觉得 MongoDB 还需要再等等,可以用些小项目,但是做主力数据库,有点悬。
    ri0day
    ri0day
    Sep 27, 2011 via iPod❤️1
    17
    @kongruxi 是存在gridfs里 sharding+replication set .

    总体来说:
    1.mongodb 不是很稳定,曾经在读写频繁时把机器内存耗尽 疯狂使用swap 导致机器hang住
    他内存管理不是很好
    2.存图片的话gridfs对于使用文件系统没有任何性能上的优势。图片读写都需要使用程序读出来或者写进去
    3.使用mongodb 要比使用文件系统占更多空间他是bson格式存储数据
    4.如果使用mongodb集群架构 备份和容错需要双倍乃至多倍的物理硬件资源
    5.管理复杂.需要care 集群中的每个节点。复杂度高
    6.由于数据是分布式的出了问题很难还原出数据,比如shard节点中的数据文件损坏或者文件系统故障
    7.在当前使用环境看来 唯一的收益就是无缝扩展存储容量了.

    反正这东西虽然是趋势 但是还不成熟,放放日志,做做备份什么的还行,关键数据还是用自己最能把控的吧。

    我折腾这个东西不少次了 也吸收到了些经验了。
    ratazzi
    ratazzi
    PRO
    Sep 27, 2011
    18
    @ri0day
    有没有使用 https://github.com/mdirolf/nginx-gridfs 这一类的东西呢
    或者象 chinavisual.com 那样使用 nginx 的 proxy_store
    blogcool
    blogcool
    Sep 27, 2011
    19
    我们目前在用它存储冷数据,一家有五百多万会员的网站。
    ri0day
    ri0day
    Sep 27, 2011❤️1
    20
    @ratazzi
    使用过这个模块。不过当初我们也不是一开始就用mongodb的。有些url不能变。由于这个模块只能传入filename或者id 才能展示出图片。反正是由于开发上对于url处理不够方便后来开发了自己的接口做的存和取。

    其实后端的压力很小。我们前面有squid缓存的。基本上访问到mongodb的数据不多了
    ratazzi
    ratazzi
    PRO
    Sep 27, 2011
    21
    @ri0day
    多谢分享,我们曾经在 1.4.5 的时候就把图片存在 GridFS 里的,后来因为读取性能放弃了,那时候没有足够的能力与时间去优化,放弃了,后来又想过用 Tornado 写个程序负责读取,前面加个 Varnish 之类的,现在看来还是基本可行的
    还有个想法就是用 php 写程序读取,用 Hip-Hop 编译下
    fsw90628
    fsw90628
    Sep 27, 2011
    22
    JSON 的格式用起来很方便,配合Tornado使用更舒服,bit.ly还专门写了个asyncmongo,
    可以看这个slides,
    http://www.slideshare.net/ikailan/rapid-web-development-using-tornado-web-and-mongodb
    这里有一些视频,从原理上讲MongoDB。
    http://www.mongodb.org/display/DOCS/Schema+Design#SchemaDesign-SeeAlso
    fsw90628
    fsw90628
    Sep 27, 2011
    23
    不过reddis也很好,比较一下吧
    http://kkovacs.eu/cassandra-vs-mongodb-vs-couchdb-vs-redis
    liruqi
    liruqi
    Sep 27, 2011
    24
    http://www.magnetjoy.com/ 我们的新游戏在用~ 之前的项目中也做过尝试.
    titan
    titan
    Sep 27, 2011
    25
    www.tazai.com 也在用。
    leeiio
    leeiio
    Sep 27, 2011
    26
    http://doit.im 在用。
    kuno
    kuno
    Sep 27, 2011
    27
    公司的新项目准备使用mongodb, 不过听说mongodb在处理关系型数据时很糟糕,而我们的项目非常注重用户之间的关系,不知道在这里使用mongodb是不是一个好的选择?
    chuangbo
    chuangbo
    Sep 27, 2011
    28
    DNSPod 也有一些非重要的部分在尝试 Mongodb,不过反映出来的情况是并没有 10gen 描述的的那么美好。
    avatasia
    avatasia
    Sep 27, 2011
    29
    #kuno, 绝对非常糟糕,如果有好的方法,麻烦分享一下。 目前我是用sql server 2008 + mongodb,
    关系型数据放到sql server 2008上,权宜之计,长久是不行的。
    Platinum
    Platinum
    Sep 27, 2011
    30
    手机之家应该在用
    chloerei
    chloerei
    Sep 27, 2011
    31
    @kuno 用关系数据库的思维去想,很糟糕,因为没有JOIN查询。

    但是用Mongodb的思维去想,非常合适。
    kuno
    kuno
    Sep 27, 2011
    32
    @chloerei:
    我应该还没有固化的思维方式,所以,愿闻起详。
    est
    est
    Sep 27, 2011
    33
    @iandyh 今天一个19G的Mongodb就挂了。悲剧的数据修复中。
    chloerei
    chloerei
    Sep 27, 2011
    34
    @kuno 描述一下需要什么样的关系?
    iammutex
    iammutex
    Sep 27, 2011
    35
    @liruqi 如其兄原来去aw那边了啊~
    liruqi
    liruqi
    Sep 27, 2011
    36
    @iammutex 嗯... 年初过来的~
    iandyh
    iandyh
    Sep 27, 2011
    37
    @est 啥原因捏?
    avatasia
    avatasia
    Sep 27, 2011
    38
    @chloerei 请教怎么样处理跟用户绑定的数据处理,如果用户还分组呢,并且用户信息和组信息都会变更。
    kafka0102
    kafka0102
    Sep 27, 2011
    39
    http://www.tuicool.com/ 创业产品,存储都在mongodb,数据量在拼命控制中。。。全局锁和复制是个问题。。。
    ZoomQuiet
    ZoomQuiet
    Sep 27, 2011
    40
    金山网络,内部云安全用MongoDB 作任务分发,每日2千万以上的task...
    kuno
    kuno
    Sep 27, 2011
    41
    @chloerei:
    想象一个网站融合目前所有流行的网站类型, 微博, 轻薄客,博客,甚至还带有某些门户的色彩。不仅用户之间有单项/双向的关注/被专注/朋友之间的关系,而且用户还会和不同的内容实体之间建立联系,喜欢/转载/关注/回复,对回复的回复等等等等。。。
    chloerei
    chloerei
    Sep 27, 2011
    42
    @avatasia 不太了解你的具体应用,你提到的地方两类数据库处理区别不大啊。

    @kuno 描述的这些功能在储存端不成问题,把关联ID作为list存在某个实体的文档那端就行了。做Timeline(多态)的时候,你会发现Mongodb的无模式提供了大大的便利。

    或者这样说,Mongodb 没有关联查询,但是是可以储存和查询关联数据的。
    avatasia
    avatasia
    Sep 27, 2011
    43
    @chloerei 把关联ID作为list存在某个实体的文档那端就行了,例如某条数据里包含一个用户组list如果同样的list,有1000万条数据,每次更新一下组,就要同时更新1000万条记录。这个开销的问题怎么解决?
    chloerei
    chloerei
    Sep 27, 2011
    44
    @avatasia

    A.b_ids -> B

    改变为

    A <- B.a_ids

    哪头开销小放哪头。

    另外我没理解清楚“组”是什么?
    avatasia
    avatasia
    Sep 27, 2011
    45
    @chloerei 例如一条交易信息 ,10几个字段, 好吧,他属于某个用户的交易,弄个object放用户的信息,
    如果交易信息有1000万条,每次更新用户信息,要更新1000万条的交易记录,反过来做,一条用户信息,有1000万条list,这个性能如何? 不敢想。
    如果这个用户属于某个组, 10几个组呢?用户里加个字段,存放10几个组名,假如1000个用户属于同样的组,同样的信息 1000次, 如果不同的用户有什么的数据操作权限,有的可增加,有的可删除,有的只读,又要分别加上不同的权限字段,是这么设计的么?
    yqingp
    yqingp
    Sep 27, 2011
    46
    我们公司在用 http://www.5yi.com 近期会把大量的东西迁移到mongodb上。。
    chloerei
    chloerei
    Sep 27, 2011
    47
    @avatasia 我不明白为什么要更新1000万条list。

    user 有个 _id,交易记录方面记录 user_id 就行了。更新 user 或者 更新交易记录都不涉及更新另一个数据集合。

    或者说你需要一次用join查询查出交易记录和用户信息,那么Mongodb做不到,需要多一次查询,先查交易,再查用户(或者反之)。

    组那里大致就这样设计,不过存放最好用id不用组名。不要觉得在user里存组id是重复,因为少了一个关联表,其实就是把关联表拆散到文档里。
    halfamonk
    halfamonk
    Sep 28, 2011
    48
    clan.garena.com 有在用
    mathgl
    mathgl
    Sep 28, 2011
    49
    mongodb 真正可用的是1.8.x系列或以后的版本.没有 -journal 的机制,Mongodb总是有些危险.
    avatasia
    avatasia
    Sep 28, 2011
    50
    @chloerei 因为在实际的应用中,用用户信息的某个字段去查所有类似该关键字的用户,可能有上万条用户记录,再通过这个用户ID去查交易记录, 两次查询,mongo不支持那么长的查询参数。
    chloerei
    chloerei
    Sep 28, 2011
    51
    @avatasia 关系数据库的领域 :)
    avatasia
    avatasia
    Sep 28, 2011
    52
    @chloerei 那就是mongo不支持喽。
    chloerei
    chloerei
    Sep 28, 2011
    53
    @avatasia 是啊
    avatasia
    avatasia
    Sep 28, 2011
    54
    @chloerei 颤抖
    mckelvin
    mckelvin
    May 17, 2012
    55
    淘宝网 数据平台,node +mongodb
    btw0
    btw0
    May 21, 2012
    56
    我们厂也在用,用gridfs存图片,也存log
    zhfsxtx
    zhfsxtx
    May 26, 2012
    57
    @ratazzi 你是在东莞吗
    zhfsxtx
    zhfsxtx
    May 26, 2012
    58
    @ratazzi 你是在东莞吗
    weihuilee
    weihuilee
    May 26, 2012
    59
    上次去参加了MongoDB北京的大会,用MongoDB的公司还是很多的,淘宝,盛大等很多公司都有用
    ratazzi
    ratazzi
    PRO
    May 27, 2012
    60
    @zhfsxtx 深圳
    cy527300280
    cy527300280
    May 28, 2012
    61
    我发现好多公司都是用mongodb存图片
    tuoxie007
    tuoxie007
    May 28, 2012
    62
    自己的博客在用:)
    Zjinys
    Zjinys
    May 28, 2012
    63
    @cy527300280 存图片用riak怎么样 ?
    cy527300280
    cy527300280
    May 29, 2012
    64
    @Zjinys riak不知道,反正我之前的公司都是用mongodb存的,查询速度什么都还行
    Showfom
    Showfom
    PRO
    May 30, 2012
    65
    @ratazzi 做英文市场的居然服务器放国内⋯⋯你们老总怎么想的。。。
    ratazzi
    ratazzi
    PRO
    May 30, 2012
    66
    @Showfom 没辙,老板就相信“挖来的”,现在也不关我事了
    aveline
    aveline
    Aug 12, 2012
    67
    用mongodb + redis做广告效果分析的路过...
    yoyicue
    yoyicue
    Aug 22, 2012
    68
    @livid 站内搜索 mongodb
    发觉 Google 已经部分识别/支持 V2EX 的 Node 结构
    URL 显示
    www.v2ex.com › MongoDB
    http://www.google.com/search?q=site:v2ex.com/t%20mongodb
    Livid
    Livid
    MOD
    OP
    PRO
    Aug 23, 2012❤️1
    69
    @yoyicue 觉得和 Google 很有默契 :P
    pppcat
    pppcat
    Sep 16, 2012
    70
    mongodb和mysql都弱爆了。建议去看看es,全文索引 nosql 存储 分布式 HA 妹子你想要的全部集于一身
    Xandy
    Xandy
    Sep 16, 2012
    71
    MongoDB开发的话市面上人不多的,还要精通NoSQL原理,然后再有NodeJS开发经验的就更少
    lxkaka
    lxkaka
    Sep 17, 2012
    72
    @pppcat es是啥捏?麻烦全文一下(^-^)
    aveline
    aveline
    Sep 17, 2012
    73
    其实觉着 MongoDB 有的时候并不适合我 ...

    囧掉
    stxh
    stxh
    Sep 17, 2012
    74
    用过一下,php, c++
    pppcat
    pppcat
    Sep 17, 2012
    75
    @Xandy mongo、nosql、node.js可以找我哈~~~~
    pppcat
    pppcat
    Sep 17, 2012
    76
    @lxkaka elasticsearch,查询速度不用说了,人家专门干这个的.

    重点是分布式做的不错。
    还有就是可以用来当文档数据库使用。

    还有就是在你用mysql或mongo的时候你既要在mysqll和mongo里面保存一份数据,这个时候你要添加搜索又要在全文索引里面保存一份数据,浪费么?有了ES,可以保存在一个地方了。而且可以设置数据保存的备份数,也不用担心数据的安全了。等等特性~~~官网上慢慢看......
    xiaojingyu
    xiaojingyu
    Sep 25, 2014
    77
    我们公司用了一段时间了,还不错,如果有这方面的人才,可以加入我们一起探讨!!!!!
    也用顺便看看我们的微信框架 weixinjs.org
    xianlin
    xianlin
    Jun 27, 2016
    78
    都 5 年过去了, mongoDB 现在应该更强大了吧。
    zhuce1234578888
    zhuce1234578888
    Jan 26, 2017
    79
    都 6 年过去了, mongoDB 现在应该更强大了吧。
    qq12345454
    qq12345454
    Jul 20, 2017
    80
    都 7 年过去了,mongoDB 现在应该更强大了吧。
    Axierty
    Axierty
    Jan 29, 2018
    81
    都 8 年过去了,mongoDB 现在应该更强大了吧。
    herozzm
    herozzm
    May 18, 2019
    82
    都 9 年过去了,mongoDB 现在应该更强大了吧。
    13482034233
    13482034233
    Oct 12, 2021
    83
    都 10 年过去了,mongoDB 现在应该更强大了吧。
    danhahaha
    danhahaha
    Jan 3, 2024
    84
    都 13 年过去了,mongoDB 看起来好像死透了
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   2056 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 178ms · UTC 02:33 · PVG 10:33 · LAX 18:33 · JFK 21:33
    ♥ Do have faith in what you're doing.