Ironsongming
V2EX  ›  问与答

表单提交 10w 行数据

  •  
  •   Ironsongming · Sep 15, 2017 · 3472 views
    This topic created in 3352 days ago, the information mentioned may be changed or developed.

    现在做一个保存功能,允许添加 10w 左右的商品,现在前端保存的时候,需要直接提交上来,但是这样对内存的负担很大,有没有好一点的替代方案?

    9 replies  •  2017-09-15 17:41:52 +08:00
    wellsc
    wellsc
    Sep 15, 2017
    1
    改成文件提交,服务器接受之后起个进程 parser 一下,然后存进数据库?
    sfree2005
    sfree2005
    Sep 15, 2017 via Android
    2
    是需要改成文件提交的,文件上存到服务器器之后再读取输入到数据库
    oh
    oh
    Sep 15, 2017 via iPhone
    3
    好想知道这 10w 数据难道是手工录入的…?
    gamexg
    gamexg
    Sep 15, 2017 via Android
    4
    如果不是浏览器内存大,那么也可以前端拆分后分批提交。
    yidinghe
    yidinghe
    PRO
    Sep 15, 2017 via Android
    5
    文件导入,导入的格式最好是能一次读取一条记录的那种。
    doubleflower
    doubleflower
    Sep 15, 2017
    6
    10w 记录的文件才多大内存,对服务器小 case 了吧
    LxExExl
    LxExExl
    Sep 15, 2017
    7
    一个商品 1K 字 2KB
    100K 商品 2KB*100K=200M 对内存负担很大? 这才哪到哪
    roricon
    roricon
    Sep 15, 2017
    8
    做成文件, 然后把 request 当做流来处理. Django 的例子 https://docs.djangoproject.com/en/1.11/ref/request-response/#django.http.HttpRequest.__iter__
    Ironsongming
    Ironsongming
    OP
    Sep 15, 2017
    9
    @LxExExl 200M。。。。。
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   2594 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 36ms · UTC 11:46 · PVG 19:46 · LAX 03:46 · JFK 06:46
    ♥ Do have faith in what you're doing.