codeduan
V2EX  ›  Node.js

写了一个中国大陆高校列表爬虫,有需要的可以试下

  •  
  •   codeduan · Mar 27, 2019 · 7468 views
    This topic created in 2778 days ago, the information mentioned may be changed or developed.

    这几天恰好有个需求用到,就写了个。目前已经包含一份完整 json 了。

    https://github.com/codeudan/crawler-china-mainland-universities

    数据按省份分类,支持本科,专科,民办,独立院校分类。

    18 replies  •  2019-04-01 10:08:28 +08:00
    kukumao
    kukumao
    Mar 27, 2019
    1
    爬到的数据 发个看看
    xiangyuecn
    xiangyuecn
    Mar 27, 2019
    2
    打破 0 star
    MiRECoFu
    MiRECoFu
    Mar 27, 2019 via Android
    3
    有各专业高考录取分的爬虫吗
    GaryBI1STP
    GaryBI1STP
    Mar 27, 2019 via Android
    4
    有重复数据
    Vegetable
    Vegetable
    Mar 27, 2019
    5
    codeduan
    codeduan
    OP
    Mar 27, 2019
    6
    仓库的 china_mainland_universities.json 就是刚刚爬的。
    xfspace
    xfspace
    Mar 27, 2019 via Android
    7
    CHSI 官方权威
    还能抓 211 985 标签
    codeduan
    codeduan
    OP
    Mar 27, 2019
    8
    @gary36 修正这个 bug 了。
    codeduan
    codeduan
    OP
    Mar 27, 2019
    9
    @xfspace 多谢提醒。
    codeduan
    codeduan
    OP
    Mar 27, 2019
    10
    @kukumao china_mainland_universities.json 就是。
    zouyu1412
    zouyu1412
    Mar 27, 2019
    11
    问个小白问题:是我的 node 版本不对吗 这行 async function main(){ 报错:SyntaxError:Unexpected token function
    codeduan
    codeduan
    OP
    Mar 27, 2019
    12
    @zouyu1412 你的 node 版本低于 8 吗?
    xzc19970719
    xzc19970719
    Mar 27, 2019
    13
    为啥网页进你这个帖子 背景就会变黑???
    zgcwkj
    zgcwkj
    Mar 27, 2019
    14
    @xzc19970719 V2EX 上的模块,有的主题是不一样的
    zouyu1412
    zouyu1412
    Mar 27, 2019
    15
    @codeduan 嗯 有点低 6.2 应该是版本的原因
    PHPJit
    PHPJit
    Mar 27, 2019
    16
    参照 5L 的地址,写了一个 php 版本
    https://github.com/teg1c/crawler-china-mainland-universities-by-php
    lizliz
    lizliz
    Mar 28, 2019
    17
    有没有办法找到学校里的组织架构,求!
    codeduan
    codeduan
    OP
    Apr 1, 2019
    18
    数据源改成学信网的了。
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   2214 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 42ms · UTC 16:07 · PVG 00:07 · LAX 08:07 · JFK 11:07
    ♥ Do have faith in what you're doing.