#

golddata

  • GoldData将采集数据融合到两张关联关系表

    概述 在上一期中,我们抓取了新闻数据,现在我们要通过GoldData融合到两张数据库表news_site和news表当中去。如下图所示: 我们很容易看到这两张表存在关联,那是怎样将数据写入关联呢

    作者:dataman100
    2020-08-09 15:02:01
  • Golddata如何采集需要登录/会话的数据?

    概要 本文将介绍使用GoldData半自动登录功能,来采集需要登录网站的数据。GoldData半自动登录功能,就是指通过脚本来执行登录,如果需要验证码或者其它内容需要人工输入时,可以通过收发邮件来执行

    作者:dataman100
    2020-07-20 23:25:25
  • 如何采集级联数据(比如最新省市县)呢?

    概述 通常抓取级联数数据情况不多,但要是真需要时,确多了一些麻烦,比如抓取商品分类级别信息等。本内容将讲述如何采集无限级联联数据,并以GoldData来抓取2019年最新的省市县三级为示例。 创建数据

    作者:dataman100
    2020-07-05 14:26:29
  • GoldData学习实例-采集官网新闻数据

    概述 在本节中,我们将讲述抓取政府官网地方新闻。并将抓取的新闻数据融入到以下两张数据表news_site和news中。 news_site(新闻来源) 字段 类型 说明 id bigi

    作者:dataman100
    2020-04-04 09:24:43