字体
关灯
上一章 目录 下一页 进书架
    第69章 情感问题 (2 / 8)

        “这种收集速度太过缓慢了。”

        虽然说网络爬虫已经是很有效率的信息抓取手段,但他毕竟只是一个小公司,没有巨大的流量做支撑。

        如果换成千度、企鹅这种几乎垄断生态的企业,网络爬虫的效率就会成倍增加。当然了,这些企业也是这样做的,释放爬虫抓取用户个人信息什么的,在正常不过了。

        “零,分析一下,如何获取加快信息获取效率?”

        “正在分析……您可以使用分布式算法。”

        分布式算法?

        分布式算法的前提是,要有一台合用的终端,比如说三台个人电脑,一台个人电脑的运算力不足,那么利用分布式算法,就可以整个三台个人电脑的运算力,将其变成一个整体,将一个完整的任务分割成不同的部分,再同时在三台电脑上同时进行运算。

        这样一来,可以大大增加电脑的利用效率,节省时间。

        但分布式算法用在收集数据上?

        似乎有些不可行。

        内容未完,下一页继续阅读
  • 上一章 目录 下一页