如何做好数据分析的数据采集工作？

发布网友 发布时间：2022-04-20 03:09

我来回答

共3个回答

热心网友 时间：2022-07-10 10:14

采集数据主要有两个方向，一是自己编爬虫程序去采集，二是使用别人*或者企业公司等公开的数据。
1. 编爬虫程序去采集数据(比较有针对性，比较适合我们的需求就是我想要什么数据就采集什么数据，可以使用Python爬虫去采集，不是很难。但有一点就像楼主说的一样，有点麻烦。)
2.使用公开的数据(针对性不强，可能公开的数据样本不符合我们的需求，这样就不利于工作的开展了，但特点就是方便)

热心网友 时间：2022-07-10 10:14

未至科技魔方是一款大数据模型平台，是一款基于服务总线与分布式云计算两大技术架构的一款数据分析、挖掘的工具平台，其采用分布式文件系统对数据进行存储，支持海量数据的处理。采用多种的数据采集技术，支持结构化数据及非结构化数据的采集。通过图形化的模型搭建工具，支持流程化的模型配置。通过第三方插件技术，很容易将其他工具及服务集成到平台中去。数据分析研判平台就是海量信息的采集，数据模型的搭建，数据的挖掘、分析最后形成知识服务于实战、服务于决策的过程，平台主要包括数据采集部分，模型配置部分，模型执行部分及成果展示部分等。

热心网友 时间：2022-07-10 10:15

可以使用第三方的数据产品工具，新媒体公众号方向可以考虑新榜有数的