大数据是干什么的？

发布网友 发布时间：2022-03-27 15:44

我来回答

共3个回答

热心网友 时间：2022-03-27 17:14

大数据是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。
大数据技术的战略意义不在于掌握庞大的数据信息，而在于对这些含有意义的数据进行专业化处理。换而言之，如果把大数据比作一种产业，那么这种产业实现盈利的关键，在于提高对数据的“加工能力”，通过“加工”实现数据的“增值”。

热心网友 时间：2022-03-27 18:48

付费内容限时免费查看回答大数据工程技术人员是指从事大数据采集、清洗、分析、治理、挖掘等技术研究，并加以利用、管理、维护和服务的工程技术人员。

主要工作任务：

大数据采集（爬虫）、大数据清洗（ETl工程师）、大数据建模（算法工程师）与大数据分析（数据分析员）；

管理、分析展现及应用等技术（大数据开发工程师）；

研究、应用大数据平台体系架构、技术和标准；

设计、开发、集成、测试大数据软硬件系统；

管理、维护并保障大数据系统稳定运行；

监控、管理和保障大数据安全；

提供大数据的技术咨询和技术服务。

热心网友 时间：2022-03-27 20:40

大数据开发相关的岗位很多，比较热门的包括：
1、大数据开发工程师
主要负责数据模型的ETL开发、数据平台建设；面向业务的数据提取、分析、报表、挖掘等系统设计和开发工作。
岗位要求：
精通常用的数据结构和算法，理解面向对象设计的基本原则，熟悉常用的设计模式；
掌握Hadoop生态体系框架，包括Hadoop、Hive、Spark、Storm、Flink、ElasticSearch、HBase等；
2、大数据运维工程师
主要负责数据平台的集群管理，机器优化，集群监控等；对现有集群的优化和性能调优，满足不断增长的业务需求等。
岗位要求：
熟悉主流开源数据组件，包括但不限于HADOOP、Hive、HBase、ZK、Spark、Flink、Flume、ElasticSearch and etc；深入理解Hadoop各组件的原理和实现；熟悉分布式原理、分布式系统设计等。
3、大数据架构师
主要负责大数据基础框架的整体架构设计，结合公司实际业务情况进行技术选型；负责数据存储和计算平台的整体评估、设计以及核心功能模块的开发等。
岗位要求：
熟悉常用的数据结构和算法；具备丰富的开发经验，了解主流的大数据技术框架组件，包括但不限于Hadoop、Spark、Storm、Flink等。
4、大数据分析师
大数据分析方向的岗位，则主要以数据分析挖掘为主，通常需要负责常规业务数据分析需求开发，用户画像构建，推荐算法实现等。