平台建设主导人需要对每一块业务需求有深刻的了解，知道每个业务部门想要看什么样的数据，需要什么样的分析报表；这些数据是否现在就可以获取到，是否需要收集；业务部门通过这些数据分析，是如何推进和改善业务，是否有提升的价值意义。
步骤四：进行大数据挖掘与分析 在企业级大数据平台的基础上，进行大数据的挖掘与分析。随着时代的发展，大数据挖掘与分析也会逐渐成为大数据技术的核心。
一般的大数据平台从平台搭建到数据分析大概包括以下几个步骤：Linux系统安装。分布式计算平台或组件安装。数据导入。数据分析。一般包括两个阶段：数据预处理和数据建模分析。数据预处理是为后面的建模分析做准备，主要工作时从海量数据中提取可用特征，建立大宽表。
一方面它可以汇通企业的各个业务系统，从源头打通数据资源，另一方面也可以实现从数据提取、集成到数据清洗、加工、可视化的一站式分析，帮助企业真正从数据中提取价值，提高企业的经营能力。
大数据平台的搭建步骤：linux系统安装 一般使用开源版的Redhat系统--CentOS作为底层平台。为了提供稳定的硬件基础，在给硬盘做RAID和挂载数据存储节点的时，需要按情况配置。分布式计算平台/组件安装 国内外的分布式系统的大多使用的是Hadoop系列开源系统。Hadoop的核心是HDFS，一个分布式的文件系统。
1、Hadoop 是一个能够对大量数据进行分布式处理的软件框架。但是 Hadoop 是以一种可靠、高效、可伸缩的方式进行处理的。Hadoop 是可靠的，因为它假设计算元素和存储会失败，因此它维护多个工作数据副本，确保能够针对失败的节点重新分布处理。Hadoop 是高效的，因为它以并行的方式工作，通过并行处理加快处理速度。
2、Hadoop是一个分布式存储和分析框架，它能在廉价设备上利用集群的强大功能，安全地存储和高效地处理海量数据。 Hadoop项目家族的核心是HDFS（分布式文件系统）和MapReduce（分布式计算）。HDFS负责存储海量数据，而MapReduce负责数据处理。
3、它是通过分布式的方式处理大数据的，因为开元的原因现在很多的企业或多或少的在运用hadoop的技术来解决一些大数据的问题，在数据仓库方面hadoop是非常强大的。
4、在大数据处理分析过程中常用的六大工具： Hadoop Hadoop 是一个能够对大量数据进行分布式处理的软件框架。但是 Hadoop 是以一种可靠、高效、可伸缩的方式进行处理的。Hadoop 是可靠的，因为它假设计算元素和存储会失败，因此它维护多个工作数据副本，确保能够针对失败的节点重新分布处理。
5、Hadoop是一个分布式系统基础架构，由Apache基金会开发。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力高速运算和存储。Hadoop实现了一个分布式文件系统（HadoopDistributedFileSystem），简称HDFS。Hadoop是一个用于运行应用程序在大型集群的廉价硬件设备上的框架。
6、一个重要的事实是，通过使用各种工具，比如MapReduce、Pig和Hive等，数据可以基于它们的内置功能和实际需求来使用它们。至于在Hadoop分析大量数据，Anoop指出，通常，在大数据/Hadoop的世界，一些问题可能并不复杂，并且解决方案也是直截了当的，但面临的挑战是数据量。
大数据处理流程包括数据收集、数据存储、数据清洗和预处理、数据集成和转换、数据分析、数据可视化、数据存储和共享，以及数据安全和隐私保护等步骤。数据收集 数据收集是大数据处理的第一步。这可以通过多种方式进行，如传感器、网页抓取、日志记录等。
用适当的统计、分析方法对收集来的大量数据进行分析，将它们加以汇总和理解并消化，以求最大化地开发数据的功能，发挥数据的作用。数据分析为了提取有用信息和形成结论而对数据加以详细研究和概括总结的过程。
大数据处理流程包括：数据采集、数据预处理、数据入库、数据分析、数据展现。数据采集数据采集包括数据从无到有的过程和通过使用Flume等工具把数据采集到指定位置的过程。数据预处理数据预处理通过mapreduce程序对采集到的原始日志数据进行预处理，比如清洗，格式整理，滤除脏数据等，并且梳理成点击流模型数据。
将数据库中的数据经过抽取、清洗、转换将分散、零乱、标准不统一的数据整合到一起，通过在分析数据库中建模数据来提高查询性能。合并来自多个来源的数据，构建复杂的连接和聚合，以创建数据的可视化图标使用户能更直观获得数据价值。为内部商业智能系统提供动力，为您的业务提供有价值的见解。
大数据开发：简单粗略来说就是用工具实现大数据分析后所需要得出的结果。简单理解，大数据开发就是制造软件的，只是与大数据相关而已，通常用到的就是与大数据相关的开发工具、环境等等。
大数据开发工程师 分两种：第一是编写一些Hadoop、Spark的应用程序；第二是对大数据处理系统本身进行开发。对理论和实践要求的都更深一些，也更有技术含量。
简单点来说，大数据开发就是做大量数据的分布式计算的。数据分析主要是做数据的收集、挖掘、清洗、分析，最后形成分析报告想学的话可以参考下科多大。
大数据开发是在大数据平台基础之上的开发，充分利用大数据平台提供的功能来满足企业的实际需求。大数据开发工程师主要工作：开发，建设，测试和维护架构，负责公司大数据平台的开发和维护，负责大数据平台持续集成相关工具平台的架构设计与产品开发等；大数据分析是大数据应用的一个重点。
通俗点说，大数据就相当于一个巨大的数据仓库，大数据开发就相当于你是这个巨大的仓库的建设者和管理者。按照目前形势，学习大数据的前景挺好的，尤其是现在兴起的人工智能领域，最需要和大数据配合，人工智能从大数据中深度学习。如果你学习能力比较强的话，可以先自学，配合着网课进行学习。
