大数据时代的数据怎么挖掘

Question

如题所述

Answer 1

未至科技魔方是一款大数据模型平台，是一款基于服务总线与分布式云计算两大技术架构的一款数据分析、挖掘的工具平台，其采用分布式文件系统对数据进行存储，支持海量数据的处理。采用多种的数据采集技术，支持结构化数据及非结构化数据的采集。通过图形化的模型搭建工具，支持流程化的模型配置。通过第三方插件技术，很容易将其他工具及服务集成到平台中去。数据分析研判平台就是海量信息的采集，数据模型的搭建，数据的挖掘、分析最后形成知识服务于实战、服务于决策的过程，平台主要包括数据采集部分，模型配置部分，模型执行部分及成果展示部分等。

Answer 2

大数据时代的数据的特点就是量大，质量一般，计算资源需要的多，所以做数据挖掘工作时，要注意一下几点：
1. 量大如果只是数据行数多，还好处理，如果特征太多，就需要降维处理了，所以要掌握各种降维方法，像主成分提取这样的
2. 大数据时代数据收集的是多，但是很多很乱很杂，需要大量的ETL处理，所以需要较强的ETL能力
3. 大数据的计算一般是要调用集群资源的，使用分布式计算，所以需要分析人员能够写脚本调用集群资源，像怎么写spark程序

亿信华辰豌豆DM可视化数据挖掘平台深入洞察企业数据规律，充分挖掘数据潜在价值，多维度深度分析更精准。