大数据是福是祸?CIO五种手段可未雨绸缪

大数据挖掘云服务

在大数据领域存在诸多挑战，比如成本和，另外服务模式也为企业应用大数据造成了很大的挑战。企业内部数据集中以后，如何向用户、企业的前端和后端提供服务呢?日前中国通信学会大数据专家委员会在京成立，该组织是由中国通信学会牵头组建，我国首个专门研究大数据应用和发展的学术咨询组织。此次会议上，TechTarget中国有幸听到中国科学院计算技术研究所何清研究员、博士生导师的演讲。何清表示大数据为企业带来了创新机会，也带来了挑战，而关于数据挖掘云服务更是并不简单。

大数据演化

根据Cisco的预测，2013年互联网的数据就要达到667EB，而在2015年，在智利的巡天望远镜那里也会产品类似的数据，到2013年我们生成1.8ZB这样规模的数据只需要10分钟。何清表示：“大数据规模的增长实际上给我们的技术创新，给我们的市场竞争以及生产活动实际上带来了一个全新的前沿的领域。现在经济活动的增长根本就离不开数据，我们的创新活动，我们的经济活动，一刻也离不开数据，离开了数据不可能产生创新。大数据是一个技术问题，但是实际上带来了更多的商业机会。”

大数据规模从定义来看是一个不断演化的指标，现在指单一数据集从数10TB到10几个PB的数据规模。大数据有什么样的特征呢?何清解释道，现在有三维表述、四维表述，甚至有五维的表述，对于数据挖掘来说，实际上我们所关注的是大数据里面的这种特征，稠密与稀疏是共存的。表现在数据在局部可能分布极其稠密，但全局来看，我们所收集来的数据又是极其稀疏的。冗余和缺失是并存的，数据是存在大量的冗余的，但是局部的数据又是缺失的。再有一个特征就是静态和动态互现，就是多元数据的事态持续动态演进。

在大数据上最重要的技术问题是如何理解这么多的数据?如何理解这些大数据?大数据所带来的技术上的挑战包括描述与存储的挑战，另外一个挑战就是面临着挖掘与预测的挑战。大数据挖掘增加样本十分容易。但是，数据挖掘算法要降低复杂度非常难。

（编辑：温州站长网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!