大数据是什么计算的?
首发

大数据是什么计算的?

优质
请用语音读文章

热门回答:

怎么计算的?用于计算什么的?问题描述不是很清楚。

大数据最早可以追溯到Google提出的MapReduce计算方式。Apache通过Hadoop实现了一个基于MapReduce算法的实现。主要用于大规模数据的处理。它与传统的并行计算有很大的不同。传统的并行计算主要利用的是单台服务器的性能。通过不断的扩展服务器的硬件资源来提高运算效率。而MapReduce主要就是利用多台机器甚至可以是废弃的机器组成集群来将任务分配在不同节点上同时进行运算。以此来提高运算效率。

由于性能方面可以通过不断的扩充节点而得到提升。因此使用成本、扩展性方面都比传统的并行计算要出色得多。

其运算过程如下图: 

整个过程可以分成两步:

第一步:Map。将整个计算过程细分。典型的如基因序列比对算法。需要从基因库中查找到匹配的基因;在Map这一步中。会将查找的库中的基因进行细分。每个节点分配一个指定数目的基础序列;然后在每个节点上同时进行序列比较;每个节点上会出来一个比对结果。

第二步:Reduce。将每个节点运算的结果进行汇总。最终返回给调用方。

基于这种原理。再加上目前互联网产生的数据量越来越大。而传统的并行计算所需的硬件资源过于昂贵。因此Hadoop的应用已经越来越广泛。它可以用于文件存储。也可以用于替换传统的数据库来进行数据的收集与统计。也可以用于日志存储分析等方面。

其他观点:

大数据是什么计算的。这样的提问真是让我摸不着头脑。

说点简单例子。淘宝可以通过大数据分析。可以得知不同用户的需求。这样针对不同的用户提供其相应的服务。例如你想买一个衣服。打开淘宝就有推荐的衣服。并且你也很喜欢。那么你是不觉得淘宝很好用呢。

欢迎大家说说自己的看法。

喜欢的点个赞。点个关注。

其他观点:

感谢邀请!

其实说真的。题主这个问题让我有点摸不着头脑。估计其它很多人也是。


你的意思是不是如何被处理的?


整个过程算是比较复杂的。基本上没有固定的模式。

以上就是由优质生活领域创作者 生活常识网 整理编辑的,如果觉得有帮助欢迎收藏转发~

分享到 :
相关推荐

这几天中国的股票出现了牛市,是不是外国的资金大量拥入中国?

请用语音读文章热门回答:最近这几天股票市场的确很牛。从2900多点一口气干到了3[&...

有哪些手机卡流量多且比较便宜?

请用语音读文章热门回答:什么手机卡。流量多而又便宜在回答这个问题之前。肯定有人[&h...

在你最无助的时候,你是靠的什么样的心态挺过去的?

请用语音读文章热门回答:当我最无助的时候。我是靠喘气挺过来的。因为我还喘气。证[&h...

客家人和广府人是宿敌这个说法是怎么来的?

请用语音读文章热门回答:客家人与广府人是宿敌吗?众所周知。客家人作为一个独特的[&h...

发表评论

您的电子邮箱地址不会被公开。

评论(2)

  • 难拥 永久VIP 2022年10月1日 02:41:16

    节点,传统,基因,数据,淘宝,序列,让我,可以通过,摸不着头脑,整个过程

  • 独一人 永久VIP 2022年10月1日 02:41:16

    没想到大家都对大数据是什么计算的?感兴趣,不过这这篇解答确实也是太好了

  • 苏梦北 永久VIP 2022年10月1日 02:41:16

    怎么计算的?用于计算什么的?问题描述不是很清楚。大数据最早可以追溯到Google提出的MapReduce计算方式。Ap