V2EX 07月14日 12:58
[职场话题] 现在大数据有前途吗?
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_guoji1.html

 

文章探讨了大数据技术在云端存储和Spark应用方面的趋势,指出数据存储逐渐转向云端,Hadoop全家桶的搭建需求减少,同时Spark在数据计算和整理方面的作用日益凸显。

现在大数据有前途吗?

目前学了 Hadoop 全家桶,但是我发现数据存储现在不是都放在云端了吗,不论是 google 的 bucket 还是国内的一些云产品,对于数据存储,作为开发者我们直接可以把数据丢进去,不需要考虑如何让数据更有保证,除了一些超级大厂还有人在多个服务器搭建集群来存放数据吗?

Spark 进行数据计算,我觉还是有点用的,主要用来从存储中的数据进行汇总整理成为结构化数据,放到数据库中,方便开发进行数据分析和整理。

那么目前的所谓大数据技术,其实主要方向是在数据计算、数据整理、对于服务器搭 Hadoop 全家桶这些,是不是就不管了?

Fish AI Reader

Fish AI Reader

AI辅助创作,多种专业模板,深度分析,高质量内容生成。从观点提取到深度思考,FishAI为您提供全方位的创作支持。新版本引入自定义参数,让您的创作更加个性化和精准。

FishAI

FishAI

鱼阅,AI 时代的下一个智能信息助手,助你摆脱信息焦虑

联系邮箱 441953276@qq.com

相关标签

大数据技术 云端存储 Spark 数据计算 数据整理
相关文章