大数据吧 关注:166,018贴子:209,080
  • 3回复贴,共1

本人不才预测一下未来几年的大数据发展趋势

只看楼主收藏回复

1、数据湖技术会得到大力推广,相比于现在的传统离线数仓,能大大降低前期的技术成本和架构变动的成本,不需要推倒重来。
2、大数据技术两极发展:
2.1、有面向大众的低代码数据平台,会产生一些小量或者说个人的数据分析的产品,比如个人有消费记录,个人的作息时间,个人的健康记录,只要允许个人从APP中提出数据,可以在一些开放平台自己做分析,从而为自己的未来生活行为提供决策。
2.2、专业开发领域,进一步形成技术壁垒。spark,flink这样的核心组件,功能更为强大,但学习成本进一步变大,还有数据湖技术。各种技术的兼容性,扩展性会提高,但技术的原理会更为复杂,只有专业的人才能hold住。
3、大数据行业就业会两极发展:
3.1、技术性很弱的岗位会有所增长,应用侧会封装成可视化,易用型的产品,像现在的做报表等。属于上层应用。
3.2、技术性很强的岗位会有所减少,只有大型系统或者需求复杂的场景才会有专业的组件开发人员。
4、大数据建设成本将减少:
随着存储,计算,内存等硬件价格的进一步降低,数据的硬件成本降低,从而降低数据仓库的建设成本。
在数据仓库应用高度封装后,应用人员不需要太强的专业技术,很多功能界面化,非代码化。甚至sql都不用写了。
5、开源大数据平台必将崛起:
虽然cdh收费了,hdp也没有了,但是一直有开源的组件提供大数据平台的支持,未来硬件成本降低,阻碍建仓的就是软件成本了。国产大数据平台都是用开源的定制化,提供服务收费高昂,等到大数据建设的消费市场爆发,可能个人都可以低成本建设自己的独有数仓,那平台部署成本会进一步降低,免费的平台必将崛起。


IP属地:湖南1楼2024-03-20 09:34回复
    好好好 哥我听你的


    IP属地:上海2楼2024-03-30 20:59
    回复
      2025-05-09 23:08:57
      广告
      别呀哥,我刚开始写SQL


      IP属地:湖北来自Android客户端4楼2024-04-10 00:03
      收起回复