2023-03-16 02:19来源:m.sf1369.com作者:宇宇
大数据平台架构的层次划分没啥标准,以前笔者曾经做过大数据应用规划,也是非常纠结,因为应用的分类也是横纵交错,后来还是觉得体现一个“能用”原则,清晰且容易理解,能指导建设,这里将大数据平台划分为“五横一纵”。
大数据设计的知识面非常广泛,首先得对apache全家桶的技术有概要了解,比如hadoop基础上的hive、hbase、Spark、MLlib等 也包含storm实时处理 图数据库titan 以及ETL常用工具 R语言
数据分析工作虽然隐藏在业务系统背后,但是具有非常重要的作用,数据分析的结果对决策、业务发展有着举足轻重的作用。