文章插图
ODS层:ODS层主要是保存和来源数据一致的格式
DIM层:DIM层主要用来存储一些基础的维度表 。很少会改动
MID层:MID层主要是用来处理根据业务逻辑和指标口径筛选出来的数据
DW层:DW层根据主题分类 。将数据按照不同的主题建立数据表存储和进行维度化
DM层:DM层主要是面向应用层的建模 。例如一张分析报表需要展示不同维度和指标的分析 。那么根据这些维度和指标从DW层的不同主题分类中的数据关联出来 。形成一张数据表给报表使用 。
四、数据应用
在数据清洗完落地数据仓库之后 。就是怎么去利用这些数据去变现业务价值 。不同行业有不同行业的用法 。在这里小编以自身经历说一下 。小编所在的大数据部门主要是针对金融行业进行数据分析的 。那么大概的应用场景有以下几种:
文章插图
数据分析报表:基于业务需求开发的固定维度和指标的分析报表
文章插图
移动端数据可视化:基于手机端App展示的数据图形可视化应用
数据分析周报 。月报:按周或着按月进行数据汇总分析和预测 。常用于邮件推送 。公众号推送
文章插图
大屏可视化驾驶舱:基于大屏端数据图形可视化 。数据高度汇总 。大而全
文章插图
机器学习风控模型:基于机器学习算法训练出统一规则的模型 。用于贷前 。贷中或者贷后风控评审关卡 。
java语言
文章插图
在这里就不在过多的描述java的作用了 。我们来聊聊java语言在大数据中可以做什么?
从上文大数据架构来看 。java语言主要可以应用于开发数据应用和大数据工具 。例如java web开发数据分析报表 。移动可视化分析 。大屏可视化驾驶舱等 。也可以用于开发一些数据处理过程中用于自动化和便捷开发的工具 。例如调度系统:用于数据清洗作业的自动化依赖调度;补录系统:用于数据缺失值的可视化补录表 。便于数据治理的自动化;发布平台:用于调度作业一键从不同环境之间部署和数据同步审批等 。
【我是蜡笔小添 。专注IT前沿技术和科技资讯分享 。欢迎关注我@蜡笔小添 。我们一起学习交流探讨】
其他观点:
请高兴能回答你的问题!
首先要明确一点 。大数据是一个行业方向 。而Java是一门开发语言
大数据是什么
大数据是近几年的一个专业名词 。以海量数据为核心 。产生数据分析结果的技术处理过程和处理方式 。大数据本身不在于原始数据的多少 。而在于通过大数据分析数据产生之后的应用数据的价值是什么 。
大数据最开始用的技术大家都认为是Hadoop 。但实际上大数据处理的方式多种多样 。处理的技术语言可选性也很多 。Java是其中一种 。但并不是唯一的一种 。像C、GO、Python都可以处理大数据 。
当然基于大数据的数据存储和计算的要求 。云计算和大数据也算是共生共存的 。
Java是什么?
Java是一种跨平台的开发语言 。应用的场景很多 。WEB 。SERVICE 。API 。APP等等 。算是目前各开发语言当中综合能力最强的一种 。目前来看市场中Java开发的就业机会还是最高的 。
说到这里 。我想你应该能足够解答你的问题了 。
如果我的回答对你有帮助 。请记得点赞收藏!
其他观点:
JAVA
java是一种面向对象的程序设计语言 。主要应用于软件的编写 。同时java也继承了C语言大部分语法 。但在使用上java要更加的简单 。因为java的跨平台性和可移植性 。也使得java可以被应用在各个程序的编写和操作系统中 。又因为java是一种开源的编程语言 。所以java可以进行跨平台的编写、开发程序 。
java语言主要涉及的工作方向分为两个方面 。一个方面是进入领导层 。做项目的负责人 。这个就需要有大量的知识储备 。技能要求极高 。同时还要有一定的管理能力 。另一方面就是Java工程师 。从初级工程师一点一点的做到高级工程师 。java语言涉及的工作方向比较的单一 。但是工作岗位需要的人很多 。相对来说还是很好找工作 。
推荐阅读
- 大众召回2023,大众召回事件
- 画壁影评豆瓣 画壁影评总结
- 箱式冷藏车多少钱一台 价格 厂家福田箱式冷藏车
- 夹竹桃天蛾和榆绿天蛾的区别 夹竹桃天蛾幼虫
- 假如给我三天光明读后感500字免费?假如给我三天光明读后感500字左右六年级
- 大暑是入伏第一天吗
- 002002股吧诉讼公告 002002股吧东方财富
- 幼儿营养早餐教案 幼儿营养早餐的做法大全
- 恐怖的名字两个字 恐怖的名字网名