本文主要是介绍数据治理之考评环节,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!
考评的流程(批处理)
- 周期调度,每天一次:采集hive, hdfs元数据
- 存放到mysql中的dga库的metainfo表
- 手动通过管理页面补充辅助信息
- 指标考评
- 读取要考评的表的元数据及辅助信息
- 读取要考评的指标
- 对每张表的每个指标逐个进行考评
- 保存考评结果
代码生成后
每个service和mapper包里面的类都需要加@DS(“dga”)
bean对象里面的字段不是平铺的
这个问题可以转换为,查询结果如何封装到一个有父子嵌套的对象中,需要借助xml来配置映射关系。
- 要把父子对象中同名的字段进行重命名,避免混淆
- @ResultMap用来关联xml的映射文件
- xml 来描述子对象的属性映射
- auto_mapping可以帮助省略所有蛇型和驼峰格式的映射
- application.properties中要声明xml位置和auto_mapping范围
- 把xml拷贝到resource下的mapper目录
表格
靠左的是字符串,靠右的是数字
设计模式
- 对扩展开放,对修改关闭
- 面对各种需求变更,代码变化
- 尽量增加类,而不是修改已有的类
能否通过字符串动态的加载某个类的实例并调用他的方法
- 反射
- spring容器动态装载
- 创建一个springBeanProvider类
- 实现ApplicationContextAware接口
- 接收框架的applicationContext到本地变量中
- 然后在getBean方法中可以根据组件名称和类名来发放组件
- 整个provider添加一个@Component注解
这篇关于数据治理之考评环节的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!