Flink总结 发表于 2020-10-20 | 分类于 Flink | | 阅读次数: Flink总结1. 状态一致性 at most once at least once exactly once 2. 端到端的状态一致性 source端(可重设数据的读取位置) kafka 可以根据offset回放数据 内部保证(checkpoint) 每隔一段时间去做一次ck,jobMana ... 阅读全文 »
数仓架构 发表于 2020-12-13 | 分类于 DW | | 阅读次数: 数仓架构1. 数据仓库特点: 面向主题 电商,流量,交易。。。 集成 各个数据源:数据库,日志,爬虫。。。 相对稳定 主要用来查询,不是用来删除和修改 反映历史变化 N年的记录,每个月、每个季度、每年的汇总记录 管理决策 分析数据 -> 指标 数据湖指的是所有的原始数 ... 阅读全文 »
Java 容器 发表于 2020-12-09 | 分类于 Java , Collection | | 阅读次数: Java 容器 Collection List:可以重复 CopyOnWriteArrayList Vector ArrayList LinkedList Set:不可重复 HashSet & LinkedHashSet:HashSet无序,哈希表;LinkedHashSet 通过链表可 ... 阅读全文 »
Java 引用 发表于 2020-12-08 | 分类于 Java | | 阅读次数: Java 引用1. 引用类型 强引用 栈 -> 堆 只要堆中对象可达,就不会被回收 软引用 需要 import SoftReference 栈 -> 堆中会创建一个 SoftReference对象,这个对象里会有一个value -> 这个value指向了堆中的一个对象,也就是 ... 阅读全文 »
LFU 发表于 2020-12-08 | 分类于 Java , LFU | | 阅读次数: LFULFU(Least Frequently Used ,最近最少使用算法) 算法描述: 12345678class LFUCache { // 构造容量为 capacity 的缓存 public LFUCache(int capacity) {} ... 阅读全文 »