1 大数据技术概论
大数据存储管理：
- 弹性扩展、容错技术
- 分层存储、索引（Hash、B树、倒排）
- 弱并发一致性管理
单一计算模式不能涵盖所有
大数据计算需求
• MapReduce并行计算模式
• 分布内存抽象RDD
• 图计算模式
• 流式计算
硬件发展速度
存储墙: CPU性能每两年速度翻倍、硬盘性能每六年速度翻倍
数据访问速度： 磁盘容量增长远快于存储访问带宽
数据分发
并行计算框架发展
1、Java av47103781
2、Spring av47103781
3、Spring Mvc av47176832
4、MyBatis av47228830
5、Spring Boot av47230137
6、Spring Cloud av47228830
7、Dubbo av47009143
8、MySQL av47702905
9、Redis av47423174
10、MongoDB av47425352
11、Zookeeper av47773419
12、Kafka av47773990
13、Linux av47701443
14、Docker av47715282
15、Maven av47382482
16、Git av47701443
17、Jenkins av47714706
18、IDEA av47382482