​​【信息科学与工程学】【数据科学】数据科学领域 第十二篇 大数据主要算法01

大数据计算、存储、网络精细化分类列表一、大数据计算引擎与框架1.1 批处理计算分类代表系统计算模型数据模型容错机制适用场景MapReduce类Apache Hadoop MRMap-Shuffle-Reduce键值对任务重试离线ETLDiscoMap-Reduce键值对节点重试科学计算DAG类Apache SparkRDD/DAG弹性分布式数据集血缘+检查点交互查询Apache TezDAG记录流任务重试Hive优化