流式计算主要针对unboundeddata(无界数据流)进行实时的计算,将计算结果快速的输出或者修正。
这部分将分为三个小节来介绍。
第一,介绍大数据系统发展史,包括初始的批处理到现在比较成熟的流计算;
第二,为大家简单对比下批处理和流处理的区别;
第三,介绍流式计算里面的关键问题,这是每个优秀的流式计算引擎所必须面临的问题。
上图是2003年到2018年大数据系统的发展史,看看是怎么一步步走到流式计算的。
2003年,Google的MapReduce横空出世,通过经典的Map&Reduce定义和系统容错等保障来方便处理各种大数据。
很快就到了Hadoop,被认为是开源版的MapReduce,带动了整个ap
2023/7/16 22:52:42 448KB 快手基于ApacheFlink的优化实践
1
使用Hadoop,Spark技术是知其然,阅读产生这些技术的论文是知其所以然。
2023/7/14 2:07:58 9.98MB 大数据 云计算 分布式
1
大数据教程之hadoop教程.zip
2023/7/12 6:27:44 2.56MB 大数据 hadoop
1
lzo.jar此jar不易找,刚生成的,foryourconvenience
2023/7/10 18:35:34 184KB lzo jar hadoop
1
hadoop集群安装,离线安装详细指导书
2023/7/10 17:45:18 2.71MB hadoop ambari hdp 大数据
1
在Eclipse下开发Hadoop可能会用的一个插件。
该插件适用于Hadoop2.7.6版本,其他版本可能不适用。
2023/7/10 3:01:31 33.18MB Hadoop Eclipse
1
hadoop-eclipse-plugin-1.0.0(5个版本),足够满足你的需求,你可以选择合适你的。
2023/7/7 16:34:26 22.77MB hadoop-eclipse-plugin-1.0.0
1
Hadoop课程实验和报告——Hadoop安装实验报告
2023/7/5 11:34:56 247KB Hadoop安装
1
BigSQL,是IBM依托其在RDBMS领域多年的技术积累,并结合当前大数据领域许多先进技术推出的SQL-on-Hadoop产品。
与市场上其它产品如Hive不同,BigSQL通过在Hadoop上运行大规模并行处理(MPP)SQL引擎来替代MapReduce,极大地提高了查询速度。
BigSQL以其无与伦比的SQL兼容性、丰富的企业及
1
Hadoop-TheDefinitiveGuide,4thEdition
2023/7/1 1:03:37 11.77MB Hadoop Guide 4th
1
共 412 条记录 首页 上一页 下一页 尾页
在日常工作中,钉钉打卡成了我生活中不可或缺的一部分。然而,有时候这个看似简单的任务却给我带来了不少烦恼。 每天早晚,我总是得牢记打开钉钉应用,点击"工作台",再找到"考勤打卡"进行签到。有时候因为工作忙碌,会忘记打卡,导致考勤异常,影响当月的工作评价。而且,由于我使用的是苹果手机,有时候系统更新后,钉钉的某些功能会出现异常,使得打卡变得更加麻烦。 另外,我的家人使用的是安卓手机,他们也经常抱怨钉钉打卡的繁琐。尤其是对于那些不太熟悉手机操作的长辈来说,每次打卡都是一次挑战。他们总是担心自己会操作失误,导致打卡失败。 为了解决这些烦恼,我开始思考是否可以通过编写一个全自动化脚本来实现钉钉打卡。经过一段时间的摸索和学习,我终于成功编写出了一个适用于苹果和安卓系统的钉钉打卡脚本。
2024-04-09 15:03 15KB 钉钉 钉钉打卡