2018数据库中国技术大会PPT，讨论的话题大数据和数据库。
涉及的Hadoop、Flink、MySQL、oracle等共22个专场主题
涉及的Hadoop、Flink、MySQL、oracle等共22个专场主题
2023/6/28 21:39:33
187.03MB
1
Storm官方网站有段简介Storm是一个免费并开源的分布式实时计算系统。
利用Storm可以很容易做到可靠地处理无限的数据流，像Hadoop批量处理大数据一样，Storm可以实时处理数据。
Storm简单，可以使用任何编程语言。
利用Storm可以很容易做到可靠地处理无限的数据流，像Hadoop批量处理大数据一样，Storm可以实时处理数据。
Storm简单，可以使用任何编程语言。
2023/6/13 0:35:05
12.76MB
1
Spark是UCBerkeleyAMPlab所开源的类HadoopMapReduce的通用的并行计算框架，Spark基于mapreduce算法实现的分布式计算，拥有HadoopMapReduce所具有的优点；
但不同于MapReduce的是Job中间输出和结果可以保存在内存中，从而不再需要读写HDFS，因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的mapreduce的算法。
其架构如下图所示：Spark的中间数据放到内存中，对于迭代运算效率更高。
Spark更适合于迭代运算比较多的ML和DM运算。
因为在Spark里面，有RDD的抽象概念。
Spark比Hadoop更通用。
Spark提供的数
但不同于MapReduce的是Job中间输出和结果可以保存在内存中，从而不再需要读写HDFS，因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的mapreduce的算法。
其架构如下图所示：Spark的中间数据放到内存中，对于迭代运算效率更高。
Spark更适合于迭代运算比较多的ML和DM运算。
因为在Spark里面，有RDD的抽象概念。
Spark比Hadoop更通用。
Spark提供的数
2023/6/4 19:35:56
306KB
1
通过对Hadoop分布式计算平台最核心的分布式文件系统HDFS、MapReduce处理过程，以及数据仓库工具Hive和分布式数据库Hbase的介绍，基本涵盖了Hadoop分布式平台的所有技术核心。
通过这一阶段的调研总结，从内部机理的角度详细分析，HDFS、MapReduce、Hbase、Hive是如何运行，以及基于Hadoop数据仓库的构建和分布式数据库内部具体实现。
如有不足，后续及时修改。
整个Hadoop的体系结构主要是通过HDFS来实现对分布式存储的底层支持，并通过MR来实现对分布式并行任务处理的程序支持。
HDFS采用主从（Master/Slave）结构模型，一个HDFS集群是由一个Nam
通过这一阶段的调研总结，从内部机理的角度详细分析，HDFS、MapReduce、Hbase、Hive是如何运行，以及基于Hadoop数据仓库的构建和分布式数据库内部具体实现。
如有不足，后续及时修改。
整个Hadoop的体系结构主要是通过HDFS来实现对分布式存储的底层支持，并通过MR来实现对分布式并行任务处理的程序支持。
HDFS采用主从（Master/Slave）结构模型，一个HDFS集群是由一个Nam
2023/6/2 11:51:27
359KB
1
hive编写udf至少需要引入的jar包：hive-exec-xxx.jar和hadoop-core-xxx.jar
2023/5/31 15:02:01
16.19MB
1
即便是菜鸟也可以自己搭建Hadoop集群的教程，Linux上CentOS7安装CDH5.12.1进行集群搭建。
以及遇到的问题总结。
和大家分享，共同进步。
本来不想设置分数，但是最低就是1分。
。
。
。
。
以及遇到的问题总结。
和大家分享，共同进步。
本来不想设置分数，但是最低就是1分。
。
。
。
。
2023/5/31 10:42:26
4.85MB
1
pdf密码dsjsfcHive是基于Hadoop的一个数据堆栈货物，能够将结构化的数据文件映射为一张数据库表，并提供类SQL盘问成果。
2023/5/15 3:20:20
2.06MB
1
在日常工作中，钉钉打卡成了我生活中不可或缺的一部分。然而，有时候这个看似简单的任务却给我带来了不少烦恼。
每天早晚，我总是得牢记打开钉钉应用，点击"工作台"，再找到"考勤打卡"进行签到。有时候因为工作忙碌，会忘记打卡，导致考勤异常，影响当月的工作评价。而且，由于我使用的是苹果手机，有时候系统更新后，钉钉的某些功能会出现异常，使得打卡变得更加麻烦。
另外，我的家人使用的是安卓手机，他们也经常抱怨钉钉打卡的繁琐。尤其是对于那些不太熟悉手机操作的长辈来说，每次打卡都是一次挑战。他们总是担心自己会操作失误，导致打卡失败。
为了解决这些烦恼，我开始思考是否可以通过编写一个全自动化脚本来实现钉钉打卡。经过一段时间的摸索和学习，我终于成功编写出了一个适用于苹果和安卓系统的钉钉打卡脚本。
2024-04-09 15:03
15KB