包含hdfs,flume,yarn,kafka,sqoop,streamsql,inceptor,hyperbase,guardian等
2024/2/22 20:40:16
11.52MB
1
本人亲手操作搭建Hadoop集群成功，并通过Eclipse进行MapReduce程序的开发，步骤详细完整，在相关过程中配有完整代码和解释，全程无误，只需复制粘贴即可，小白新手按步骤一步一步来也能搭建Hadoop集群成功并进行MapReduce程序开发！！！喜欢请关注本人空间动态，并会一直更新相关大数据资源和文章，谢谢！
2024/2/20 2:43:47
12.37MB
1
最近在学习大数据方面的知识，整理了四套资源，分别为:1.尚硅谷,2、北风网大数据,3、传智播客,4、徐老师大数据视频，涵盖的只是包括hadoop,flume,spark,hive,storm,sqoop等。
2024/2/18 13:39:45
286B
1
windows安装spark2软件包包括：1.spark-2.3.0-bin-hadoop2.7.tgzspark的压缩包2.scala-2.11.8.zipscala的压缩包3.hadoop-2.7.1.tar.gz基础hadoop包4.apache-maven-3.6.3-bin.zipmaven压缩包5.winutils-master.zip解决windows下spark的问题(可以不用)
2024/2/14 13:20:25
459.62MB
1
ThisrepositorycontainsanumberofshadeddependenciesfortheApacheFlinkproject.ThepurposeofthesedependenciesistoprovideasingleinstanceofashadeddependencyintheFlinkdistribution,insteadofeachindividualmoduleshadingthedependency.Withtheexceptionofflink-shaded-hadoop-2,shadeddependenciescontainedheredonotexposeanytransitivedependencies.Theymayormaynotbeself-contained.Whenusingthesedependenciesitisrecommendedtoworkdirectlyagainstt
2024/2/10 1:30:47
41.45MB
1
解决org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String;I)Z问题
2024/2/8 21:22:45
16.71MB
1
维护HDFS文件系统中文件和目录的信息，分为内存元数据和元数据文件两种。
NameNode维护整个元数据。
HDFS实现时，没有采用定期导出元数据的方法，而是采用元数据镜像文件（FSImage）+日子文件（edits）的备份机制。
寻路径流程：路径信息bocks[]triplets[]Client------------》INode---------------------》BlockInfo--------------------------》DataNode。
INode：文件的基本元素：文件和目录BlockInfo：文件内容对象DatanodeDescriptor:具体存储对象。
3、FSImag
NameNode维护整个元数据。
HDFS实现时，没有采用定期导出元数据的方法，而是采用元数据镜像文件（FSImage）+日子文件（edits）的备份机制。
寻路径流程：路径信息bocks[]triplets[]Client------------》INode---------------------》BlockInfo--------------------------》DataNode。
INode：文件的基本元素：文件和目录BlockInfo：文件内容对象DatanodeDescriptor:具体存储对象。
3、FSImag
2024/2/6 12:58:57
644KB
1
在日常工作中，钉钉打卡成了我生活中不可或缺的一部分。然而，有时候这个看似简单的任务却给我带来了不少烦恼。
每天早晚，我总是得牢记打开钉钉应用，点击"工作台"，再找到"考勤打卡"进行签到。有时候因为工作忙碌，会忘记打卡，导致考勤异常，影响当月的工作评价。而且，由于我使用的是苹果手机，有时候系统更新后，钉钉的某些功能会出现异常，使得打卡变得更加麻烦。
另外，我的家人使用的是安卓手机，他们也经常抱怨钉钉打卡的繁琐。尤其是对于那些不太熟悉手机操作的长辈来说，每次打卡都是一次挑战。他们总是担心自己会操作失误，导致打卡失败。
为了解决这些烦恼，我开始思考是否可以通过编写一个全自动化脚本来实现钉钉打卡。经过一段时间的摸索和学习，我终于成功编写出了一个适用于苹果和安卓系统的钉钉打卡脚本。
2024-04-09 15:03
15KB