我们都知道Hadoop次要由HDFS和MapReduce两个核心部分组成。
其中最底部就是HDFS,它被用来存储Hadoop集群中所有存储节点上的文件。
hadoop的核心子项目——HDFS(分布式文件系统),下面将从HDFS的背景、基本概念开始,步步深入了解HDFS的设计目标、HDFS的基本结构以及HDFS的相关操作等核心知识!随着数据量越来越大,在一个操作系统管辖的范围内存不下了,那么就分配到更多的操作系统管理的磁盘中,但是不方便管理和维护,迫切需要一种系统来管理多台机器上的文件,这就是分布式文件管理系统。
HDFS只是分布式文件管理系统中的一种。
HDFS(HadoopDistributedFi
2019/5/17 2:57:32 442KB HDFS核心技术详解
1
此文档介绍了IBM区块链体系为了让客户尽快放心启用区块链技术,特意安排了影子测试区块链分布式账本技术,让客户可以将数据同时存在传统数据库和区块链上,以比较区块链能否真实产生效果。
2017/5/22 9:26:42 159KB IBM 英文 新技术
1
大量我本人学习的时候下载以及老师给的分布式深度学习的论文,可以学习使用
2021/2/18 13:06:08 23.28MB 分布式深度学 tensor 并行计算 多GPU
1
Postgresql的高可用方案patroni中文说明书。
Patroni(中文:守护神)是一个模板,您可以使用Python创建模板,并使用最大的可访问性来创建自己的定制的高可用性处理方案,该分布式配置商店如ZooKeeper,etcd,Consul或Kubernetes。
希望在数据中心或其他任何地方快速部署HAPostgreSQL的数据库工程师,DBA,DevOps工程师和SRE希望会发现它很有用。
​ 我们将Patroni称为“模板”,因为它远非单一规格的即插即用复制系统。
它将有自己的警告。
明智地使用。
有很多方法可以在PostgreSQL上运行高可用性。
2022/10/28 18:35:42 89KB postgresql 高可用 patroni python
1
为提高基于电力电子逆变接口的分布式电源对电力系统保持稳定所需惯性的贡献,设计了一种基于虚拟同步发电机的新型整体控制策略。
此文件包含微电网虚拟同步发电机的仿真步骤,能够对你了解这个领域很有协助。
很实用
2021/3/12 20:05:49 1MB 微电网 虚拟 同步发电机 仿真
1
第1篇自己动手抓取数据第1章全面剖析网络爬虫1.1抓取网页1.1.1深入理解url1.1.2通过指定的url抓取网页内容1.1.3java网页抓取示例1.1.4处理http状态码1.2宽度优先爬虫和带偏好的爬虫1.2.1图的宽度优先遍历1.2.2宽度优先遍历互联网1.2.3java宽度优先爬虫示例1.2.4带偏好的爬虫1.2.5java带偏好的爬虫示例1.3设计爬虫队列1.3.1爬虫队列1.3.2使用berkeleydb构建爬虫队列1.3.3使用berkeleydb构建爬虫队列示例1.3.4使用布隆过滤器构建visited表1.3.5详解heritrix爬虫队列1.4设计爬虫架构.1.4.1爬虫架构1.4.2设计并行爬虫架构1.4.3详解heritrix爬虫架构1.5使用多线程技术提升爬虫功能1.5.1详解java多线程1.5.2爬虫中的多线程1.5.3一个简单的多线程爬虫实现1.5.4详解heritrix多线程结构1.6本章小结第2章分布式爬虫2.1设计分布式爬虫2.1.1分布式与云计算2.1.2分布式与云计算技术在爬虫中的应用——浅析google的云计算架构2.2分布式存储
2015/10/13 12:08:15 1.96MB 网络爬虫 pdf 网络 自己动手
1
WeiRen和YongcanCao关于多智能体零碎分布式协调控制方向的经典教材。
1
通过对P2P系统的设计,了解P2P这种分布式网络的带来了其在可扩展性、健壮性等方面的优势,进而进一步了解对分布式系统设计的方法与使用。
系统的功能:实现了节点之间资源的下载。
2016/5/27 9:57:26 173KB P2P,文件共享
1
Storm是一个分布式的、高容错的实时计算系统。
Storm适用的场景:  1、Storm可以用来用来处理源源不断的音讯,并将处理之后的结果保存到持久化介质中。
  2、由于Storm的处理组件都是分布式的,而且处理延迟都极低,所以可以Storm可以做为一个通用的分布式RPC框架来使用。
2021/6/21 18:04:08 877KB 流式计算
1
光伏并网逆变器特性的研讨,分布式发电并网,逆变控制
2015/3/20 6:26:19 4.65MB 分布式发电 并网逆变器
1
共 651 条记录 首页 上一页 下一页 尾页
在日常工作中,钉钉打卡成了我生活中不可或缺的一部分。然而,有时候这个看似简单的任务却给我带来了不少烦恼。 每天早晚,我总是得牢记打开钉钉应用,点击"工作台",再找到"考勤打卡"进行签到。有时候因为工作忙碌,会忘记打卡,导致考勤异常,影响当月的工作评价。而且,由于我使用的是苹果手机,有时候系统更新后,钉钉的某些功能会出现异常,使得打卡变得更加麻烦。 另外,我的家人使用的是安卓手机,他们也经常抱怨钉钉打卡的繁琐。尤其是对于那些不太熟悉手机操作的长辈来说,每次打卡都是一次挑战。他们总是担心自己会操作失误,导致打卡失败。 为了解决这些烦恼,我开始思考是否可以通过编写一个全自动化脚本来实现钉钉打卡。经过一段时间的摸索和学习,我终于成功编写出了一个适用于苹果和安卓系统的钉钉打卡脚本。
2024-04-09 15:03 15KB 钉钉 钉钉打卡