平台部分主要是hadoop分布式系统,基于该系统融合了组件Spark,Hbase,Hive,Sqoop,Mahout等。
继而进行相关的数据分析该项目主要分为以下几部分:1:数据采集主要是基于豆瓣电影的数据,进行分析,所以首先要爬取相关的电影数据,对应的源代码在DouBan_Spider目录下,主要是采用Python+BeautifulSoup+urllib进行数据采集2:ETL预处理3:数据分析4:可视化代码封装完好,适用于对作影视感情分析,影评分析,电影类型分析,推荐系统的建立
2023/9/29 13:13:36 10.05MB 爬虫 数据处理 数据分析 可视化
1
基于Hbase的网站日志分析系统(附带web展示页面)基于Hbase的网站日志分析系统(附带web展示页面)基于Hbase的网站日志分析系统(附带web展示页面)
2023/9/29 8:58:10 2.37MB 日志分析 hadoop hive mapreduce
1
可以连接各种类型数据库,比如:mysql,oracle,postgresql,sqlserver,DB2等等,包含使用phoenix连接hbase库。
支持对数据库的各种操作。
2023/8/30 4:11:43 58.56MB squirrel sql phoenix hbase
1
39天视频资源,网上买的,自己在学,之前买的没课件和安装包,这一份都有,已经学到hbase了,各种搭建资源根据视频来都能跑通,很不错。
2023/8/14 8:20:44 137B hadoop hbase storm spark
1
spark向Hbase添加数据时的依赖jar包,Hbase版本1.3
2023/7/27 22:13:30 80KB insert to hbase
1
springboot搭建的hbase可视化界面支持hbase的建表与删除支持根据rowkey查询数据
2023/7/19 12:50:44 968KB hbase
1
hbasephoenix客户端连接jdbc的jar包,SQuirreLSQLClient,DbVisualizer等客户端连接hbase配置使用
2023/7/19 3:05:39 128.85MB HBASE PHOENIX
1
里面包含了所有hbase用到的所有jar包,希望能够帮到正在学习hbase开发的小伙伴
2023/6/7 18:55:03 71.73MB hbase hdfs hadoop
1
通过对Hadoop分布式计算平台最核心的分布式文件系统HDFS、MapReduce处理过程,以及数据仓库工具Hive和分布式数据库Hbase的介绍,基本涵盖了Hadoop分布式平台的所有技术核心。
通过这一阶段的调研总结,从内部机理的角度详细分析,HDFS、MapReduce、Hbase、Hive是如何运行,以及基于Hadoop数据仓库的构建和分布式数据库内部具体实现。
如有不足,后续及时修改。
整个Hadoop的体系结构主要是通过HDFS来实现对分布式存储的底层支持,并通过MR来实现对分布式并行任务处理的程序支持。
HDFS采用主从(Master/Slave)结构模型,一个HDFS集群是由一个Nam
2023/6/2 11:51:27 359KB 知识分享:详解Hadoop核心架构
1
漫衍式与云盘算大作业1)、底层为HDFS存储,数据存储在HBase漫衍式数据库中,实现数据库以及表的方案与建树。
2)实现对于数据的削减、盘问等底子的数据库操作。
3)使用MapReduce编程模子实现为下场的盘算以及下场揭示。
2023/5/11 22:05:38 228KB 分布式与云计算大作业
1
共 92 条记录 首页 上一页 下一页 尾页
在日常工作中,钉钉打卡成了我生活中不可或缺的一部分。然而,有时候这个看似简单的任务却给我带来了不少烦恼。 每天早晚,我总是得牢记打开钉钉应用,点击"工作台",再找到"考勤打卡"进行签到。有时候因为工作忙碌,会忘记打卡,导致考勤异常,影响当月的工作评价。而且,由于我使用的是苹果手机,有时候系统更新后,钉钉的某些功能会出现异常,使得打卡变得更加麻烦。 另外,我的家人使用的是安卓手机,他们也经常抱怨钉钉打卡的繁琐。尤其是对于那些不太熟悉手机操作的长辈来说,每次打卡都是一次挑战。他们总是担心自己会操作失误,导致打卡失败。 为了解决这些烦恼,我开始思考是否可以通过编写一个全自动化脚本来实现钉钉打卡。经过一段时间的摸索和学习,我终于成功编写出了一个适用于苹果和安卓系统的钉钉打卡脚本。
2024-04-09 15:03 15KB 钉钉 钉钉打卡