课程简介:某购物电商网站数据分析平台,分为收集数据、数据分析和数据展示三大层面。
其中数据分析主要依据大数据Hadoop生态系统常用组件进行处理,此项目真实的展现了大数据在企业中实际应用。
课程内容(1)文件收集框架Flume①Flume设计架构、原理(三大组件)②Flume初步使用,实时采集数据③实际案例:使用Flume监控数据,实时收集存储HDFS中(2)大数据分析平台架构①数据平台三大模块让技术产生价值!②分析平台业务数据③大数据平台技术选型和搭建配置测试(3)数据分析平台七大业务分析①具体的七大业务分析,针对不同的数据②将数据收到HDFS/Hive/HBase,使用MapReduce和Hive离线分析,其中涉及地域分析、用户相关信息分析及外链分析等。
③依据业务深入MapReduce使用④数据处理时,针对不同问题如何优化调整等
2024/10/9 9:38:49 889B Hadoop
1
apache-flume-1.9.0-bin.tar,kafka_2.11-0.10.1.0,zookeeper-3.3.6_.tar压缩到了一个logs.rar文件中,需要的请下载
2024/5/5 22:54:13 108.69MB kafka zk flume
1
Hadoop数据导入导出:Flume收集数据-安装讲课
2024/4/15 11:55:46 2.18MB flume
1
基于Flume+Kafka+SparkStreaming实现实时监控输出日志的报警系统的SparkStreaming程序代码。
基于Flume+Kafka+SparkStreaming实现实时监控输出日志的报警系统的SparkStreaming程序代码,博客链接:https://blog.csdn.net/linge1995/article/details/81326146SparkStream实时监控
2024/4/15 3:52:10 6.86MB Spark Stream 实时监控 Flume
1
包含hdfs,flume,yarn,kafka,sqoop,streamsql,inceptor,hyperbase,guardian等
2024/2/22 20:40:16 11.52MB 星环 hadoop tdh
1
最近在学习大数据方面的知识,整理了四套资源,分别为:1.尚硅谷,2、北风网大数据,3、传智播客,4、徐老师大数据视频,涵盖的只是包括hadoop,flume,spark,hive,storm,sqoop等。
2024/2/18 13:39:45 286B hadoop 大数据 云计算
1
pdf密码是:dsjsfc总结了大数据开发基础组件如:hadoop,hive,spark,kafka,hbase,数仓,flink,java,es,flume,等面试体
2024/2/4 3:51:39 3.27MB 大数据
1
使用log4j生成日志信息,使用flume对日志进行监控并采集,将采集到的数据放到kafka中使用storm对数据进行清洗和标准化,FilterBolt对error,warning等单词进行过滤,NotifyBolt触发规则之后,会往用户的邮箱发送邮件并发送短信通知用户。
2024/1/5 14:15:33 78KB storm kafka redis 日志监控
1
Hadoop权威指南第四版【英文原版+中文版+配套的代码】,高清版带书签索引,堪称完美,学习价值非常高!!!内容以Hadoop2.x为主,包含一些hadoop的stable版本的新特性,与以前版本比较增加了介绍YARN,Parquet,Flume,Crunch,Spark的章节。
适合于Hadoop初学者。
2023/9/22 2:29:52 195.21MB Hadoop 大数据
1
39天视频资源,网上买的,自己在学,之前买的没课件和安装包,这一份都有,已经学到hbase了,各种搭建资源根据视频来都能跑通,很不错。
2023/8/14 8:20:44 137B hadoop hbase storm spark
1
共 32 条记录 首页 上一页 下一页 尾页
在日常工作中,钉钉打卡成了我生活中不可或缺的一部分。然而,有时候这个看似简单的任务却给我带来了不少烦恼。 每天早晚,我总是得牢记打开钉钉应用,点击"工作台",再找到"考勤打卡"进行签到。有时候因为工作忙碌,会忘记打卡,导致考勤异常,影响当月的工作评价。而且,由于我使用的是苹果手机,有时候系统更新后,钉钉的某些功能会出现异常,使得打卡变得更加麻烦。 另外,我的家人使用的是安卓手机,他们也经常抱怨钉钉打卡的繁琐。尤其是对于那些不太熟悉手机操作的长辈来说,每次打卡都是一次挑战。他们总是担心自己会操作失误,导致打卡失败。 为了解决这些烦恼,我开始思考是否可以通过编写一个全自动化脚本来实现钉钉打卡。经过一段时间的摸索和学习,我终于成功编写出了一个适用于苹果和安卓系统的钉钉打卡脚本。
2024-04-09 15:03 15KB 钉钉 钉钉打卡