Spark-streaming在京东的项目实践，是SparkStreaming的一个很成功的使用
2018/7/19 12:58:17
1.83MB
1
spark-pac4j项目是用于SparkjavaWeb应用程序和Web服务的简单而强大的安全性库，它支持身份验证和授权，还支持注销和会话固定和CSRF保护等高级功能。
它基于Java8，Spark2.9和v4。
它在Apache2许可下可用。
代表认证机制。
它执行登录过程并返回用户配置文件。
间接客户端用于Web应用程序身份验证，而直接客户端用于Web服务身份验证：▸OAuth-SAML-CAS-OpenIDConnect-HTTP-OpenID-GoogleAppEngine-LDAP-SQL-JWT-MongoDB-CouchDB-Kerberos-IP地址-Kerberos（SPNEGO）-RESTAPI者旨在检查已认证的用户个人资料或当前Web上下文中的授权：▸角色/权限-匿名/记住我/（完全）已认证-配置文件类型，属性-CORS-CSRF-安全标头-IP地址，HTTP方法定义能否必须应用SecurityFilter并将其用于其他Web处理根据客户端和授权者的配置，SecurityFilter通过检查用户能否已通过身份验证以及授权能否有
它基于Java8，Spark2.9和v4。
它在Apache2许可下可用。
代表认证机制。
它执行登录过程并返回用户配置文件。
间接客户端用于Web应用程序身份验证，而直接客户端用于Web服务身份验证：▸OAuth-SAML-CAS-OpenIDConnect-HTTP-OpenID-GoogleAppEngine-LDAP-SQL-JWT-MongoDB-CouchDB-Kerberos-IP地址-Kerberos（SPNEGO）-RESTAPI者旨在检查已认证的用户个人资料或当前Web上下文中的授权：▸角色/权限-匿名/记住我/（完全）已认证-配置文件类型，属性-CORS-CSRF-安全标头-IP地址，HTTP方法定义能否必须应用SecurityFilter并将其用于其他Web处理根据客户端和授权者的配置，SecurityFilter通过检查用户能否已通过身份验证以及授权能否有
2016/1/14 19:39:21
12KB
1
这一章想讲一下Spark的缓存是如何实现的。
这个persist方法是在RDD里面的，所以我们直接打开RDD这个类。
它调用SparkContext去缓存这个RDD，追杀下去。
它竟然是用一个HashMap来存的，具体看这个map的类型是TimeStampedWeakValueHashMap[Int,RDD[_]]类型。
把存进去的值都隐式转换成WeakReference，然后加到一个内部的一个ConcurrentHashMap里面。
这里貌似也没干啥，这是有个鸟蛋用。
。
大神莫喷，知道干啥用的人希望告诉我一下。
现在并没有保存，等到真正运行Task运行的时候才会去缓存起来。
入口在Task的runTask方
这个persist方法是在RDD里面的，所以我们直接打开RDD这个类。
它调用SparkContext去缓存这个RDD，追杀下去。
它竟然是用一个HashMap来存的，具体看这个map的类型是TimeStampedWeakValueHashMap[Int,RDD[_]]类型。
把存进去的值都隐式转换成WeakReference，然后加到一个内部的一个ConcurrentHashMap里面。
这里貌似也没干啥，这是有个鸟蛋用。
。
大神莫喷，知道干啥用的人希望告诉我一下。
现在并没有保存，等到真正运行Task运行的时候才会去缓存起来。
入口在Task的runTask方
2020/8/17 19:09:26
170KB
1
这一章想讲一下Spark的缓存是如何实现的。
这个persist方法是在RDD里面的，所以我们直接打开RDD这个类。
它调用SparkContext去缓存这个RDD，追杀下去。
它竟然是用一个HashMap来存的，具体看这个map的类型是TimeStampedWeakValueHashMap[Int,RDD[_]]类型。
把存进去的值都隐式转换成WeakReference，然后加到一个内部的一个ConcurrentHashMap里面。
这里貌似也没干啥，这是有个鸟蛋用。
。
大神莫喷，知道干啥用的人希望告诉我一下。
现在并没有保存，等到真正运行Task运行的时候才会去缓存起来。
入口在Task的runTask方
这个persist方法是在RDD里面的，所以我们直接打开RDD这个类。
它调用SparkContext去缓存这个RDD，追杀下去。
它竟然是用一个HashMap来存的，具体看这个map的类型是TimeStampedWeakValueHashMap[Int,RDD[_]]类型。
把存进去的值都隐式转换成WeakReference，然后加到一个内部的一个ConcurrentHashMap里面。
这里貌似也没干啥，这是有个鸟蛋用。
。
大神莫喷，知道干啥用的人希望告诉我一下。
现在并没有保存，等到真正运行Task运行的时候才会去缓存起来。
入口在Task的runTask方
2018/4/8 12:48:07
170KB
1
大数据hadoopsparkhbaseambari全套视频教程（购置的付费视频）
2018/10/24 2:15:10
47B
1
大数据hadoopsparkhbaseambari全套视频教程（购置的付费视频）
2019/1/3 7:27:21
47B
1
2021贺岁大数据入门spark3.0入门到精通资源简介：本课程中使用官方在2020年9月8日发布的Spark3.0系列最新稳定版：Spark3.0.1。
共课程包含9个章节：Spark环境搭建，SparkCore，SparkStreaming，SparkSQL，StructuredStreaming，Spark综合案例，Spark多语言开发，Spark3.0新特性，Spark功能调优。
共课程包含9个章节：Spark环境搭建，SparkCore，SparkStreaming，SparkSQL，StructuredStreaming，Spark综合案例，Spark多语言开发，Spark3.0新特性，Spark功能调优。
2015/8/22 23:45:22
595.06MB
1
在日常工作中，钉钉打卡成了我生活中不可或缺的一部分。然而，有时候这个看似简单的任务却给我带来了不少烦恼。
每天早晚，我总是得牢记打开钉钉应用，点击"工作台"，再找到"考勤打卡"进行签到。有时候因为工作忙碌，会忘记打卡，导致考勤异常，影响当月的工作评价。而且，由于我使用的是苹果手机，有时候系统更新后，钉钉的某些功能会出现异常，使得打卡变得更加麻烦。
另外，我的家人使用的是安卓手机，他们也经常抱怨钉钉打卡的繁琐。尤其是对于那些不太熟悉手机操作的长辈来说，每次打卡都是一次挑战。他们总是担心自己会操作失误，导致打卡失败。
为了解决这些烦恼，我开始思考是否可以通过编写一个全自动化脚本来实现钉钉打卡。经过一段时间的摸索和学习，我终于成功编写出了一个适用于苹果和安卓系统的钉钉打卡脚本。
2024-04-09 15:03
15KB