不到一百行的代码教你在spark平台中使用scala实现kmeans算法。
简单易懂,大量注释。
适合初学者参考理解。
本程序在intelliJIDEA2016.1.1中编程,运行在spark1.6.1scala2.10.4本地模式下运行成功。
数据集:(其实‘,’前面的1.00.0没用,不过不能删除,除非你修改代码中的数据解析代码)1.0,0.01.10.10.0,2.01.0-1.00.0,2.01.31.01.0,0.01.2-0.51.0,1.01.40.81.0,0.31.51.10.0,2.11.0-1.00.0,1.02.31.31.0,0.20.2-1.51.0,1.01.42.8
2025/12/14 1:22:32 81KB spark scala kmeans
1
DataFrameAPI的引入一改RDDAPI高冷的FP姿态,令Spark变得更加平易近人。
外部数据源API体现出的则是兼容并蓄,SparkSQL多元一体的结构化数据处理能力正在逐渐释放。
关于作者:连城,Databricks工程师,Sparkcommitter,SparkSQL主要开发者之一。
在4月18日召开的2015Spark技术峰会上,连城将做名为“四两拨千斤——SparkSQL结构化数据分析”的主题演讲。
自2013年3月面世以来,SparkSQL已经成为除SparkCore以外最大的Spark组件。
除了接过Shark的接力棒,继续为Spark用户提供高性能的SQLonHadoop解决方案
1
hbase-spark-1.0.1_spark-3.0.1_2.jar
2025/11/27 16:23:41 496KB
1
全套大数据视频,从入门,进阶,大师都有。
培训机构3000多块钱买的;
linux基础,shell脚本,hadoop,hive,flume,oozie,sqoop,hue,hbase,storm,scala,spark,storm.
2025/11/25 10:06:29 11KB 大数据
1
这是一个ApacheSpark的演讲ppt,全都是英文的,制作时间是2020年的。
包含Spart的最近状态,RDD和其生态。
mypresentationonRDD&Spark.pptx
2025/11/20 19:02:04 4.28MB ppt spark 大数据
1
spark部署搭建的安装包,spark-1.6.0-bin-hadoop2.4.tgz,需要的朋友可以下载使用
2025/10/17 12:30:45 271.71MB spark hadoop
1
适合初学大数据的学员,里面详细记载了从安装到开发的过程
2025/10/17 9:23:57 9.83MB spark scala 大数据
1
互联网的迅速发展,为电子商务兴起提供了肥沃的土壤。
2014年,中国电子商务市场交易规模达到13.4万亿元,同比增长31.4%。
其中,B2B电子商务市场交易额达到10万亿元,同比增长21.9%。
这一连串高速增长的数字背后,不法分子对互联网资产的觊觎,针对电商行业的恶意行为也愈演愈烈,这其中,最典型的就是黄牛抢单囤货和商家恶意刷单。
黄牛囤货让广大正常用户失去了商家给予的优惠让利;
而商家的刷单刷好评,不仅干扰了用户的合理购物选择,更是搅乱了整个市场秩序。
京东作为国内电商的龙头企业,在今天遭受着严酷的风险威胁。
机器注册账号、恶意下单、黄牛抢购、商家刷单等等问题如果不被有效阻止,会给京东和消费者带来难以
1
权威版Spark使用指南,ApacheSpark是专为大规模数据处理而设计的快速通用的计算引擎;
Spark是一种与Hadoop相似的开源集群计算环境,但是两者之间还存在一些不同之处,这些有用的不同之处使Spark在某些工作负载方面表现得更加优越,换句话说,Spark启用了内存分布数据集,除了能够提供交互式查询外,它还可以优化迭代工作负载。
2025/9/20 15:43:43 7.88MB 大数据 spark
1
spark_in_action
2025/9/1 6:33:43 29KB Scala
1
共 201 条记录 首页 上一页 下一页 尾页
在日常工作中,钉钉打卡成了我生活中不可或缺的一部分。然而,有时候这个看似简单的任务却给我带来了不少烦恼。 每天早晚,我总是得牢记打开钉钉应用,点击"工作台",再找到"考勤打卡"进行签到。有时候因为工作忙碌,会忘记打卡,导致考勤异常,影响当月的工作评价。而且,由于我使用的是苹果手机,有时候系统更新后,钉钉的某些功能会出现异常,使得打卡变得更加麻烦。 另外,我的家人使用的是安卓手机,他们也经常抱怨钉钉打卡的繁琐。尤其是对于那些不太熟悉手机操作的长辈来说,每次打卡都是一次挑战。他们总是担心自己会操作失误,导致打卡失败。 为了解决这些烦恼,我开始思考是否可以通过编写一个全自动化脚本来实现钉钉打卡。经过一段时间的摸索和学习,我终于成功编写出了一个适用于苹果和安卓系统的钉钉打卡脚本。
2024-04-09 15:03 15KB 钉钉 钉钉打卡