Kettle是一种开源的ETL处理方案,书中介绍了如何使用PDI来实现数据的剖析、清洗、校验、抽取、转换、加载等各类常见的ETL类工作。
除了ODS/DW类比较大型的应用外,Kettle实际还可以为中小企业提供灵活的数据抽取和数据处理的功能。
Kettle除了支持各种关系型数据库、HBase、MongoDB这样的NoSQL数据源外,它还支持Excel、Access这类小型的数据源。
并且通过插件扩展,Kettle可以支持各类数据源。
本书详细介绍了Kettle可以处理的数据源,而且详细介绍了如何使用Kettle抽取增量数据。
Kettle的数据处理功能也很强大,除了选择、过滤、分组、连接、排序这些常用的功能外,Kettle里的Java表达式、正则表达式、Java脚本、Java类等功能都非常灵活而强大,都非常适合于各种数据处理功能。
本书也使用了一些篇幅介绍Kettle这些灵活的数据处理功能。
2021/5/2 9:07:11 116.38MB Pentaho Kettle Solutions 中英版
1
开放及时数据处理平台TwitterStorm源码
2017/3/25 14:36:01 657KB twitter 源码软件 storm 大数据
1
Storm是Twitter开源的分布式及时大数据处理框架,被业界称为及时版Hadoop
2021/7/27 2:14:02 12KB storm 分布式 实时处理框架 大数据
1
本书是作者在总结多年教学与研究经验的基础上编写完成,主要引见了ArcGIS的使用基础、ArcGIS空间分析工具以及地学分析实例。
内容包括:ArcGIS简介、ArcMAP基础操作、数据的创建与编辑、数据变换、矢量数据的空间分析、栅格数据的空间分析、三维分析、空间统计分析、水文分析以及空间分析建模等。
此外,本书还配有具典型性意义的实例分析及大量的随书练习材料,并在光盘中辅以相应数据,以便于学生课后练习和复习。
???本书强调科学性、系统性、实用性与易读性的结合,可作为高等院校地理信息系统、地理学、测绘学等相关学科学生的教材,也可为科学研究、工程设计、规划管理等部门的科技人员提供参考。
?目录前言第一章导论 1.1地理信息系统  1.1.1基本概念  1.1.2GIS系统构成  1.1.3GIS功能与应用  1.1.4GIS技术与发展 1.2GIS空间分析  1.2.1空间分析  1.2.2基于GIS的空间分析  1.2.3常用GIS平台空间分析功能比较 1.3ArcGIS9概述  1.3.1ArcGIS9体系结构  1.3.2ArcGIS9软件特色  1.3.3ArcGIS9空间分析第二章ArcGIS应用基础 2.1ArcMap基础  2.1.1ArcMap的窗口组成  2.1.2新地图文档创建  2.1.3数据层的加载  2.1.4数据层的基本操作  2.1.5数据层的保存 2.2ArcCatalog应用基础  2.2.1ArcCatalog基础操作  2.2.2目录内容浏览  2.2.3数据搜索  2.2.4地图与图层操作  2.2.5地理数据输出 2.3Geoprocessing空间处理框架  2.3.1空间处理框架的基本引见  2.3.2ArcToolbox应用基础  2.3.3ArcToolBox内容简介第三章空间数据的采集与组织 3.1Shapefile文件创建  3.1.1创建Shapefile和dBASE表  3.1.2添加和删除属性项 3.2Coverage文件创建  3.2.1创建新的Coverage和INFO表  3.2.2建立拓扑  3.2.3定义Coverage的坐标系统  3.2.4Coverage维护操作 3.3Geodatabase数据库创建  3.3.1Geodatabase概述  3.3.2Geodatabase建立的一般过程  3.3.3创建一个新的Geodatabase  3.3.4建立数据库中的基本组成项  3.3.5向Geodatabase加载数据  3.3.6进一步定义数据库 3.4数据编辑  3.4.1图形编辑  3.4.2属性编辑 3.5实例与练习  3.5.1某地区地块的拓扑关系建立  3.5.2某市区几何网络的建立第四章空间数据的转换与处理 4.1投影变换  4.1.1定义投影  4.1.2投影变换  4.1.3数据变换 4.2数据格式转换  4.2.1数据结构转换  4.2.2数据格式转换 4.3数据处理  4.3.1数据裁切  4.3.2数据拼接  4.3.3数据提取 4.4练习:数据更新变换第五章空间数据的可视化表达 5.1数据符号化  5.1.1矢量数据符号化  5.1.2栅格数据符号化 5.2专题地图编制  5.2.1版面设计  5.2.2制图数据操作  5.2.3地图标注……第六章GIS空间分析导论第七章矢量数据的空间分析第八章栅格数据的空间分析第九章三维分析第十章地统计分析第十一章水文分析第十二章空间分析建模参考文献
2018/11/15 4:06:44 16.27MB ARCGIS 信息系统
1
1、序列的卷积和运算及其过程的可视化呈现;
1.1实验目的和要求 1.2实验原理 1.3实验仪器设备 1.4实验过程(内容、步骤、原始数据) 1.5实验结果(数据处理、结果分析、问题讨论及总结) 2、图像/语音信号的频谱分析;
2.1实验目的和要求 2.2实验原理 2.3实验仪器设备 2.4实验过程(内容、步骤、原始数据)2.5实验结果(数据处理、结果分析、问题讨论及总结) 3、图像/语音信号通过线性系统的呼应;
3.1实验目的和要求 3.2实验原理 3.3实验仪器设备 3.4实验过程(内容、步骤、原始数据) 3.5实验结果(数据处理、结果分析、问题讨论及总结)4、附录;
附录1实验一代码 附录2实验二代码 附录3实验三代码
2017/3/8 6:21:04 1.2MB 数字信号 MATLAB
1
代码包括遥感影像的单图裁剪、批量裁剪;
训练集、验证集和测试集的切分;
目标检测和语义分割影像的数据增强;
32/16位深度转8位深度。
1、主要用于深度学习领域的遥感影像数据处理,主要针对输入数据为tif,转为jpg、png格式,并将数据裁剪为网络可以训练的大小,可以手动调理裁剪步长(即有重叠或无重叠),可以对单张图像进行裁剪,也可对文件夹内的所有图片进行裁剪。
2、可以根据想要划分的训练集、验证集和测试集的比例进行划分,如9:1:1.3、本代码还提供了用于目标检测和语义分割任务的数据的增强,主要包括仿射变换、平移翻转等。
4、此外,代码还针对遥感影像位深度32或者16的转为8位的操作。
本代码可修改性强,为方便理解,每部分代码都进行的标注。
本文件共包含10个python文件。
2017/6/9 19:21:55 24KB 深度学习 数据处理 遥感影像
1
本文主要引见北斗大坝形变监测系统的组成结构、数据处理流程,以及使用定位数据处理误差改正模式来提高监测精度的方法。
采集的北斗卫星数据通过通信网络送到数据处理中心,解算数据得到监测点和基准站的相对位移,从而达到监测大坝形变的目的。
1
本项目是一个基于安卓的象棋项目源码,为联网游戏而设计的。
配有java服务端,不过只能单开。
我没有测试具体的功能,感兴味的可以自己链接数据库试试吧。
下面是运行指南和开发设计文档。
本源码分为客户端和服务端客户端编译即可运行,socket连接为:127.0.0.1:9898运行服务端时,需要使用MySQL建表,建表语句如下:createdatabasechinachess;usechinachess;createtableuser(idintprimarykeyauto_increment,namechar(10)uniquenotnull,passwordchar(16)notnull,headintdefault0,scoreintdefault0,victory_countintdefault0,defeat_countintdefault0,draw_countintdefault0,join_timedatetime)charsetutf8collateutf8_general_ci;服务端DbUtil.java里面有连接数据库的配置简单的设计文档:1.图片收集①背景图片②棋子图片③按钮图片2.音乐收集①背景音乐②按钮点击音乐③选子音乐④吃子音乐⑤走棋音乐⑥胜利音乐⑦失败音乐3.界面设计(photoshop画图)①加载界面②菜单界面④匹配界面⑤游戏界面⑥结算界面4.技术点①socket②多线程同步③MySQL连接④游戏逻辑⑤通信数据格式5.软件①Java环境②安卓开发环境(adtbundle)③MySQL5.76.数据处理byte数据头*0:分割--发往服务器*1:登陆*2.注册*3.消息*4:匹配游戏*5:走棋*6:求和*7:同意求和*8:悔棋*9:同意悔棋*10:认输*11:心跳包--发往用户*12:登陆回调*13:注册回调*14:开始游戏*15:游戏数据*16:游戏结束7.游戏规则①车走直线,不能挡车②马走日,前压马腿③象走田,前压象腿,不可越河④士空走斜一,吃走斜一,不可越将营⑤将走直一,(吃将可走直线可越将营),不可越将营⑥炮空走直线,吃走炮台⑦兵可进不可退,走直一8.绝杀(选)定义:无论怎么走,将都会被杀的棋叫做绝杀实现:扫描每个己方棋子的每一步,只要有一步致使不会死帅,就不是绝杀之棋9.智能AI(略)10.流程
2016/9/16 23:47:37 8.27MB 安卓联网 中国象棋
1
看论文时,我们经常看到的散点图,既表达了数据的走势,也显示出了具体的数据点,是一种很好的数据处理方法。
Matlab用plot可以画图,但是想本人DIY设置散点图的参数,使用matlabR2017b自带的强大的工具箱(cftool)就方便多了。
这里面是博客中,散点图的试验数据。
2020/10/4 8:44:01 2KB 散点图
1
1.面壁者数据是一家AI数据服务商,打造一流数据处理标注中心,让人与数据更协同智能。
2.附件为源码工具,技能交流可以加微信liujihao818进行交流。
1
在日常工作中,钉钉打卡成了我生活中不可或缺的一部分。然而,有时候这个看似简单的任务却给我带来了不少烦恼。 每天早晚,我总是得牢记打开钉钉应用,点击"工作台",再找到"考勤打卡"进行签到。有时候因为工作忙碌,会忘记打卡,导致考勤异常,影响当月的工作评价。而且,由于我使用的是苹果手机,有时候系统更新后,钉钉的某些功能会出现异常,使得打卡变得更加麻烦。 另外,我的家人使用的是安卓手机,他们也经常抱怨钉钉打卡的繁琐。尤其是对于那些不太熟悉手机操作的长辈来说,每次打卡都是一次挑战。他们总是担心自己会操作失误,导致打卡失败。 为了解决这些烦恼,我开始思考是否可以通过编写一个全自动化脚本来实现钉钉打卡。经过一段时间的摸索和学习,我终于成功编写出了一个适用于苹果和安卓系统的钉钉打卡脚本。
2024-04-09 15:03 15KB 钉钉 钉钉打卡