网络爬虫是一种自动搜集互联网信息的程序。
通过网络爬虫不只能够为搜索引擎采集网络信息，而且可以作为定向信息采集器，定向采集某些网站下的特定信息，如招聘信息，租房信息等。
本文通过JAVA实现了一个基于广度优先算法的多线程爬虫程序。
本论文阐述了网络爬虫实现中一些主要问题：为何使用广度优先的爬行策略，以及如何实现广度优先爬行；
为何要使用多线程，以及如何实现多线程；
系统实现过程中的数据存储；
网页信息解析等。
通过实现这一爬虫程序，可以搜集某一站点的URLs，并将搜集到的URLs存入数据库。
通过网络爬虫不只能够为搜索引擎采集网络信息，而且可以作为定向信息采集器，定向采集某些网站下的特定信息，如招聘信息，租房信息等。
本文通过JAVA实现了一个基于广度优先算法的多线程爬虫程序。
本论文阐述了网络爬虫实现中一些主要问题：为何使用广度优先的爬行策略，以及如何实现广度优先爬行；
为何要使用多线程，以及如何实现多线程；
系统实现过程中的数据存储；
网页信息解析等。
通过实现这一爬虫程序，可以搜集某一站点的URLs，并将搜集到的URLs存入数据库。
2016/6/19 3:22:07
652KB
1
最近，由于一些需要，用到了java和正则,做了个的足球网站的数据采集程序，由于是第一次做关于java的html页面数据采集，必然在网上查找了很多资料，但是发现运用如此广泛的java在使用正则做html采集方面的(中文)文章是少之又少，都是简单的谈了下java正则的概念，没有真正用在实际网页html采集，所以实例教程更是寥寥无几(虽然java有它自己的HtmlParser，而且十分强大)，但个人觉得作为如此深入人心的正则表达式,理应有其相关的java实例教程,而且应该很多很全.于是在完成java版的html数据采集程序之后,本人便打算写个关于正则表达式在java上的html页面采集,以便有相关兴味的读者更好的学习.
2015/3/7 5:18:44
749KB
1
2015全年的cffex.if沪深300股指期货，1分钟数据，min1，数据格式为日期时间，开盘价、最高价、最低价、开盘价、成交量，逗号分隔符，文本格式，可以转换为任意格式，直接存入数据库，全网独家！
2016/4/5 16:55:47
3.41MB
1
本工程包含两部分，前台的jsp页面内容是获取数据库内的坐标数据并显示到前台，每两点之间绘制直线，页面加载1分钟后开始每隔10秒扫描一次数据库，如果有新的坐标数据，则动态显示到页面上。
后台内容则是安卓端获取GPS数据后上传到数据库的对应服务端代码，次要是把数据存入数据库和从数据库读取数据。
后台内容则是安卓端获取GPS数据后上传到数据库的对应服务端代码，次要是把数据存入数据库和从数据库读取数据。
2018/2/16 21:24:53
13.43MB
1
由于项目需要，特研究了一段时间关于java爬虫的相关技术，发现一个比较好用的爬虫框架--WebMagic，只需少量代码即可实现一个爬虫，本项目就是基于它的一个简单实现，导入项目即可运行，项目只有两个类，一个用于抓取，一个用于处理抓取到的数据，存入数据库或导出到excel等(只打印到控制台，后续本人发挥)，简单吧，代码真的很少
2019/9/7 1:56:49
11.52MB
1
主要引见了微信小程序实现获取用户信息并存入数据库操作,涉及微信小程序wx.request后台数据交互及php数据存储相关操作技巧,需要的朋友可以参考下
2022/9/8 0:59:43
35KB
1
在日常工作中，钉钉打卡成了我生活中不可或缺的一部分。然而，有时候这个看似简单的任务却给我带来了不少烦恼。
每天早晚，我总是得牢记打开钉钉应用，点击"工作台"，再找到"考勤打卡"进行签到。有时候因为工作忙碌，会忘记打卡，导致考勤异常，影响当月的工作评价。而且，由于我使用的是苹果手机，有时候系统更新后，钉钉的某些功能会出现异常，使得打卡变得更加麻烦。
另外，我的家人使用的是安卓手机，他们也经常抱怨钉钉打卡的繁琐。尤其是对于那些不太熟悉手机操作的长辈来说，每次打卡都是一次挑战。他们总是担心自己会操作失误，导致打卡失败。
为了解决这些烦恼，我开始思考是否可以通过编写一个全自动化脚本来实现钉钉打卡。经过一段时间的摸索和学习，我终于成功编写出了一个适用于苹果和安卓系统的钉钉打卡脚本。
2024-04-09 15:03
15KB