利用mongodb、django、elasticsearch等搭建的小型搜索引擎。
数据由scrapy框架爬取存入mongodb中,具体运用方法请移步我的github:https://github.com/Weifanwong/search_engine.git
2023/2/10 16:36:30 281KB elasticsearc mongodb python django
1
通过爬虫,爬取5000章以上的网络小说。
通过爬取网站上的某一本小说,输出文件为url文件“URL列表.txt”以及小说内容文件。
基本实现了网络爬虫规定需求。
包括源代码和实验报告(实验背景、实验环境、实验设计(模型方法介绍+解题思路+流程图+源代码)、结果与功能分析、心得与体会)
2023/2/10 12:04:21 628KB 搜索引擎 网络爬虫
1
java搜索引擎,主要实现功能是根据输入的地址抓取网页上的mp3音乐文件,存入数据库,提供给用户进行搜索和试听,代码根据网上材料自行整理编写而成,代码保证可以用,注释齐全,数据为sqlserver2005,都一并在包里,对于想研究java搜索引擎的应该有一定参考作用。
2023/2/8 15:05:49 2.49MB java 搜索引擎 代码
1
百络网警》校园版2011集中监控和管理校园内所有电脑,它只须安装在一台电脑上,即可对校园网内所有电脑全面监控和管理,它有对色情和反动内容的超强过滤能力,一切对不良内容的访问都被详细记录,无处可藏,它将使您能全面开放校园网和互联网的连接,让您永无后顾之忧。
是一套真正高效、方便、实用的高质量局域网管理软件。
局域网管理软件功能简介:全方位阻挡色情和反动网上资讯对学生的毒害集中监控校园内所有上网电脑可分别对不同网络协议进行控制和管理实时监控学生网上行为系统自带色情、游戏、聊天、证券股票等网址库(网址库自动升级)可自定义设置需要阻挡或不准搜索的关键词还可自定义添加不准浏览的网址可根据需要设置上网内容和控制上网时间可灵活设置每台电脑的上网时间和上网流量可对每台电脑进行端口控制可对QQ、ICQ、MSN、和线游戏等进行控制设置机器或组别在不同的时间段使用不同的上网模式(正常上网、过滤上网、指定上网、不准上网)可将电脑分为若干网络教室或组别,并可对不同的组别进行个性化管理可查询整个网络中浏览不良信息的全部详细记录可提供每台电脑详细的上网记录和方便的统计分析可统计分析每台电脑的上网时间和上网流量过滤色情、暴力、反动等不良站点,每周自动升级一次过滤游戏、聊天、证券等娱乐站点,每周自动升级一次禁止使用各大搜索引擎,以及登陆部分门户网站按时间顺序记录每台电脑的所有网络行为,如:IP、时间、协议、端口以及文件名和文件大小监控每台电脑的上传下载,BBS、博客、论坛发贴和外发文件;
监控ARP攻击和网络欺骗行为所有上网日志可以设置保存时间和修改保存路径,也可以另存和排序打印所有上网日志都可以按IP、机器名、MAC地址、时间、组、服务类型和关键字进行分类查询对邮件和论坛内容、访问站点、QQ、MSN等日志分类查询查询热门网站排行榜、上网时间、上网流量统计各组或者每台电脑的上网字节数和整个网络的总流量可以按时间或者组统计查询整个网络的上网行为和内容可以将机器按IP或者VLAN分成不同的组,可以增添和删除组可对各组不同时间段采用不同的上网模式和控制方式来进行管理可将整个软件的设置信息导出另存,方便以后安装就不用再设置可建立多个用户对软件进行远程管理,不同的用户分配不同的管理权限
2023/2/6 20:43:25 8.35MB 网络 安全 监控 局域网
1
网络爬虫是一种自动搜集互联网信息的程序。
通过网络爬虫不只能够为搜索引擎采集网络信息,而且可以作为定向信息采集器,定向采集某些网站下的特定信息,如招聘信息,租房信息等。
本文通过JAVA实现了一个基于广度优先算法的多线程爬虫程序。
本论文阐述了网络爬虫实现中一些主要问题:为何使用广度优先的爬行策略,以及如何实现广度优先爬行;
为何要使用多线程,以及如何实现多线程;
系统实现过程中的数据存储;
网页信息解析等。
通过实现这一爬虫程序,可以搜集某一站点的URLs,并将搜集到的URLs存入数据库。
1
jeecmsv9.3正式版源码包更新日志1、栏目添加选择模型模板只选择一个报错2、内容复用待审核查询报错(开源版)3、根栏目添加内容报错4、后台页面样式调整5、后台编辑器分页问题7、数据统计今日数据没有问题8、公众号推送菜单和群发微信菜单获取微信端消息前往处理9、OSS管理添加appkey_secretId后台未解密导致数据存储错误10、会员中心留言列表报错11、工作流节点空值处理12、手机模板在静态页生成的情况下url错误处理13、新增百度主动推送14、内容删除同时删除静态页(含FTP)15、栏目和内容静态化调整成只生成前10页16、activationjcaptchafreemarkerJAR部分用户反映下载不了,调整pom采用本地jar17、栏目没有选择模型模板的情况下,发布内容选择不到模型问题处理JEECMS简介JEECMS是JavaEE版网站管理系统(JavaEnterpriseEditionContentManageSystem)的简称。
·基于java技术开发,继承其强大、稳定、安全、高效、跨平台等多方面的优点·采用hibernate3springmvcspring2freemarker主流技术架构·懂html就能建站,提供最便利、合理的使用方式·强大、灵活的标签,用户自定义显示内容和显示方式·在设计上自身预先做了搜索引擎优化,增强对搜索引擎的友好性·完全生成全站静态页面,可自定义路径结构,无需urlrewrite·轻松建设大规模网站,可通过次级域名建立子站群,各子站后台管理权限分离,全站实现单点登录jeecms页面展示: 相关阅读同类推荐:CMS系统
2019/11/9 17:35:23 81.54MB Jsp源码-CMS文章
1
该软件APP集成了百度搜索、搜狗搜索、360搜索、Bing搜索中英文版、Aol搜索(基于Google技术)、Youndex搜索(俄罗斯著名搜索引擎)等七种全球主要搜索引擎,以方便使用者根据个人的搜索偏好,随时输入关键字搜索,而不受打开搜索引擎时,过多的旧事资讯干扰,操作起来,直接简单明了。
追求“凡事力求简单,直到不能再简单“哲学思维。
2015/6/6 7:45:17 2.55MB app
1
大型网站架构演化 大型网站软件系统的特点 大型网站架构演化发展历程 初始阶段 应用服务和数据服务分离 使用缓存改善网站功能 缓存类型 本地缓存 分布式缓存 缓存产品 redis 业界主流 memcached 解决问题 数据库访问 使用应用服务器集群改善网站的并发处理能力 问题:负载均衡情况下session状态的保持? 解决方案: 基于DNS的负载均衡 反向代理 ngix JK2 数据库的读写分离 问题:读库与写库的数据同步 解决方案:不同的数据库都有自己的数据库的主从复制功能 使用反向代理与CDN加速网站响应 反向代理产品 ngix 使用分布式文件系统和分布式数据库系统 使用no-sql和搜索引擎 站内搜索 lucene nutch 分词器 no-sql库 mongodb hadoop 业务拆分 webservice restful 分布式服务 大型网站架构演化的价值观 核心价值:随网站所需灵活应对 驱动力量:网站的业务发展 网站架构设计误区 一味追随大公司的解决方案 为技术而技术 企图用技术解决一切问题大型网站架构模式 架构模式 分层 分割 分布式 分布式应用和服务 分布式静态资源 分布式数据和存储 分布式计算 集群 缓存 CDN 反向代理 本地缓存 分布式缓存 异步 冗佘 冷备份 主从分离,实时同步实现热备份 灾备数据中心 自动化 发布过程自动化 ant maven. 自动化代码管理 svn cvs github 自动化测试 loadrunner hudson. 自动化安全测试 自动化部署 自动化报警 自动化失效转移 自动化失效恢复 自动化降级 自动化分配资源 安全 密码和手机校验码 数据库中的密码加密后存->不可ni->md5 加密 子主题1 验证码 防止机器登录 对于攻击网站的XSS攻击,SQL注入,进行编码转换 对垃圾信息,敏感信息进行过滤 对交易转账等重要操作根据交易模式和交易信息进行风险控制 Sina微博的应用大型网站架构要素 功能 可用性 伸缩性 扩展性 安全性瞬时响应:网站的高功能架构 网站的功能测试 不同的视角 用户的视角 开发人员的视角 运维人员的视角 功能测试指标 响应时间 并发数 吞吐量 功能测试方法 功能测试 负载测试 压力测试 稳定性测试 web前端功能优化 浏览器优化 减少http请求 使用浏览器缓存 启用压缩 css上,js下 减少cookie传输,静态资源使用独立域名访问 CDN加速 反向代理 应用服务器功能优化 分布式缓存 缓存的原理 合理使用缓存 频繁修改的数据 没有热点的访问 数据不一致和脏读 缓存可用性 缓存预热 缓存穿透 缓存架构 jbosscache为代表的需要更新同步的分布式级缓存 以memcached为代表的不互相通信的分布式缓存 异步操作 使用集群 代码优化 多线程 资源复用 单例 对象池 数据结构 垃圾回收 存储功能优化 固态硬盘 RAID与HDFS万无一失:网站的高可用性 高可性的度量与考核 度量 考核 高可用的网站架构 高可用的应用 高可用的服务 高可用的数据 CAP原理 数据备份 失效转移 高可用网站的软件质量保证 网站发布 自动化测试 预发布验证 代码控制 自动化发布 灰度发布 网站运行临控 临控数据采集 临控管理永无止境:网站的可伸缩性 网站架构的伸缩性设计 不同功能进行物理分离实现伸缩 单一功能通过集群规模实现伸缩 应用服务器集群的伸缩性设计 http重定向负载均衡 DNS域名解析负载均衡 反向代理负载均衡 ip负载均衡 数据链路层负载均衡 负载均衡算法 分布式缓存集群的伸缩性设计 mem
2021/7/2 17:55:03 1.02MB 网站架构
1
一个简单但是功能齐全的搜索引擎实现热词引荐分类等功能
2017/7/5 13:09:36 8.33MB 搜索引擎 爬虫
1
多用户域名隐藏转发简介:高级功能:具备转发,隐藏真实域名转发,伪装关键词关键字等,也提高SEO收录防域名屏蔽:具有访问实时隐藏转发,防止真实网站非法信息泄露给搜索引擎等!收费计时功能:系统具备使用时间,限期内如果不续费给管理员,解析将失效或停止防御攻击项目:可做防御攻击转向,可避免DDOS/cc攻击等攻击,前提要求安装系统在防御vps或服务器上!此项可做商务收费项目....系统安装环境要求:IIS6.0ACC数据库(已做防下载)独立IP(要求支持无限众多解析)默认管理员:admin密码:cnzzvps
2021/7/19 2:36:41 560KB 域名隐藏转发
1
共 207 条记录 首页 上一页 下一页 尾页
在日常工作中,钉钉打卡成了我生活中不可或缺的一部分。然而,有时候这个看似简单的任务却给我带来了不少烦恼。 每天早晚,我总是得牢记打开钉钉应用,点击"工作台",再找到"考勤打卡"进行签到。有时候因为工作忙碌,会忘记打卡,导致考勤异常,影响当月的工作评价。而且,由于我使用的是苹果手机,有时候系统更新后,钉钉的某些功能会出现异常,使得打卡变得更加麻烦。 另外,我的家人使用的是安卓手机,他们也经常抱怨钉钉打卡的繁琐。尤其是对于那些不太熟悉手机操作的长辈来说,每次打卡都是一次挑战。他们总是担心自己会操作失误,导致打卡失败。 为了解决这些烦恼,我开始思考是否可以通过编写一个全自动化脚本来实现钉钉打卡。经过一段时间的摸索和学习,我终于成功编写出了一个适用于苹果和安卓系统的钉钉打卡脚本。
2024-04-09 15:03 15KB 钉钉 钉钉打卡