带有WebUI的分布式多用户Scrapy系统这是一个Django项目,允许用户通过Web界面创建,配置,部署和运行ScrapySpiders。
该项目的目标是构建一个应用程序,该应用程序将允许多个用户编写本人的抓取脚本,并将其部署到一组工人中,以分布式方式进行抓取。
该应用程序允许用户通过Web界面执行以下操作:创建一个Scrapy项目添加/编辑/删除草率项目添加/编辑/删除Scrapy项目管道编辑链接生成器功能(有关更多信息,请参见下文)编辑刮板功能(有关此内容,请参见下文)将项目部署到工作机在工作机上启动/停止项目显示工作机,数据库和链接队列的联机状态显示项目的部署状态显示报废的数量显示刮时项目中发生的错误数显示项目的开始/停止日期和时间建筑该应用程序捆绑了用于MongoDB的Scrapy管道(用于保存被抓取的项目)和用于RabbitMQ的Scrapy调度程序(用于在工作人员之间分配链接)。
这些代码是从和获取并改编的。
这是运行应用程序所需的内容:MongoDB服务器(可以是独立群集或分片群集,副本集未经测试)RabbitMQ服务器
2016/5/27 6:14:32 5.95MB python django mongodb rabbitmq
1
rabbitmqserver.RabbitMQ是实现了高级音讯队列协议(AMQP)的开源音讯代理软件
2016/1/15 20:41:24 11.1MB rabbitmq server rabbitmq  3.8.2
1
rabbitmq音讯队列,3.7.18版本,极其容易使用的安装包
2015/8/21 4:40:45 9.7MB rabbitmq mq
1
rabbitmq音讯队列,3.7.18版本,极其容易使用的安装包
2019/9/4 16:45:03 9.7MB rabbitmq mq
1
rabbitmq相关代码,死信队列,延迟音讯等
2015/8/26 22:14:18 36KB 死信队列 延迟消息
1
rabbitmq+PHP教程代码,学习rabbitMQ第一步,添加友好正文,方便学习,实际代码巩固所学知识
2016/9/6 5:42:22 11KB rabbitmq php
1
rabbitmq及其需要依赖的erlang安装包。
经测试,完全兼容,可以下载使用,防止出现各种版本不婚配,节省学习和下载所需时间
2018/2/10 9:39:43 99.36MB rabbitmq erlang centos
1
rabbitmq内部培训资料
2021/5/10 21:31:51 626KB rabbitmq
1
rabbitmq-server-3.6.8-1.el7.noarch.rpmLinux装置rabbitmq,3.6.8版本
2016/5/26 5:12:30 4.69MB rabbitmq Linux安装mq rpm
1
RabbitMQ是实现了高级消息队列协议(AMQP)的开源消息代理软件(亦称面向消息的中间件)。
RabbitMQ服务器是用Erlang语言编写的,而集群和毛病转移是构建在开放电信平台框架上的。
所有主要的编程语言均有与代理接口通讯的客户端库。
2021/1/15 10:58:02 9.59MB Centos rabbitmq
1
共 94 条记录 首页 上一页 下一页 尾页
在日常工作中,钉钉打卡成了我生活中不可或缺的一部分。然而,有时候这个看似简单的任务却给我带来了不少烦恼。 每天早晚,我总是得牢记打开钉钉应用,点击"工作台",再找到"考勤打卡"进行签到。有时候因为工作忙碌,会忘记打卡,导致考勤异常,影响当月的工作评价。而且,由于我使用的是苹果手机,有时候系统更新后,钉钉的某些功能会出现异常,使得打卡变得更加麻烦。 另外,我的家人使用的是安卓手机,他们也经常抱怨钉钉打卡的繁琐。尤其是对于那些不太熟悉手机操作的长辈来说,每次打卡都是一次挑战。他们总是担心自己会操作失误,导致打卡失败。 为了解决这些烦恼,我开始思考是否可以通过编写一个全自动化脚本来实现钉钉打卡。经过一段时间的摸索和学习,我终于成功编写出了一个适用于苹果和安卓系统的钉钉打卡脚本。
2024-04-09 15:03 15KB 钉钉 钉钉打卡