
【数据采集定制开发案例汇总】
文章平均质量分 77
数据处理,管理系统等
HelloCode5110
在线接单:物联网管理系统,ERP管理系统,数据可视化等...
展开
-
招投标和招聘信息查询可视化系统(基于企业级低代码平台,Python语言和Mysql数据库联动实现)
本系统根据管理员配置的关键字,自动定时获取目标网站的数据,存储到数据库,并自动发信息到邮箱,供用户作为信息分析的数据基础。:"test密码:123456管理员账号密码:暂不开放。原创 2024-02-22 22:38:03 · 1173 阅读 · 0 评论 -
训练百度搜索引擎,试试提高排名
公司在百度投放了一些广告,但是在百度搜索上排位有些靠后,为了提升排名,写个自动化程序原创 2023-07-17 00:23:25 · 399 阅读 · 0 评论 -
【定制项目】【M14 监测预警平台】百度地图区域绘制(时间轴)/柱状图/仪表图 - 关键技术 python flask + echarts
一、项目需求项目名称:【某监测预警平台】。项目需求:气候数据:雨量,温湿度,PM,雷达回波,雷电预报等展示到可视化大屏。项目工期:10个工作日。原创 2022-09-01 17:48:37 · 916 阅读 · 2 评论 -
【定制项目】【M13】【数据监控 + 数据分析 + 可视化大屏】- 关键技术 python flask + pandas + echarts + excel
目录一、项目需求二、项目架构三、项目源码分析1、http服务器:Python Flask 框架;http 代码接口解析2、文件监控:Python win32con 模块;监控代码代码解析3、数据分析:Python Pandas 库;Pandas Series代码文件示例4、数据可视化:Echarts + BootStrap 库;BootStrap布局Echarts图形代码四、更多案例一、项目需求项目名称:【某智能工厂生产不良率分析大屏系原创 2022-02-20 15:17:08 · 2422 阅读 · 6 评论 -
【定制开发】【M11】Python采集数据源,自动生成Excel报表:避免人力浪费,提高工作效率
目录一、背景二、采集数据源2、采集【氮氨】数据3、采集【COD 化学需氧量】数据4、采集【总氮】数据三、输出Excel内容样式1、输出文件命名格式2、文件内容格式详述四、解决方案1、获取并解析【废水企业名单】2、获取并解析【废水企业历史数据】3、输出到Excel文件的sheet栏目【废水】4、保证数据完整性一、背景某生态环境治理公司,定期从各官网上获取数据,评估环境污染指数,目前采取的方式为人力手抄方式,效率低,资源浪费。领导重视效率,要求推..原创 2021-12-31 17:19:09 · 1403 阅读 · 0 评论 -
【定制开发】【M10】简单Go语言实现Privoxy的读取配置升级:从本地配置文件config.txt 升级成 http get 网络获取
目录一、背景二、目标三、实现1、关键代码2、编译命令3、函数调用一、背景首先科普下 Privoxy :Privoxy是一款带过滤功能的代理服务器,针对HTTP、HTTPS协议。通过Privoxy的过滤功能,用户可以保护隐私、对网页内容进行过滤、管理cookies,以及拦阻各种广告等。Privoxy可以用作单机,也可以应用到多用户的网络。 Privoxy基于Internet Junkbuster,按照GNU General Public License进行发布。可以在Linux原创 2021-12-25 15:48:14 · 716 阅读 · 0 评论 -
【定制开发】【M9】Python爬虫 - 【1688】公开信息采集案例
一、背景:一个做展会的小伙伴儿找到我,希望能帮他采集某一类目的1688厂家信息,然后邀请他们参加展会。二、设计思路如下:采用 Python3 语言编码 , 工具 PyCharm; 模仿真实用户登录1688,使用Selenium + Google Chrome + chromedriver.exe;备注1:Google Chrome + chromedriver.exe版本对应参考链接:https://blog.youkuaiyun.com/lildkdkdkjf/article/details/1068原创 2020-06-28 09:25:21 · 1169 阅读 · 0 评论 -
【定制开发】【M7】Python爬虫 - 获取【oschina】最新发布需求,并实时通知用户
背景有个朋友计划拓展业务渠道,准备在众包平台上接单,他的主营产品是微信小程序,因此他想第一时间收到客户发出的需求信息,然后第一时间联系客户,这样成交率才能够得到保障,否则单早都被其他同行接完了,他的黄花菜也就都凉了。开发环境开发语言 Python ,开发架构Scrapy,非 Python 莫属,数据采集的神器! 开发工具 PyCharm;功能设计实时通知:采用发邮件方式通知,将邮箱绑定到微信,实现实时通知的效果。 过滤模块:根据标题和内容双重过滤关键词,不符合要求的订单丢弃,符合要求的原创 2020-07-06 10:34:06 · 635 阅读 · 0 评论 -
【定制开发】【M6】Python爬虫 - 获取【猪八戒】最新发布需求,并实时通知用户
背景有个朋友计划拓展业务渠道,准备在众包平台猪八戒上接单,他的主营产品是微信小程序,因此他想第一时间收到客户发出的需求信息,然后第一时间联系客户,这样成交率才能够得到保障,否则单早都被其他同行接完了,他的黄花菜也就都凉了。开发环境开发语言 Python ,开发架构Scrapy,非 Python 莫属,数据采集的神器! 开发工具 PyCharm;功能设计采集地址 :https://task.zbj.com/hall/bid/t-rjkf?m=1111&so=2&ss=0.原创 2020-07-06 10:10:27 · 1193 阅读 · 0 评论 -
【定制开发】【M5】Python爬虫 - 获取【一品威客】最新发布需求,并实时通知用户
背景有个朋友计划拓展业务渠道,准备在众包平台猪八戒上接单,他的主营产品是微信小程序,因此他想第一时间收到客户发出的需求信息,然后第一时间联系客户,这样成交率才能够得到保障,否则单早都被其他同行接完了,他的黄花菜也就都凉了。开发环境开发语言 Python ,开发架构Scrapy,非 Python 莫属,数据采集的神器! 开发工具 PyCharm;功能设计实时通知:采用发邮件方式通知,将邮箱绑定到微信,实现实时通知的效果。 过滤模块:根据标题和内容双重过滤关键词,不符合要求的订单丢弃.原创 2020-07-06 10:16:25 · 1667 阅读 · 0 评论 -
【定制开发】【M4】手把手教你WordPress快速建站,简单炫酷,果断收藏
一、系统要求要运行WordPress,请确保已经准备好以下5条事项:PHP 7.4或更高版本。下载地址:PHP 8.0 MySQL 5.6或更高版本。下载地址:mysql-8.0.26-winx64.zip 推荐Apache作为运行WordPress的最可靠和功能最强的服务器。下载地址: Apache 2.4.48 WordPress安装包下载地址:WordPress 5.8.zip 服务器及域名。阿里云是国内最大的云服务商,我已经是老铁杆用户了(从阿里云成立就开始使用)。链接地址:h..原创 2021-07-21 17:27:01 · 703 阅读 · 1 评论 -
【定制开发】【M8】推荐一款强大的磁盘清理小工具,专治磁盘爆满(不到1M)
今天打开电脑,发现磁盘已经红色警告了。。。所以电脑速度真的是太感人了!要把吃磁盘的罪魁祸首抓出来,想起来朋友前些日子聊天时力荐的一款工具,实际操作下看效果:扫描速度杠杠的 !经过分析,抓到了吃磁盘的Users目录,某信缓存26.2G,某Q缓存10+G,先清了这两个吃磁盘的大老虎,磁盘恢复了绿色状态。工具下载:FolderSize-推荐一款强大的磁盘管理神器(不到1M)-其它文档类资源-优快云下载...原创 2021-11-30 10:44:22 · 5886 阅读 · 0 评论 -
【定制开发】【M3】基于Python+pygame实现的人机AI对战五子棋游戏(保姆级入门讲解)
一、效果展示二、功能介绍五子棋是一种两人对弈的纯策略型棋类游戏。五子棋有两种玩法。玩法一:双方分别使用黑白两色的棋子,下在棋盘直线与横线的交叉点上,先形成五子连线者获胜。玩法二:自己形成五子连线就替换对方任意一枚棋子。被替换的棋子可以和对方交换棋子。最后以先出完所有棋子的一方为胜。本代码实现的是第一种玩法。三、开发环境搭建首先安装Python,再安装pip命令,最后安装pygame模块。目前如果你在python.org下载最新版本的安装包,则是已经自带了该工具。从p...原创 2021-10-10 10:30:00 · 2292 阅读 · 0 评论 -
【定制开发】【M1】W字长文,基于Python+Flask+SQLAlchemy+LayUI实现的设备借用登记系统
一、效果展示1.设备信息查询2.企业员工信息查询3.新设备登记4.新设备入库5.员工借用设备6.员工归还设备二、系统功能功能:设备管理:入库管理(新设备入库 -> 新设备登记),借用设备,归还设备信息设置:管理员信息设置设备信息查询:设备名,生产商,类别,设备编号员工信息查询:员工卡号,有效期,是否欠费,归还日期管理员信息:个人信息及权限,修改密码登录登出角色:本套管理系统分为两类用户角色:企业员工,管理...原创 2021-10-09 11:30:00 · 905 阅读 · 0 评论 -
【定制开发】【M2】社群营销 - 程序自动发淘宝商品消息到微信群 案例展示
话不多说,开始分享干货,欢迎讨论!QQ微信同号: 6550523一、背景:有一个做淘宝营销的小伙伴儿找到我,希望能帮他实现淘宝商品自动群发到微信,减少他手下员工的工作量(毕竟都是复制转发的活,又繁琐又辛苦),给老板点赞~,我也想要这样的老板,哈哈。二、设计思路如下:1.python flask 服务器,HTTP API形式接收任意淘宝、天猫、京东、拼多多等商品信息。2.将商品信息转发到指定的微信群(使用JSON配置),实现自动化社群营销。3.非微信Web版,无登录限制。..原创 2020-06-22 14:17:39 · 893 阅读 · 0 评论