
Crawler
文章平均质量分 65
启四
这个作者很懒,什么都没留下…
展开
-
推荐一个可以回测股票、基金、可转债数据的网站,附教程
分享一个可以回测股票、基金、债券数据的网站,这个网站叫聚宽(joinquant),做投资量化的同学可能比较熟悉,这个网站涵盖了2005年至今的投资数据,包含股票、期货、基金、指数、债券等等,不仅有行情数据,还有交易统计数据,上市公司信息等,感觉找到宝藏了。当然,对我来说,最重要的数据还是「可转债」。测试了一下,获取数据很简单,很轻松就拿到了可转债的历史交易数据。下面简单说明一下操作方法:1、点击这个链接:https://www.joinquant.com/default/index/sdk#jq-s原创 2021-08-30 10:53:51 · 11437 阅读 · 1 评论 -
使用Python爬取双低转债及三要素可转债,自动发送邮件
双低转债及三要素可转债注:爬取集思录上的可转债信息,并按照规则进行筛选排序,仅供交流学习之用,请勿用于商业用途项目地址:https://gitee.com/zsyoung01/kzz介绍可转债双低转债和三要素转债策略,数据抓取自集思录1、已支持三种排序筛选方式(最终结果逆序排序):溢价率升序排名+价格升序排名+到期收益率降序排名溢价率+价格-到期收益率溢价率+剩余年限-到期收益率2、实现Email添加附件发送功能未来计划加入数据回测功能及数据告警发送email功能特性网络请求-数据原创 2021-03-28 17:45:55 · 3640 阅读 · 12 评论 -
使用java自动爬取新浪微博历史列表-免登录
使用java自动爬取新浪微博历史列表-免登录目录使用java自动爬取新浪微博历史列表-免登录目录准备工作原理工作流程1.找出微博内容页请求链接2.修改参数拼出请求链接3.解析网页数据4.存入数据库程序部分程序结构运行程序部分数据库字段解释最后再整理一遍思路文件地址准备工作安装jdk8安装mysql数据库和navicat高...原创 2018-01-12 17:15:47 · 2295 阅读 · 0 评论 -
12306网站抓取全国所有车次信息爬虫,附源代码,可直接使用
12306爬虫注:爬取12306网上的车次信息的爬虫,仅供交流学习之用,请勿用于商业用途项目地址:https://gitee.com/zsyoung01/train介绍12306爬虫,抓取指定城市,始发和经过的所有车次信息特性网络请求-数据解析-文件存储 三层结构多线程下载网络自动重试错误日志记录Python3你可能需要pip3 install requestspi...原创 2019-01-14 22:17:24 · 9856 阅读 · 16 评论 -
使用AnyProxy自动爬取微信公众号数据-包括阅读数和点赞数
使用AnyProxy自动爬取微信公众号数据-包括阅读数和点赞数目录使用AnyProxy自动爬取微信公众号数据-包括阅读数和点赞数目录准备工作:原理图1.安装Node.js2.安装AnyProxy 代理服务器3. 启动AnyProxy4. 安装HTTPS 网络传输所需的证书电脑安装手机安装安装mysql 模块部分5.程序部分程序地址代码部分运行程序...原创 2017-12-20 12:18:44 · 18774 阅读 · 40 评论 -
微信公众号文章爬取方法整理
微信公众号文章爬取方法整理1.用python爬取 http://blog.youkuaiyun.com/d1240673769/article/details/75907152 实现方法:通过微信提供的公众号文章调用接口,实现爬取公众号文章的功能步骤:1.需要安装python selenium模块包,通过selenium中的webdriver驱动浏览器获取Cookie的方法、来达到登录的效果;原创 2018-01-04 15:26:05 · 39461 阅读 · 1 评论