自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

颹蕭蕭

苟有恒,何必三更眠、五更起。 最无益,莫过一日曝、十日寒。

  • 博客(841)
  • 资源 (36)
  • 收藏
  • 关注

原创 事件驱动量化回测 UML 序列图

strategyManager有全局的positionManager和orderManager, 外加 riskManager和broker。每个strategy有自己的positionManager和orderManager,

2025-01-20 23:52:07 515

转载 Python 事件驱动回测(Event-Driven Backtesting)

【代码】Python事件驱动回测(Event-DrivenBacktesting)

2025-01-18 00:25:19 76

原创 x509: certificate signed by unknown authority

如果可能,优先使用方法 1(信任自签名证书),这是最安全和推荐的方式。如果无法获取证书,可以尝试方法 2(禁用 SSL 验证),但请注意安全风险。如果问题仍然存在,可以尝试方法 3(手动拉取镜像)或方法 4(旧版 Docker 的解决方案)。

2025-01-09 15:23:02 3411

原创 构建高性能异步任务引擎:FastAPI + Celery + Redis

FastAPI:一个现代、高性能的 Web 框架,基于 Python 3.7+ 的异步编程特性构建。它支持自动生成 OpenAPI 文档和 Swagger UI,能够快速构建 RESTful API,并且具有极低的延迟和高并发处理能力。Celery:一个分布式任务队列系统,主要用于处理异步任务和定时任务。它支持多种消息传输机制,能够将任务分发到多个工作节点上并行处理,从而提高系统的吞吐量和响应速度。Redis:一个高性能的键值存储系统,常用于缓存、消息队列和分布式锁等场景。

2024-12-17 23:17:31 1681 3

转载 fastapi 文档加载失败,docs空白页面

解决方式,在主程序中替换下载swagger静态资源的url。

2024-12-15 20:23:05 147

原创 docker 部署 redis

使用redis-py库可以轻松连接和操作 Redis。常见的操作包括设置和获取键值对、列表操作、哈希操作、集合操作等。在高并发场景下,建议使用连接池来管理连接。处理异常以确保程序的健壮性。通过这些步骤,你可以在 Python 中轻松地连接和操作 Redis 数据库。

2024-12-13 11:05:27 576

原创 均值方差增量计算

μ=∑i=1nxin\mu = \frac{\sum_{i=1}^{n} x_i}{n}μ=n∑i=1n​xi​​σ2=∑i=1n(xi−μ)2n=∑i=1nxi2−2∑i=1nxiμ+nμ2n=∑i=1nxi2−nμ2n=∑i=1nxi2n−μ2\begin{array}{ll}\sigma^2 &= \frac{\sum_{i=1}^{n}(x_i - \mu)^2}{n} \\ &= \frac{\sum_{i=1}^{n} x_i^2 -2\sum_{i=1}^{n} x_i\mu + n

2024-11-14 13:44:22 958 1

原创 k3s 单机部署

丸辣,镜像根本下不了!

2024-11-07 23:39:38 220

原创 FLINK 连接 mysql

【代码】FLINK 连接 mysql。

2024-11-01 14:44:26 270

原创 flink1.20 连接 postgres

CREATE CATALOG

2024-10-25 16:56:57 552

原创 PostgreSQL使用clickhouse_fdw访问ClickHouse

注意IMPORT SCHEMA会加载clickhouse库名<my_ch_db>下的所有表到postgres的public模式。最终,make install 会把编译好的插件发送到指定位置,直接连接pg加载即可。docker镜像里没有必要的编译工具,make 执行不了。make 过程中陆陆续续提示缺少依赖,按提示安装包即可。大概安装了以下包,仅供参考。可以在pg的外表中查看到。

2024-10-25 10:52:26 565

原创 debian12 更换 apt 清华源

debian 国内镜像

2024-10-24 22:26:04 1354

原创 streamlit 实现 flink SQL运行界面

模板文件根据用户输入动态更新任务配置和SQL。

2024-10-24 16:38:12 349

原创 pyflink 时序异常检测——PEWMA

EWMA:μt=αμt−1+(1−α)Xt\mu_t = \alpha \mu_{t-1} + (1 - \alpha ) X_tμt​=αμt−1​+(1−α)Xt​PEWMA:μt=α(1−βPt)μt−1+(1−α(1−βPt))Xt\mu_t = \alpha (1 - \beta P_t) \mu_{t-1} + (1 - \alpha (1 - \beta P_t)) X_tμt​=α(1−βPt​)μt−1​+(1−α(1−βPt​))Xt​其核心思想:转 table api

2024-10-21 10:03:27 1136

原创 pyflink 时序异常检测——EWMA

EWMA 通过赋予较新的数据更高的权重,能够更好地反映数据的最新变化。其递推公式简单易用,适用于各种时间序列数据的平滑处理。通过调整平滑因子α\alphaα,可以控制平滑的程度,从而适应不同的应用场景。在异常检测中,使用∣Xt−μt∣mσt∣Xt​−μt​∣mσt​的规则可以有效地识别出与当前均值和标准差显著偏离的观测值。通过合理选择平滑因子和倍数因子,可以调整检测的敏感度和准确性,以适应不同的应用场景。

2024-10-19 10:32:18 1386

原创 pyflink过滤kafka数据

filter_condition = “name = ‘蒋介石’ and sex = ‘男’”

2024-10-11 11:04:54 680

原创 docker-compose无法切换用户

为什么容器内执行的命令用户是flink。

2024-10-09 14:46:20 325

原创 docker overlay 占用空间太大,迁移到 /data/

将 Docker 的overlay存储驱动迁移到/data/

2024-10-09 13:38:02 675

原创 docker-compose部署单节点kafka-3.2.0

删除 .lock 文件即可。

2024-09-30 14:37:48 619

原创 python 向kafka写数据

console 消费者。python 生产者。

2024-09-27 14:26:09 244

转载 github action 下载docker镜像

fork 到自己的仓库中: https://github.com/wukongdaily/DockerTarBuilder。Run workflow,输入镜像名,点击 Run workflow。工作流完成后,下载文件。

2024-09-26 15:50:53 579

原创 docker-compose.yml entrypoint 和command 关系

entrypoint定义了容器启动时的主命令或脚本。command定义了传递给entrypoint的参数。如果同时定义了entrypoint和commandcommand的值会作为参数传递给entrypoint。理解这两者的关系和作用,可以帮助你更好地控制容器的启动行为。

2024-09-25 17:15:43 1078

原创 yaml 中的列表,块格式、流格式

块格式:使用表示列表项,适用于多行列表项。流格式:使用[]表示列表项,适用于单行列表项。你可以根据需要选择合适的格式,并且可以在这两种格式之间进行转化。

2024-09-25 17:13:10 707

原创 gevent + flask 接口会卡住

对于 CPU 密集型任务,gevent和Flask的组合可能会遇到性能瓶颈。解决方案包括使用多进程、异步任务队列(如 Celery)或切换到更适合处理并发请求的异步框架(如 FastAPI)。通过这些方法,你可以更好地处理 CPU 密集型任务,避免性能瓶颈。

2024-09-20 13:24:34 947

原创 docker-squash镜像压缩

更适合在保留镜像层结构和元数据的情况下减小镜像大小。更适合在需要将容器文件系统打包成一个单一文件的情况下使用。根据你的需求选择合适的工具和方法。

2024-09-19 10:06:20 680

原创 pyflink 安装和测试

pip 安装后自动会把 flink 也装上就是 flink 可执行文件。

2024-09-12 18:54:39 985 1

原创 docker-compose 部署 flink [支持pyflink]

privileged: true 这行配置启用了 taskmanager 容器的特权模式,使得容器内的进程可以获得几乎与主机上相同的权限。

2024-09-12 16:48:26 994

原创 Transformer模型量化加速

限制pytorch线程数=4测试向量计算速度。

2024-09-02 14:39:39 580

原创 huggingface 切换镜像地址下载模型

下载模型,指定本地文件夹。

2024-08-23 16:23:18 671

原创 python绘制任意范围的beta分布

【代码】python绘制任意范围的beta分布。

2024-08-22 09:54:37 333

原创 transformers pipeline aggregation_strategy处理非BIO输出格式的模型

输出结果但是如果想使用simple聚合策略,会发现聚合失败原因就是simple聚合策略只支持BI聚合,不支持BIE聚合。

2024-08-13 18:07:07 364

转载 【题库】网络工程师

Windows操作系统在vista以后增加了一个功能,该功能对管理员组的用户起到一定限制,进而保护计算机安全,当我们需要运行一些重要的程序,只有管理员权限才能运行的程序时,该功能都会弹出一个对话框,对用户进行询问,当用户点击了同意按钮,程序才会以管理员或system权限运行,该功能是( )。这不仅是个人职业发展的需要,也是对社会负责的体现。在ACL 3002中配置规则,只允许该网段主机被动响应TCP握手的报文通过,并拒绝该网段的其他TCP报文通过,实现10.20.30.0/24网段地址的单向访问控制。

2024-08-12 23:03:49 572

原创 全国省市籍贯列表

【代码】全国省市籍贯列表。

2024-08-07 19:58:20 900

原创 python 装饰器记录函数用时

nonlocal关键字只会影响直接上层函数的变量,而不会跨越多个层次。如果你需要修改更外层函数的变量,你需要在每一层都使用nonlocal声明。

2024-08-05 18:59:47 431

原创 python logging 避免日志重复打印

【代码】python logging 避免日志重复打印。

2024-07-18 11:00:29 409 1

原创 多核并行加速 tokenizer

tqdm 监控任务进度。

2024-07-16 14:00:23 455

原创 docker 本地部署大模型(ollama)

此处由于挂载目录使用了相对路径,所以本地文件夹位于 /var/lib/docker/volumes/ollama而非运行命令的相对路径测试 api。

2024-07-08 12:23:33 10018 1

原创 python singledispatch 根据传入参数的类型自动选择相应的实现

装饰器提供了一种在 Python 中实现函数重载的方式。虽然 Python 本身不支持传统的函数重载(即在同一个作用域中定义多个同名函数),但。在上述示例中,process 函数根据传入参数的类型(int、str、list)选择不同的处理逻辑,这就是一种函数重载的形式。装饰器允许你定义一个函数,并根据传入参数的类型自动选择相应的实现。这在处理不同类型的输入时非常有用。允许你根据参数类型来选择不同的函数实现,从而实现类似重载的效果。下面是一个简单的示例,展示了如何使用。

2024-07-08 10:08:56 311

原创 数据识别概述

数据识别分为直接识别和间接识别

2024-07-04 16:01:20 510

原创 python 判断 〇 是否在\u4e00-\u9fff范围内

在Unicode编码中,\u4e00-\u9fff范围代表了中日韩统一表意文字(CJK Unified Ideographs),这个范围包含了大部分的汉字。要判断一个字符是否在这个范围内,可以使用编程语言中的字符编码函数。函数获取该字符的Unicode编码,然后检查这个编码是否在\u4e00-\u9fff范围内。,并不在\u4e00-\u9fff范围内。以下是一个使用Python语言的示例代码,用于判断字符。实际上是一个中日韩兼容表意文字,其Unicode编码是。如果你需要判断的是其他字符,只需将。

2024-06-03 14:44:36 986 1

BERT-CRF 中文 ner 模型微调

BERT-CRF 中文 ner 模型微调

2024-05-09

2024年3月杭州及周边小区挂牌价格

杭州及周边小区挂牌价格 小区数量:4000+ 时间节点:2024年3月 可用于:数据分析、可视化实验 可用于:地理位置数据收集 可用于:固定资产投资参考,买房有风险,投资需谨慎!

2024-03-22

用于大模型RAG的检索语料

用于大模型RAG的检索语料

2024-03-14

Win10 左手用户的鼠标指针

Win10 左手用户的鼠标指针

2022-06-15

网络安全数据挖掘 CS259D课件

网络安全数据挖掘 CS259D课件 Data Mining for CyberSecurity

2021-09-08

利用 SIFT 实现图像拼接 python 代码

利用 SIFT 实现图像拼接:https://goodgoodstudy.blog.youkuaiyun.com/article/details/89157849

2021-01-01

python 使用摄像头监测心率

参见博文:https://blog.youkuaiyun.com/itnerd/article/details/109078291 使用 opencv 检测人体皮肤颜色变化,计算心率

2020-10-14

中图分类号.xlsx

史上最全中图分类号,史上最全中图分类号,史上最全中图分类号 45835条,45835条,45835条, 官网抓取,如假包换

2020-09-11

知网爬虫.ipynb

python 爪巴虫爪巴知网。 selenium 通过模拟鼠标点击,自动实现:选择检索词的类别、输入检索词、选择精确还是模糊查找、逻辑关系、点击检索按钮等一系列动作

2020-09-10

Python 图片中扭曲矩形的复原

博文地址:https://blog.youkuaiyun.com/itnerd/article/details/108429553 Python 实现图片中扭曲矩形的复原

2020-09-06

icml2020文章列表及下载链接.zip

icml 2020 所有文章的下载链接,全部 1086 篇文章,链接点击直接跳转到 pdf,可直接下载paper

2020-08-31

icml2020.xlsx

excel 文件,icml 2020 所有文章的下载链接,全部 1086 篇文章,链接点击直接跳转到 pdf

2020-08-31

explore_data.ipynb

时间序列论文常用数据集,下载及可视化, python https://goodgoodstudy.blog.youkuaiyun.com/article/details/106244526

2020-05-20

数据透视表分析数据.xlsx

用于练习 EXCEL 数据透视表,零售平台订单数据。用于练习 EXCEL 数据透视表,零售平台订单数据。

2020-05-16

Introduction to symmetry analysis (2002) [Brian J. Cantwell]

Introduction to symmetry analysis (2002) [Brian J. Cantwell] 对称性分析

2020-01-07

微信自动回复天气程序

https://blog.youkuaiyun.com/itnerd/article/details/103433296

2019-12-07

Feedback Control in Systems Biology

反馈控制 系统生物学 Feedback Control in Systems Biology Carlo Cosentino and Declan Bates

2019-09-18

headct_3d.ipynb

dicom 格式, mhd 格式 , 头部 CT 切片, 3D 重建 , python

2019-07-25

lung_segmentation.ipynb

肺部CT图像分割 (.raw .mhd 格式图像数据) , python 程序, 肺部 3D 可视化

2019-07-03

ICML 2019年 会议文章目录 (含论文下载链接)

international conference on machine learning(ICML) 2019年 会议文章目录 含论文下载链接

2019-06-04

《应用非线性控制》【Slotine & Weiping Li 著】MIT经典教材

《应用非线性控制》中文版【Slotine & Weiping Li 著】MIT经典教材 原名《Applied Nolinear Control》

2019-01-05

网络优化:连续和离散模型(英文文字版)【Dimitri P. Bertsekas】

网络优化:连续和离散模型 英文文字版 Dimitri P. Bertsekas

2018-10-12

系统与控制理论中的线性代数 【黄琳】

系统与控制理论中的线性代数 【黄琳】

2018-10-11

凸优化习题答案【Boyd】

凸优化习题答案【Boyd】

2018-10-07

线性代数与解析几何(郑广平)复旦大学出版社

线性代数与解析几何

2018-09-27

遗传算法java小程序(吃豆人)

遗传算法 java 小程序,可以看成吃豆人的简化版! Model类和Display类里的main函数都可以运行! 谢谢支持!

2018-09-27

Handbook of Matrices

handbook of matrices handbook of matrices handbook of matrices handbook of matrices

2018-09-22

All of Statistics

all of statistics

2018-09-20

算法设计(英文文字版)by Jon_Kleinberg & Eva_Tardos

英文版 算法设计 Preface Algorithmic ideas are pervasive, and their reach is apparent in examples both within computer science and beyond. Some of the major shifts in Internet routing standards can be viewed as debates over the deficiencies of one shortest-path algorithm and the relative advantages of another. The basic notions used by biologists to express similarities among genes and genomes have algorithmic definitions. The concerns voiced by economists over the feasibility of combinatorial auctions in practice are rooted partly in the fact that these auctions contain computationally intractable search problems as special cases. And algorithmic notions aren’t just restricted to well-known and longstanding problems; one sees the reflections of these ideas on a regular basis, in novel issues arising across a wide range of areas. The scientist from Yahoo! who told us over lunch one day about their system for serving ads to users was describing a set of issues that, deep down, could be modeled as a network flow problem. So was the former student, now a management consultant working on staffing protocols for large hospitals, whom we happened to meet on a trip to New York City. The point is not simply that algorithms have many applications. The deeper issue is that the subject of algorithms is a powerful lens through which to view the field of computer science in general. Algorithmic problems form the heart of computer science, but they rarely arrive as cleanly packaged, mathematically precise questions. Rather, they tend to come bundled together with lots of messy, application-specific detail, some of it essential, some of it extraneous. As a result, the algorithmic enterprise consists of two fundamental components: the task of getting to the mathematically clean core of a problem, and then the task of identifying the appropriate algorithm design techniques, based on the structure of the problem. These two components interact: the more comfortable one is with the full array of possible design techniques, the more one starts to recognize the clean formulations that lie within messy problems out in the world. At their most effective, then, algorithmic ideas do not just provide solutions to well-posed problems; they form the language that lets you cleanly express the underlying questions. The goal of our book is to convey this approach to algorithms, as a design process that begins with problems arising across the full range of computing applications, builds on an understanding of algorithm design techniques, and results in the development of efficient solutions to these problems. We seek to explore the role of algorithmic ideas in computer science generally, and relate these ideas to the range of precisely formulated problems for which we can design and analyze algorithms. In other words, what are the underlying issues that motivate these problems, and how did we choose these particular ways of formulating them? How did we recognize which design principles were appropriate in different situations? In keeping with this, our goal is to offer advice on how to identify clean algorithmic problem formulations in complex issues from different areas of computing and, from this, how to design efficient algorithms for the resulting problems. Sophisticated algorithms are often best understood by reconstructing the sequence of ideas—including false starts and dead ends—that led from simpler initial approaches to the eventual solution. The result is a style of exposition that does not take the most direct route from problem statement to algorithm, but we feel it better reflects the way that we and our colleagues genuinely think about these questions.

2018-09-19

icml 2016年 会议文章目录

international conference on machine learning(ICML) 会议文章目录,含论文下载链接

2018-09-17

icml 2017年 会议文章目录

international conference on machine learning (ICML)2017年会议文章目录,含论文下载链接

2018-09-17

icml 2018年 会议文章目录(含文章下载链接)

international conference on machine learning (ICML) 2018年会议文章目录, 含论文下载链接

2018-09-17

the art of human hacking

在强大的系统也离不开管理维护他们的人员,人往往是该系统最脆弱的一环

2018-05-26

link prediction in social networks: law of power distribution

link prediction in social networks: law of power distribution

2018-01-23

《Combinatorial Optimization》Cook, Cunningham, Pulleyblank, Schrijver

《Combinatorial Optimization》Cook, Cunningham, Pulleyblank, Schrijver

2017-11-14

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除