- 博客(70)
- 资源 (7)
- 收藏
- 关注
RSS订阅原创 解决Windows 11 CMD和Terminal显示问题
解决CMD和Terminal意外弹出的问题，通常是一个排查过程。核心思路是找到触发它们自动运行的源头，可能是计划任务、启动项、注册表或者是某个特定软件。排查方向关键检查点/方法预期结果计划任务任务计划程序库中的Office相关任务及其他第三方任务禁用可疑任务后弹窗消失启动项任务管理器中的启动项及文件夹禁用或移除后开机不再触发注册表Run键值下的自启动命令删除可疑条目后问题解决进程追踪通过任务管理器查找父进程(PPID)精确定位到 responsible 的应用程序系统环境。
2025-09-06 14:39:31
2109
原创 解决Elasticsearch高亮显示被横线截断的问题
;:]+", // 自定义分隔符，排除横线Elasticsearch高亮显示是一个强大但需要精细调优的功能。横线导致的截断问题虽然常见，但通过本文介绍的方法，你可以轻松解决。记住理解原理比记住解决方案更重要——只有深入理解Elasticsearch的高亮机制，才能在遇到类似问题时快速找到解决方法。现在就去检查你的Elasticsearch高亮配置吧，别让小小的横线影响用户的搜索体验！进一步阅读Elasticsearch官方高亮文档Lucene分词器工作原理。
2025-09-02 11:09:06
1042
原创 如何 让ubuntu 在root 下安装的docker 在 普通用户下也能用
在 Ubuntu 系统中，如果 Docker 是以 root 用户安装的，普通用户默认无法直接使用 Docker 命令（会报权限错误）。如果不想配置用户组，可以在每条 Docker 命令前加。的用户组，将普通用户加入该组即可获得权限。直接使用 Docker 命令。Docker 安装时会自动创建一个名为。通过以上步骤，普通用户即可无需。，既方便又相对安全。
2025-08-08 16:03:13
579
原创 Kubesphere搜索镜像问题
如果安装完Kubesphere后，在集群中的节点的docker即使配置了镜像加速，但是kubesphere的中的镜像搜索是走api的功能，跟集群中的docker配置无关，默认访问docker.io的镜像还是访问不到！解决方法：1、只能将docker.io的镜像替换成国内镜像（强烈推荐【daocloud】、中科大、阿里云等）2、建立自己的harbor私库，镜像也是需要利用科学上网工具或者从国内镜像仓库地址下载后上传。
2025-08-06 17:22:00
646
原创 反向代理与Real-IP和X-Forwarded-For
通过“proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for” 把从真实客户端IP和反向代理IP通过逗号分隔，添加到请求头中；可以在第一个反向代理上配置“proxy_set_header X-Real-IP $remote_addr” 获取真实客户端IP；配合realip模块从X-Forwarded-For也可以获取到真实客户端IP。
2025-08-06 16:54:23
828
原创 docker容器中sh脚本，启动容器时报错：no such file or directory
sh 脚本在下载到 windows下，被编辑后导致，换行符变成了windows下的换行符。
2025-08-06 08:42:34
453
原创 ollama bge-m3 Embending模型永久加载 does not support generate
摘要 在尝试让bge-m3模型永久加载时，使用API接口时出现"does not support generate"错误。解决方案是通过修改Ollama服务配置文件，在环境变量中添加OLLAMA_KEEP_ALIVE=-1参数。具体步骤包括：编辑/etc/systemd/system/ollama.service文件，添加保持连接的环境变量，然后重新加载并重启Ollama服务。该方法绕过了直接API调用的问题，实现了模型的持久化加载需求。
2025-07-03 17:14:07
1057
原创 ffmpeg 安装 windows & ubuntu
如果任务能正常完成且不需要处理音频，可以暂时忽略此警告。即使你处理的是 PDF，某些库的依赖链可能间接调用了它。确认是否能识别命令。如果成功，警告将不再出现。（但这不是根本解决方案）安装完成后，在终端运行。是最彻底的解决方案。
2025-06-30 15:35:54
297
原创 Flink三种集群部署模型
在 Flink Job 集群中，可用的集群管理器（例如 YARN）用于为每个提交的作业启动一个集群，并且该集群仅可用于该作业。Flink 应用程序的作业可以被提交到长期运行的 Flink Session 集群、专用的 Flink Job 集群 或 Flink Application 集群。在 Flink Application 集群中，ResourceManager 和 Dispatcher 作用于单个的 Flink 应用程序，相比于 Flink Session 集群，它提供了更好的隔离。
2025-01-07 10:22:25
1331
原创 elasticsearch词频统计
termvector会获取document中的某个field内的各个term的统计信息。统计文档某个字段的，各个分词的数量。ES 比较简单的处理方式为。
2025-01-07 10:10:19
260
原创 Flink CDC 自定义函数处理 SQLServer XML类型数据 映射 doris json字段方案
因业务使用SQLServer数据库，CDC同步到doris 数仓。对于SQLServer xml类型，doris没有响应的字段对应，可以使用json来存储xml数据。需要进行一步转换。从 flink 自定义函数入手。
2024-12-31 16:31:08
1169
原创 doris集群存储目录切换
3节点集群，BE存储目录，因为运维原因。存储盘系统放在了一一起。3节点集群，如果各个表都是3副本，可以实现轮流停机，方式处理。但是业务方使用并不规范，存在某些表单副本情况。需要增加硬盘，并替换原有目录。
2024-12-28 13:36:40
474
原创 安全多方计算 - 隐私求交 PSI 的实现协议
广告投放转化率：广告商在商业平台上投放了广告，希望能确认有哪些商业客户是通过广告来消费的（即广告转化率），但商业机构的到店消费数据也很保密，所以需要隐私求交实现；已泄露密码检索：google、微软都提供过已泄露的用户名/密码检索库，但作为检索个人来说，不希望把密码直接提供给google、微软，而且也不想在检索过程中留痕。市场领域确定：两家势均力敌的企业，都想扩大自己的市场领域，但又不能占据对方的，所以想试探性确认下某些地域是否已被对方拿下；保护隐私的数据检索 （PIR的典型应用）
2024-12-24 16:58:59
515
原创 GPU环境配置
可根据自己显卡版本选择合适的CUDA版本，查询链接：https://docs.nvidia.com/cuda/cuda-toolkit-release-notes/index.html。不同型号的显卡请到英伟达官网查找下载链接：https://www.nvidia.cn/Download/Find.aspx?注意这里要按 Enter 取消勾选第一个选项,因为之前已经安装了驱动。安装的显卡驱动版本是550.100，可以安装CUDA 12版本。上面使用的是4090版本的，对应的驱动版本为550.100。
2024-12-23 17:03:45
505
原创 conda 安装
pip3 install -r requirements_linux.txt --extra-index-url https://download.pytorch.org/whl/cu121 -i https://pypi.mirrors.ustc.edu.cn/simple/
2024-12-11 11:40:24
187
原创 SqlServer Doris Flink SQL 类型映射关系
SqlServer 对应 Flink SQL 数据类型映射关系SQL Server TypeFlink SQL Typechar(n)CHAR(n)varchar(n)VARCHAR(n)nvarchar(n)VARCHAR(n)nchar(n)VARCHAR(n)textSTRINGntextSTRINGxmlSTRINGdecimal(p, s)DECIMAL(p, s)moneyDECIMAL(p, s)sm
2024-12-10 17:15:06
866
原创 大宗商品行业区块链应用
区块链技术的核心优势在于其透明性、去中心化和不可篡改的特性，这使得其在大宗商品定价中的应用具有显著的潜力。通过智能合约、去中心化数据共享、供应链追溯等方式，区块链能够提供更加公正、透明和高效的定价体系，降低市场操控和信息不对称的风险。同时，区块链技术也为跨境支付和金融产品定价提供了更加灵活和便捷的解决方案。区块链在大宗商品定价中的应用前景广阔，但仍面临技术复杂性、法律监管、隐私保护等方面的瓶颈。尽管如此，已有一些成功的案例展示了区块链技术在提高透明度、效率和减少交易成本方面的优势。
2024-11-23 14:30:40
951
原创 Flink 命令行异常 `java.lang.NoSuchMethodError: org.apache.commons.cli.CommandLine.hasOption` 解决
1、apache commons cli 库的版本有问题，主要是因为可能引入了其他的jar包，到 /lib 目录。另外也要检查一下自己的项目是否引入了，将相关版本排除掉即可。
2024-11-18 17:04:39
613
原创 metabase域账号登录过期处理
2、修改元数据表 setting 表，ldap-password 字段，改字段明文存储。过期后，无法登录无法修改密码，如何处理。1、从域控将密码改回原来的（麻烦）metabase域账号过期。
2024-10-14 08:58:00
374
原创 使用 SageMaker 对 Whisper 模型进行微调及部署
Whisper 作为 OpenAI 最新开源的自动语音识别（ASR）模型，采用了编码器-解码器（encoder- decoder）transformer架构，并使用了 68 万小时的从互联网收集的多语言、多任务的已标注数据进行训练。根据其论文显示，Whisper 模型在无需微调（zero-shot）的情况下，在多个数据集的测试上鲁棒性更高，错误率更低。关于 Whisper 模型的更多细节，参见其官方网站以及。
2023-11-14 17:15:00
1272
1
原创 RestTemplate直接发送内存文件对象multipart
然后，构建一个由字节数组和其他信息（如原始文件名和媒体类型）组成的资源对象，用于作为 HTTP 请求的一部分。
2023-10-14 13:42:47
2418
1
原创 int(11)在MySQL中意味着什么?
默认情况下，每种整数类型的数量与该类型的最大负值中的字符数相同。同样，对于 BIGINT，默认显示宽度是 20，它等于最大负 BIGINT 中的字符数 (-9223372036854775808)。应用程序可以获取元数据以获取列的显示宽度，然后将其用于设置列的宽度或显示列中的数字等。关于int(11)在MySQL中的含义，一个非常常见的误解是，该列可以存储长度为11位的最大整数值。11是整型列的显示宽度，与字符列不同，其中数字表示可以存储的字符数。对于整数类型的列，括号中的数字称为字段的显示宽度。
2023-09-13 09:29:28
2861
转载 深入理解Prometheus rate irate increase
因此，在用计数器绘制图形或做任何其他事情之前，您通常希望将其包装在类似rate(),的函数中irate()，或者increase()查看计数器上升的速度。irate()(“instant rate”)：计算每秒的增长率，就像计算一样rate()，但只考虑在提供的时间窗口下的最后两个样本进行计算，并忽略所有较早的样本。为了不将这些重置解释为实际的负利率，与计数器相关的函数具有检测和处理这些重置的逻辑：在提供的时间窗口下迭代样本时，函数检查是否有任何样本的值低于前一个，并将这种情况解释为计数器重置。
2023-02-16 09:17:52
1192
原创 Flink on Yarn 模式 提交作业以及TaskManager内存配置
内存分为整个container内存、flink内存。其中内存类型又分为堆内存和堆外内存。JVM Metaspace ：默认256M；JVM Overhead内存：默认整个container内存的0.1；最大值为1G，最小值为192M，如果计算出来的内存大小不在此区间范围内，按照最小值/最大值 分配；例如计算的结果为128M，实际按照192M分配；计算结果为1.2G，实际按照1G分配；
2022-12-09 14:39:41
1387
原创 flink 1.16.0上传jar报错
部署方式 Application Mode On Yarn。错误Caused by: java.lang.ClassCastException: org.codehaus.janino.CompilerFactory cannot be cast to org.codehaus.commons.compiler.ICompilerFactory
2022-11-21 17:36:36
1249
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人