<?xml version="1.0" encoding="utf-8" ?><rss version="2.0"><channel><title><![CDATA[dabai521的博客]]></title><description><![CDATA[]]></description><link>https://blog.youkuaiyun.com/dabai521</link><language>zh-cn</language><generator>https://blog.youkuaiyun.com/</generator><copyright><![CDATA[Copyright &copy; dabai521]]></copyright><item><title><![CDATA[深度学习学习笔记]]></title><link>https://blog.youkuaiyun.com/dabai521/article/details/148149015</link><guid>https://blog.youkuaiyun.com/dabai521/article/details/148149015</guid><author>dabai521</author><pubDate>Thu, 22 May 2025 21:00:56 +0800</pubDate><description><![CDATA[]]></description><category></category></item><item><title><![CDATA[windows上开始 tensorflow]]></title><link>https://blog.youkuaiyun.com/dabai521/article/details/145502235</link><guid>https://blog.youkuaiyun.com/dabai521/article/details/145502235</guid><author>dabai521</author><pubDate>Fri, 07 Feb 2025 20:45:11 +0800</pubDate><description><![CDATA[大模型训练]]></description><category></category></item><item><title><![CDATA[大模型入门科普]]></title><link>https://blog.youkuaiyun.com/dabai521/article/details/144893590</link><guid>https://blog.youkuaiyun.com/dabai521/article/details/144893590</guid><author>dabai521</author><pubDate>Thu, 02 Jan 2025 19:51:06 +0800</pubDate><description><![CDATA[多模态大模型，结合了NLP和CV的能力，通过整合并处理来自不同模态的信息（文本、图像、音频和视频等），可以处理跨领域的任务，例如文生图，文生视频、跨媒体搜索（通过上传图，搜索和图有关的文字描述）等。根据训练的数据类型和应用方向，我们通常会将大模型分为语言大模型（以文本数据进行训练）、音频大模型（以音频数据进行训练）、视觉大模型（以图像数据进行训练），以及多模态大模型（文本和图像都有）。大部分的大模型，都是基于开源大模型框架和技术打造的，实际上是为了迎合资本市场的需求，或者为了蹭热度。]]></description><category></category></item><item><title><![CDATA[maven的基本概念]]></title><link>https://blog.youkuaiyun.com/dabai521/article/details/142354463</link><guid>https://blog.youkuaiyun.com/dabai521/article/details/142354463</guid><author>dabai521</author><pubDate>Thu, 19 Sep 2024 10:54:03 +0800</pubDate><description><![CDATA[其对应maven 中央仓库的 url 地址为 http://central.maven.org/maven2/com/google/guava/guava/27.0.1-jre/。guava-27.0.1-jre.jar 的具体下载地址就是上文提到的URL construction schemehttp://central.maven.org/maven2/com/google/guava/guava/27.0.1-jre/guava-27.0.1-jre.jar。]]></description><category></category></item><item><title><![CDATA[Arthas 基本命令使用]]></title><link>https://blog.youkuaiyun.com/dabai521/article/details/140603838</link><guid>https://blog.youkuaiyun.com/dabai521/article/details/140603838</guid><author>dabai521</author><pubDate>Mon, 22 Jul 2024 10:56:52 +0800</pubDate><description><![CDATA[4、watch 包名 方法名 “{params}” -x -  展开行数；2、选择要查看的 进程 号 例如 1。3、trace 包名 方法名。1、arthas 进入应用。]]></description><category></category></item><item><title><![CDATA[clickhouse 源码编译部署]]></title><link>https://blog.youkuaiyun.com/dabai521/article/details/137346107</link><guid>https://blog.youkuaiyun.com/dabai521/article/details/137346107</guid><author>dabai521</author><pubDate>Wed, 03 Apr 2024 15:01:56 +0800</pubDate><description><![CDATA[生产：10.216.86.23，10.216.86.24，10.216.86.31（没有权限登录，存在有权限，拷贝和重启服务需要找存在执行）点击build project，编译工程，经过一定时间（第一次编译可能几个小时，后续再编译，只编译有改动的文件）生成release目录。clickhouse可执行文件存放（拷贝）目录（远程拷贝时，需要将原clickhouse可执行为念删除或重命名）：/usr/bin/clickhouse配置文件目录：/etc/clickhouse-server。]]></description><category></category></item><item><title><![CDATA[ClickHouse开发相关（UDAF）]]></title><link>https://blog.youkuaiyun.com/dabai521/article/details/137345941</link><guid>https://blog.youkuaiyun.com/dabai521/article/details/137345941</guid><author>dabai521</author><pubDate>Wed, 03 Apr 2024 14:57:21 +0800</pubDate><description><![CDATA[ClickHouse介绍ClickHouse是一个开源、高性能的列式 OLAP 数据库管理系统，用于使用 SQL 进行实时分析。为什么需要ClickHouse UDAF？ClickHouse中已存在了许多聚合函数，绝大多数情况下已经覆盖我们的需求，但是有时候我们仍然需要自定义函数逻辑，去实现复杂的数据分析需求，因此就有了基于ClickHouse中实现自定义函数（UDF）或自定义聚合函数（UDAF）需求，这篇文章我们讲下如何基于ClickHouse实现UDAF。实现UDAF步骤。]]></description><category></category></item><item><title><![CDATA[2021-07-31]]></title><link>https://blog.youkuaiyun.com/dabai521/article/details/119270252</link><guid>https://blog.youkuaiyun.com/dabai521/article/details/119270252</guid><author>dabai521</author><pubDate>Tue, 28 Nov 2023 16:59:23 +0800</pubDate><description><![CDATA[单日3亿+日志数据准实时存储和分析
–ClickHouse 在自如大前端研发中心的应用

第一章 架构设计 和 用户体系建设


文章目录单日3亿+日志数据准实时存储和分析前言一、pandas是什么？二、使用步骤1.引入库2.读入数据总结


前言
用户行为数据的收集和分析，已成为各家互联网公司预知市场动向，决策公司运营方向，提升产品使用感受，促进产品进步的重要手段。各家主流互联网公司都争先建立自有的数据采集和分析体系，来应对日益复杂的市场，自如作为主流的互联网公司之一，也势必要建立自己的日志采集和分析体系]]></description><category></category></item><item><title><![CDATA[Kubernetes]]></title><link>https://blog.youkuaiyun.com/dabai521/article/details/130875050</link><guid>https://blog.youkuaiyun.com/dabai521/article/details/130875050</guid><author>dabai521</author><pubDate>Tue, 28 Nov 2023 16:58:18 +0800</pubDate><description><![CDATA[yum -y install dockeryum install -y yum-utils device-mapper-persistent-data lvm2yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repoyum -y install docker-ce docker-ce-cli containerd.io链接: link.图片: 带尺寸的图片: 居中的图片: 居中并]]></description><category></category></item><item><title><![CDATA[redis 常用命令行]]></title><link>https://blog.youkuaiyun.com/dabai521/article/details/127850909</link><guid>https://blog.youkuaiyun.com/dabai521/article/details/127850909</guid><author>dabai521</author><pubDate>Fri, 17 Nov 2023 11:41:32 +0800</pubDate><description><![CDATA[根据master 名称 获取主ip。]]></description><category></category></item><item><title><![CDATA[kafka常用命令]]></title><link>https://blog.youkuaiyun.com/dabai521/article/details/128311747</link><guid>https://blog.youkuaiyun.com/dabai521/article/details/128311747</guid><author>dabai521</author><pubDate>Tue, 07 Nov 2023 19:34:24 +0800</pubDate><description><![CDATA[b.创建increase-replication-factor.json in config,配置各分区replication-factor位置。c.更新replication-factor。设置kafka 单个topic 保留时长。增加、修改、删除Topic的配置项。a.修改partitions数量。查询某个topic的信息。]]></description><category></category></item><item><title><![CDATA[Linux命令总结]]></title><link>https://blog.youkuaiyun.com/dabai521/article/details/133776179</link><guid>https://blog.youkuaiyun.com/dabai521/article/details/133776179</guid><author>dabai521</author><pubDate>Wed, 11 Oct 2023 20:06:53 +0800</pubDate><description><![CDATA[top -p 进程ID ，然后按H。]]></description><category></category></item><item><title><![CDATA[Docker技术总结]]></title><link>https://blog.youkuaiyun.com/dabai521/article/details/132889501</link><guid>https://blog.youkuaiyun.com/dabai521/article/details/132889501</guid><author>dabai521</author><pubDate>Fri, 15 Sep 2023 09:15:22 +0800</pubDate><description><![CDATA[安装Docker首先，您需要在本地计算机或服务器上安装Docker。您可以在官方Docker文档中找到有关安装Docker的详细指南。安装完成后，您可以通过运行以下命令来检查版本：编写Dockerfile在将您的应用程序打包到Docker容器之前，需要编写一个Dockerfile。Dockerfile是一个文本文件，其中包含了创建Docker镜像所需的命令和指令。以下是一个简单的Dockerfile示例：COPY . .构建Docker镜像。]]></description><category></category></item><item><title><![CDATA[ElasticSearch先关指令]]></title><link>https://blog.youkuaiyun.com/dabai521/article/details/132699151</link><guid>https://blog.youkuaiyun.com/dabai521/article/details/132699151</guid><author>dabai521</author><pubDate>Tue, 05 Sep 2023 19:52:51 +0800</pubDate><description><![CDATA[}],解决办法：]]></description><category></category></item><item><title><![CDATA[【无标题】]]></title><link>https://blog.youkuaiyun.com/dabai521/article/details/132218319</link><guid>https://blog.youkuaiyun.com/dabai521/article/details/132218319</guid><author>dabai521</author><pubDate>Thu, 10 Aug 2023 20:51:08 +0800</pubDate><description><![CDATA[1.更新软件包2.三台机器安装Docker3.开机自启docker并启动enabled;6s ago4.配置内核参数5.添加必要内核模块/bin/bash-bash:./etc/sysconfig/modules/ipvs.modules: 没有那个文件或目录6添加kubeadm的yum源enabled=1gpgcheck=1EOF配置master节点。]]></description><category></category></item><item><title><![CDATA[Clickhouse源码编译环境配置]]></title><link>https://blog.youkuaiyun.com/dabai521/article/details/130840269</link><guid>https://blog.youkuaiyun.com/dabai521/article/details/130840269</guid><author>dabai521</author><pubDate>Tue, 20 Jun 2023 17:36:58 +0800</pubDate><description><![CDATA[解决办法：在终端输入 sudo gedit /etc/hosts ，打开/etc/hosts文件，然后注释掉所有只涉及到github.com的行(注意是 只有github.com ，有任何别的都不可以）即可解决。File-settings-CMake中 配置上： -DCMAKE_C_COMPILER=/usr/bin/clang -DCMAKE_CXX_COMPILER=/usr/bin/clang++查看Clickhouse 命令，直接使用 ./clickhouse 命令查看。在编辑工具中（clion）]]></description><category></category></item><item><title><![CDATA[git 常用命令总结]]></title><link>https://blog.youkuaiyun.com/dabai521/article/details/129193870</link><guid>https://blog.youkuaiyun.com/dabai521/article/details/129193870</guid><author>dabai521</author><pubDate>Fri, 24 Feb 2023 09:08:21 +0800</pubDate><description><![CDATA[重置后，在执行命令时重新输入用户名密码，即可。]]></description><category></category></item><item><title><![CDATA[知其所以然 之 HashCode]]></title><link>https://blog.youkuaiyun.com/dabai521/article/details/128578179</link><guid>https://blog.youkuaiyun.com/dabai521/article/details/128578179</guid><author>dabai521</author><pubDate>Sun, 08 Jan 2023 14:54:29 +0800</pubDate><description><![CDATA[直接定址法是以数据元素关键字k本身或它的线性函数作为它的哈希地址H（k）=k  或 H（k）=a×k+b地址年龄人数A111000A221500A99991500A1001001800在这个例子中，直接用年龄本身作为地址。这种哈希函数简单，并且对于不同的关键字不会产生冲突，但可以看出这是一种较为特殊的哈希函数，实际生活中，关键字的元素很少是连续的。用该方法产生的哈希表会造成空间大量的浪费，因此这种方法适应性并不强。]]></description><category></category></item><item><title><![CDATA[Kafka文件存储机制详解]]></title><link>https://blog.youkuaiyun.com/dabai521/article/details/128296792</link><guid>https://blog.youkuaiyun.com/dabai521/article/details/128296792</guid><author>dabai521</author><pubDate>Fri, 16 Dec 2022 09:29:27 +0800</pubDate><description><![CDATA[第二步通过segment file查找message 通过第一步定位到segment file，当offset=368776时，依次定位到00000000000000368769.index的元数据物理位置和00000000000000368769.log的物理偏移地址，然后再通过00000000000000368769.log顺序查找直到offset=368776为止。offset：每个partition都由一系列有序的、不可变的消息组成，这些消息被连续的追加到partition中。]]></description><category></category></item><item><title><![CDATA[ClickHouse 常用语句]]></title><link>https://blog.youkuaiyun.com/dabai521/article/details/127792068</link><guid>https://blog.youkuaiyun.com/dabai521/article/details/127792068</guid><author>dabai521</author><pubDate>Fri, 16 Dec 2022 09:11:26 +0800</pubDate><description><![CDATA[查看测试表在19年12月的分区信息。1.查看数据库容量、行数、压缩率。2.查看数据表容量、行数、压缩率。–在此查询一张临时表的信息。4.查看数据表字段的信息。3.查看数据表分区信息。]]></description><category></category></item></channel></rss>