weixin_39280437的博客

原创 【英语学习2】

原创 【LLM系列10】LLM训练中的运算精度与微调方法

微调概述

原创 【LLM系列9】GRPO训练

GRPO

原创 【LLM系列8】ORPO 训练

ORPO通过创新的损失函数设计，将监督微调与偏好对齐合二为一，显著简化了训练流程并提升模型性能。其开源实现（如TRL库）和广泛基准验证（如AlpacaEval）使其成为当前最受关注的偏好对齐技术之一。

原创 【LLM系列7】KTO 训练

KTO（Kahneman-Tversky Optimization）

原创 【LLM系列6】DPO 训练

DPO训练

原创 【LLM系列5】PPO 训练

PPO训练

原创 【LLM系列4】奖励模型训练

奖励训练模型

原创 【LLM系列3】指令监督微调

指令监督微调

原创 【LLM系列2】预训练

预训练

原创 【LLM系列1】LLM基本概念整理

LLM基本概念

原创 20241024 from Fey.lynn

Dear Flynn,Thank you for giving me the name Fey.lynn; I’m honored to be your reliable research assistant. Let’s embark on this journey together, step by step, starting with tomorrow’s schedule.9:00 AM – 10:30 AM (1.5 hours): Mathematics for Machine Learnin

原创 【英语学习1】

he you?I lunch.(noun)(noun)(noun)(noun)(noun)(verb)(noun)(noun)pleased.you us?(noun)(noun)(noun)(noun)(noun)(verb)(noun)(noun)(noun)(noun)(idiom)(idiom)(idiom)(idiom)(idiom)

原创 Connectionist Logic Systems and Hybrid Systems by Translation

【代码】Connectionist Logic Systems and Hybrid Systems by Translation。

原创 How to read mathematical symbols and terms in English

D\mathcal{D}D: This is read as “script D” or “calligraphic D.” The X\mathcal{X}X family of letters is often read as “script” followed by the letter.P\mathbb{P}P: This is read as “blackboard bold P” or simply “P” for probability, depending on context.∼\sim∼

原创 Leetcode 1653 Minimum Deletions to Make String Balanced

【代码】Leetcode 1653 Minimum Deletions to Make String Balanced。

原创 LeetCode 1395 Count Number of Teams

【代码】LeetCode 1395 Count Number of Teams。

原创 Paper Reading:Hybrid Neural-Symbolic Systems for Enhanced Interpretability and Control in AI Models

Neural-Symbolic Learning Systems:Historical Context:Advantages and Disadvantages:Framework and Taxonomy:Methods:Applications:Future Directions:The paper provides a comprehensive survey of the advancements in neural-symbolic learning systems, highlighting t

原创 Single Iterable Arguments and Deque Initialization

Deque Initialiation

原创 Leetcode 2045 Second Minimum Time to Reach Destination

【代码】Leetcode 2045 Second Minimum Time to Reach Destination。

原创 Graph Representation in Python

【代码】Graph Representation in Python。

原创 LeetCode 2976 Minimum Cost to Convert String I

You are given two 0-indexed strings, and , both of length and consisting of lowercase English letters. You are also provided with two 0-indexed character arrays, and , and an integer array , where represents the cost of changing the character to the c

原创 HashMap in Python

【代码】HashMap in Python。

原创 Leetcode 1334 Find the City With the Smallest Number of Neighbors at a Threshold Distance

What is ?Matrix Initialization: There are cities numbered from to . Given an array where represents a bidirectional and weighted edge between cities and , and given an integer , return the city with the smallest number of cities that are reachable thr

原创 Reading:Clustering Ensembles Based on Probability Density Function Estimation

Where:[ s_{ij} =]:1 & 0 \1 & 0 \0 & 1 \Where::Given:Where::Where:Here:

原创 编程题——线性表

408线性表部分编程题总结，少了10、11、13年顺序表的，有空加上。

原创 Compiling Code and Implementing Procedures

RISC-V

原创 A Detailed Instruction to a Subset of RISC-V Instructions

Listed by the sequence of opcode,assmbly instr,behavior and complete representation

原创 Introduction to Assembly and RISC-V

A short instruction to RISC-V,esp for RV32I processor

原创 Binary Number Encoding and Arithmetic

questions:questions:We can simply relabel some of the digits to represent negative numbers while retaining the nice properties of modular arithmaticIn two’s complement encoding,the high-order of the N-bit representation has nagetive weight:negative numbe

原创 simple introduction to 6.004

6.004

原创 结构、联合和枚举

结构（structure）可能具有不同类型的值（member）的集合。联合（nuion）可存储不同类型的值，每次储存一个成员（member），无法储存全部成员枚举（enumeration）一种整数类型，它的值由程序员来命名结构是目前为止最重要的一种类型。结构变量数组有两个重要特性：数组的所有元素具有相同的类型为了选择数组元素需要指明元素的位置结构具有与数组非常不同的特性：结构的每个成员可以拥有不同的类型结构的每个成员都有自己的名字，为了原则结构的成员需要指明成员的名字而不是位置.

原创 图图图图图

图的基本概念点边无向图有向图简单图：没有多重边和环 注意数据结构中只讨论简单图多重图简单完全图：边数为(n-1)+(n-2)+…+1 = (n-1)*n/2子图无向图中：连通（存在路径相连的两顶点）连通图（任意两顶点连通）极大连通子图（连通子图包含其所有的边）极小连通子图 （保持图连通又要使得边数最少的子图）连通分量（无向图的极大连通子图称为连通分量）有向图中：强连通（存在双向路径的两顶点）强连通图（任意两点强连通）极大强连通子图（连通子图包含其所有的边）极小强

原创 网安2022新大纲

804-网络空间安全基础本考试科目包括离散数学和数据结构两部分内容，每部分内容各占1/2。考试形式闭卷、笔试。考试时间180分钟，满分为150分。（一）离散数学考查目标要求考生系统地理解与掌握离散数学的基本概念、计算和证明方法，以及应用概念和方法进行应用问题离散建模、计算求解和逻辑推理的能力。要求考生具有抽象思维能力，逻辑推理能力，和综合运用所学的知识分析问题和解决问题的能力。考试内容数理逻辑1.1 命题逻辑及其应用：命题、逻辑联结词、复合命题真值表、逻辑等价、析取范式与合取范式、命题的

原创 数据结构4-6章 回忆总结

串的定义和实现：定长顺序存储；堆分配存储；块链存储串的模式匹配：简单的模式匹配算法、KMP算法、next数组的求法、KMP算法的进一步优化树的定义和基本术语：树是一种逻辑结构；祖先、子孙、双亲、兄弟；节点的度；分支节点、叶子节点；节点的层次、节点的深度、节点的高度；有序树、无序树；路径、路径长度；森林树的基本性质二叉树的定义，特殊二叉树：递归定义；满二叉树、完全二叉树、二叉排序树、平衡二叉树二叉树的存储结构：顺序存储、链式存储；实现二叉树的遍历：先序遍历、中序遍历、后序遍历；递归算法、非递归算.

原创 图的应用：最小生成树；最短路径；有向无环图描述表达式；拓扑排序；关键路径

文章目录图的应用最小生成树Prim算法Kruskal算法最短路径有向无环图描述表达式拓扑排序关键路径图的应用最小生成树图G的最小生成树T是G的所有生成树中边的权值之和最小的树最小生成树：Minimum-Spanning-Tree,MST性质：最小生成树不是唯一的最小生成树的边的权值之和是唯一的最小生成树的边数为定点数减一构成最小生成树的大多数算法利用了最小生成树的下列性质：假设G是一个带全联通的无向图，Y是顶点集V的一个非空子集。假设U是顶点集V的一个非空子集，假设有序对(u_0,v_

原创 -图的遍历-

文章目录图的遍历广度优先搜索BFS算法BFS算法的性能分析BFS算法求解单源最短路径问题广度优先生成树深度优先搜索DFS算法DFS算法的性能分析深度优先的生成树和生成森林图的遍历和连通性图的遍历图的遍历即总图的某一顶点出发，沿着图的边，将图的所有顶点依次访问依次且只访问一次。树是一种特殊的图（极小连通子图），所以树的遍历也可以看作一种特殊的图的遍历。图的遍历算法是求解图的连通性，拓扑排序和求关键路径等算法的基础树的遍历沿边访问不会访问重复的节点（访问过的节点要从栈中读取），而图沿边访问是可能重复访

原创 图的存储及基本操作

文章目录存储方式邻接矩阵法邻接表法十字链表邻接多重表基本操作存储方式邻接矩阵法#define MaxVertexNum 100typedef char VertexType;//顶点数据类型typedef int EdgeType;//权值数据类型typedef struct{ VertexType vertex[MaxVertexNum]; EdgeType edge[MaxVertexNum][MaxVertexNum]; int vertexNum,arcNum;//arc：弧}M

原创 二叉树的线索化

中序线索化//中序遍历typdef struct ThreadNode{ //线索二叉树 ElemType data; //数据项 struct ThreadTree *lchild,*rchild; //左孩子右孩子 int ltag,rtag; //线索标识(初始化为0,若左孩子是空指针则ltag设为1，右孩子同理）}ThreadNode, *ThreadTree;void InThread(ThreadTree T){ //线索化的本质为一个

原创 由遍历序列构造二叉树

给定一个前序遍历或中序遍历或后序遍历或层序遍历序列不能唯一确定二叉树是什么形态以下组合可唯一确定一种二叉树的形态前序 + 中序后序 + 中序层序 + 中序一定要有中序遍历序列才能确定一颗二叉树前序序列：根节点首先出现中序序列：根节点在左子树的所有节点和右子树的所有节点中间出现例子：前序遍历序列：ADBCE中序遍历序列：BDCAEA是根节点->左子树包含：BDC右子树包含：E左子树前序序列：DBCD是根节点->左子树包含：B右子树包含：C关键在于通过前序/后序