- 博客(112)
- 资源 (9)
- 收藏
- 关注
RSS订阅原创 我的笔记：数据体系规则
统一数仓层DW（Data Warehouse）：分为明细数据层（dwd）和汇总数据层（dws），业务系统是按照业务流程方便操作的方式来组织数据，而统一数仓从业务易理解的视角来重新组织，定义一定的指标、维度，各业务板块、业务域按照统一规范独立建设，从而形成统一规范的标准业务数据体系；应用数据层ADS（Application Data Stroe）：按照业务需求从统一数仓层、标签数据层抽取数据，并面向业务的特殊需要加工业务特定数据，以满足业务及性能需求，向特定应用组装应用数据；贴源层数据只能被统一仓库层使用；
2023-08-23 15:53:43
1130
原创 我的笔记：数据相关名词
看待问题的角度，分析业务数据，从什么角度分析，就建立什么样的维度。比如要分析产品销售情况，可以选择按商品类别来进行分析，这就构成了一个维度，把所有商品类别集合在一起，就构成了。：从业务的角度制定统一的数据统计标准，往往用来说明某一数值在特定业务场景下的含义，例如新增用户数、活跃用户数。：取数逻辑（如何取数的），比如要取的数是10岁以下儿童中男孩的平均身高，这就是统计的口径，一般分为。：口径的衡量值，也就是最后的结果。一种是所表示的具体业务含义，例如用户的充值行为，用户的私信行为等。：数据库表格中的一列。
2023-08-23 15:52:13
1388
原创 我的学习笔记：数据处理
对自然语言文本进行结构化、分析、理解等处理，以便于计算机系统进行处理和应用。数据转换：数据转换的实质是将数据的格式进行转换，其目的主要是为了便于处理和分析数据。数据验证：确保数据集中的数据准确性和完整性。将处理后的数据通过图表、图像等方式展示出来，以便于观察数据之间的关系和趋势。等操作，以提高数据的可靠性和准确性，避免数据分析时出现偏差，提高决策的准确性。机器学习可以分类、聚类、回归等，也可以进行数据预处理和数据清洗等。对数据进行处理和加工，以使其适合分析和建模。异常值处理：检测和处理数据集中的异常值。
2023-08-23 10:48:44
624
原创 数据分析之路应该是就此开启了
这只是一个简单的学习路线图，你也可以根据自己的学习进度和兴趣制定一份适合自己的学习计划。：包括假设检验、回归、因子分析、聚类等，探究变量之间的相关性和影响因素。：数据清洗、数据集成、数据变换以及数据规约等，为后续分析做好准备。：分类、聚类、关联规则、回归等，学习如何使用机器学习算法挖掘数据。：包括数学、统计学和编程语言。这是数据分析的基础，需要掌握。：将数据分析应用到实际领域中，如商业、金融、健康等。：制作图表和仪表板，为决策提供直观的数据支持。咱就是说工作以后，就是重新学习的开始啊。
2023-08-23 09:46:55
304
原创 java那些我一直都模模糊糊的概念
Package:包。一个包中可以包含多个class。类似于对class的分层管理。不同包的访问权限不同。Project：项目。一个项目可以包含多个package，不同项目之间基本没有任何关系。每个class文件只能有一个public类，并且类名和文件名必须一致。2、Java入门简单小游戏：扫雷，坦克大战，（待完成）
2023-07-26 09:31:57
95
原创 eclipse
1、更改package explorer下的字体https://blog.youkuaiyun.com/zbr0819/article/details/93773485文件eclipse\plugins\org.eclipse.ui.themes_1.2.1500.v20210607-1102\css、中的e4_basestyle.css添加如下代码CTabFolder Tree { font-size: 16px; font-family: Consolas;}2、补齐键个人习惯：我
2022-01-05 10:51:01
203
原创 密码学小记
1、安全参数https://zhuanlan.zhihu.com/p/424954694用来衡量一个攻击方攻破一个加解密机制有多困难的方式。安全参数越大，对应的破解加密系统的难度也就越大。安全参数的两种类型：1、计算安全参数通常使用符号来表示：决定了加密机制中的定义的计算的数值空间大小，通常是用bit位数来计算，关联计算复杂度。若计算安全参数为对应需要进行次计算。此种密码协议的安全性是建立在攻击方算力有限的情况下。2、统计安全参数通常使用来表示：通常表示在攻击方拥有无限算力的情况
2021-12-15 09:54:56
4080
原创 资源防丢失
密码学：大佬博客http://blog.higashi.tech/大佬知乎https://www.zhihu.com/people/steven-yue-72感谢！
2021-11-30 20:01:22
2939
转载 Android错误日志分析
Android Studio下常见异常以及分析方法常见异常NullPointerException原因：调用对象的方法或属性，但对象为空。ClassCastException原因：类型转换异常。ActivityNotFoundException没有在AndroidManifest.xml清单文件注册Activity，或者注册不正确常见异常的一般分析步骤在Logcat从下往上找，尽量找到causeBy（会显示哪种异常导致）找到出异常的类和行号，点击进入对应的行java.lan
2021-10-29 16:04:31
869
原创 第一行代码android多线程编程
今天写代码的时候，发现书里的Handler构造函数已经过时了。小白查资料public class MainActivity extends AppCompatActivity implements View.OnClickListener{ private TextView mText; public static final int UPDATE_TEXT=1; //定义一个整型常量，用于表示Handler中某个动作 @Override protected v
2021-10-20 20:53:08
603
原创 win10配置apache
1、下载Apache首先下载文件，点击下载2、安装Apache我的路径 D:\Apache24打开D:\Apache24\conf目录下的httpd.conf文件修改ServerRoot# ServerRoot: The top of the directory tree under which the server's# configuration, error, and log files are kept.## Do not add a slash at the end of the
2021-10-19 17:22:49
1223
原创 LitePal遇到的坑
LitePal遇到的坑 <meta-data android:name="com.google.android.actions" android:resource="@xml/litepal" />因为litepal.xml在assests文件里，不在res/xml里所以提示找不到@xml/litepal删掉就可以了！！！！！！！！！！！？？？？？为什么会出现跳过布局这种情况呢，请大佬指点一下。...
2021-10-14 10:47:19
358
原创 提示Android SDK Build-Tools版本号不匹配错误
方法一：亲测有效更改app->build.gradle将targetSdk改成要求的版本号即可我的是原来targetSdk是31，提示没有版本30.0.2，将targetSdk改成30即可方法二：根据提示从Tools->SDK Manager->Android SDK处下载，我没找到要下载什么给自己：试着读懂错误是什么，为什么，怎么办而不是机械地百度...
2021-09-23 09:08:06
1696
原创 LATEX学习记录
1、首先上绝杀，这个制作表格真的是太方便啦！当然也不是万能的。https://www.tablesgenerator.com/#2、Latex 表格内的公式实现换行的方法首先在导言区添加：\newcommand{\tabincell}[2]{\begin{tabular}{@{}#1@{}}#2\end{tabular}} %放在导言区如下：然后在tabular内的格子内使用 \tabincell{c}{} 插入相应内容, 就可以在表格中自动换行如下：\begin{table}\ne
2021-09-04 19:34:08
402
原创 《我们仨》
钱钟书和杨绛是文化界有名的伉俪，他们的结合一度被世人称为“最美爱情的模板”。然而，在世俗眼里，这童话般的美好婚姻也有遗憾，那就是：晚年，因为独生女钱瑗早逝的缘故，两人成了“失独老人”。1997年3月4日，不到60岁的钱瑗因患脊椎癌，这年，钱钟书87岁，杨绛86岁。都说，“老年丧子”是人世间三大悲剧之一，面对这突如其来的打击，已步入耄耋之年的钱钟书瞬间悲从中来，一年后，钱钟书便追随女儿而去。自此，一家三口仅留杨绛一人。因为钱瑗未曾生育子女，杨绛的晚年一直是孤零零一人独自生活。在孤独和思念中，杨绛只能以回忆.
2021-08-10 15:31:29
1420
原创 《人类简史》
第十二章 宗教的法则自然法则释迦牟尼认为，人遇到事情通常就会产生欲念，而欲念总是会造成不满。遇到不喜欢的事，就想躲开；遇到喜欢的事，就想维持并增加这份愉快。但正因如此，人心就永远不满、永远不安。这点在碰上不悦的时候格外明显，像是感觉疼痛的时候，只要疼痛持续，我们就一直感到不满，用尽办法想要解决。然而，就算是遇上欢乐的事，我们也从不会真正满足，而是一直担心这种欢乐终将结束或是无法再持续或增强。有些人多年来一直在寻找爱情，但等到真的找着了爱情，却还是不满足。有的开始整天担心对方可能会离开；有的又觉得自己太
2021-08-05 20:40:48
397
原创 《天生有罪》
时至今日，我的表兄穆隆格斯依然无法理解，我怎么可以一直调皮捣蛋地活到今天的，我怎么能经得住那么多次暴揍，却一直不长记性。我的表兄弟都非常乖。穆隆格斯大概一辈子就挨过一次打，在那之后他说他再也不想挨打了，于是变得非常循规蹈矩。但是我还从我妈身上继承了一个特点，就是擅长忘记生活中的痛苦。我记得留下创伤的原因，但是我不会揪着创伤不放。我从来不会让回忆的痛苦阻碍我对新东西的尝试。如果你总是想着你妈妈会打你，或者生活会惩罚你，你就不会再突破界限，打破规则。最好的是，你挨完打，哭一会儿，第二天醒来继续生活。身上可能会.
2021-07-23 17:42:19
216
原创 BGW协议与shamir
感谢！！！https://blog.youkuaiyun.com/Matrix_element/article/details/117756004https://blog.youkuaiyun.com/shengsikandan/article/details/114936909
2021-07-23 16:05:43
696
原创 归一化 （Normalization）、标准化 （Standardization）和中心化/零均值化 （Zero-centered）
这里写目录标题1 概念1.1 归一化1.2 标准化1.3 中心化1.4 区别2 为什么要归一化/标准化？3 常见的方法3.1 Min-Max Normalization（归一化方法）3.2 Z-score standardization（标准化方法）4 两种方法的使用场景1 概念1.1 归一化１）把数据变成（0,1）或者（1,1）之间的小数。主要是为了数据处理方便提出来的，把数据映射到0～1范围之内处理，更加便捷快速。２）把有量纲表达式变成无量纲表达式，便于不同单位或量级的指标能够进行比较和加权。归一
2021-07-01 14:55:51
1989
原创 损失函数（loss function）
这里写目录标题1、什么是损失函数2、为什么要使用损失函数3、损失函数分类1、分类一2、分类二3、分类三3.1基于距离度量的损失函数3.1.1 均方误差损失函数（MSE）3.1.2 L2损失函数3.1.3 L1损失函数3.1.4 Smooth L1损失函数3.1.5 huber损失函数3.2 基于概率分布度量的损失函数3.2.1 KL散度函数（相对熵）3.2.2 交叉熵损失3.2.3 softmax损失函数3.2.4 Focal loss4. 如何选择损失函数？1、什么是损失函数损失函数用来评价模型的预测
2021-06-30 19:42:45
16156
3
原创 实验一：错误集锦
1、AttributeError: Model’ object has no attribute _ckpt_saved_epoch问题原因：：使用 ModelCheckpoint方法错误，我是用keras训练的模型，结果用了tensorflow的 ModelCheckpoint方法，解决：导入from keras.callbacks import ModelCheckpoint并更改 ModelCheckpoint的调用cp_callback = tf.keras.callbacks.Model
2021-06-23 16:34:35
214
原创 《Tensorflow+Keras深度学习人工智能实践应用》的坑们
1、安装时注意版本兼容问题！！！！tensorflow、keras、python版本兼容问题https://docs.floydhub.com/guides/environments/2、查看版本时version前后是两条横线（天坑）区别：tf.versiontf.version3、代码show_train_history(train_history, ‘accuracy’, ‘val_accuracy’)由于版本问题。acc,val_acc是不对的，补全即可4、...
2021-06-14 21:37:08
17035
7
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人