- 博客(32)
- 收藏
- 关注
RSS订阅原创 DataX脚本test_province.json
同步HDFS上的/base_province目录下的数据到MySQL gmall数据库下的test_province表。hdfs至mysql。
2024-11-27 23:19:38
296
原创 DataX脚本base_province_sql.json
sql语句版配置"job": {],}],},},},},},},},},},],}],"speed": {
2024-11-27 23:18:51
398
原创 DataX脚本base_province_parameter.json脚本：传参
传参提交命令：在提交任务时使用-p"-Dparam=value"传入参数值。
2024-11-27 23:18:03
505
原创 Flume脚本 kafka_to_hdfs_db.conf
# flume脚本位置位于 flume/job目录下。##物流项目kafka 采集至 hdfs脚本。##interceptors：拦截器。# 3 配置channels。# 2 配置source。# 4 配置 sinks。
2024-11-27 23:14:00
351
原创 Flume脚本file_to_kafka.conf
#电商项目 行为数据，日志文件采集至kafka脚本。##flume脚本位置位于 flume/job目录下。#配置channel。
2024-11-27 23:09:13
124
原创 07-多线程
07 多线程：多线程两种实现方式：继承Thread类，实现Runnable接口、线程同步、死锁、线程优先级、加入线程、守护线程、线程池、Lock锁、生产者和消费者
2022-11-24 03:50:36
88
原创 06-IO流
06 IO流：异常、File类、字节输出流、字节输入流、高效字节流、编解码问题、字符流、转换流、字符高效流、序列化流、Lambda表达式
2022-11-24 03:50:04
122
原创 05-集合
05 集合：Collection、List、列表迭代器、并发修改异常、增强for、常见的数据结构、ArrayList、LinkedList、Set、HashSet、LinkedHashSet、可变参数、Map、Collections工具类
2022-11-24 03:49:34
138
原创 04-API
04 API：Object类、String类、StringBuilder类、Array工具类、包装类、Date类、SimpleDateFormat类、Calendar类、内部类、匿名内部类
2022-11-24 03:47:30
107
原创 json_each()和json_tree()表值函数 用法
json_each()和json_tree()表值函数表值函数 json_each（X）和json_tree（X）遍历作为其第一个参数提供的JSON值，并为每个元素返回一行。json_each（X）函数仅遍历顶级数组或对象的直接子级，或者如果顶级元素是原始值，则仅遍历顶级元素本身。json_tree（X）函数以递归的方式遍历从顶层元素开始的JSON子结构。json_each(X,P)和json_tree(X,P)函数的工作原理和它们的单参数对应函数一样,只是它们将路径P所标识的元素视为顶层元素。jso
2022-03-04 17:48:13
1271
原创 HDFS_01
章节内容介绍1) HDFS的基本概念2) HDFS的架构说明 //理解 + 记忆3) HDFS中副本机制和机架感知原理 //理解 + 记忆4) HDFS的shell命令的操作: //基本命令(重点关注) + 高级命令5) HDFS的namenode和datanode的基本功能详细说明 //理解6) HDFS如何读写数据操作 //理解 + 记忆7) HDFS的元数据的辅助管理原理 //理解 + 记忆以下是具体的知识点HD
2022-02-21 22:50:32
919
原创 技术点记录
函数Hive的内置函数数学函数取整函数：round、floor、ceil、fixfix朝零方向取整，如fix(-1.3)=-1; fix(1.3)=1;floor：地板数，所以是取比它小的整数，即朝负无穷方向取整，如floor(-1.3)=-2; floor(1.3)=1; floor(-1.8)=-2; floor(1.8)=1。ceil：天花板数，也就是取比它大的最小整数，即朝正无穷方向取整，如ceil(-1.3)=-1; ceil(1.3)=2; ceil(-1.8)=-1; ceil
2022-02-21 22:17:25
1121
原创 Python基础_10_包和PEP8代码规范和案例
python基础10_包和PEP8代码规范和案例文章目录python基础10_包和PEP8代码规范和案例一、包1.1 包的作用1.2. 包的创建1.3. 使用 `import 包名.模块名` 能够导入包中的模块1.3 使用 `from 包名.模块名 import...`能够导入模块中的符号1.4 包中`__init__.py`文件的作用二、【了解】PEP8代码规范三、【应用】学⽣名片管理系统-面向对象版3.1. 需求分析-抽象学生类-增删改查3.2. 需求-文件处理需求3.3. 学生类设计3.4. 学生管
2022-01-26 23:19:36
450
原创 Python基础_9_异常和模块
python基础9_异常和模块文章目录python基础9_异常和模块一、异常1. 异常简介2. 异常的基本处理2.1 处理异常的目的2.2 捕获任意类型的异常2.3 捕获指定异常类型2.4 except捕获多个异常2.5 获取异常的信息描述2.6 捕获任意类型的异常2.7 异常中else2.8 try...finally...3. 异常的传递3.1 try嵌套3.2 函数嵌套4.【重点】抛出⾃定义异常二、模块1. 模块的使用1.1 模块介绍1.2 import导入模块1.3 from…import导入模块
2022-01-26 23:19:06
229
原创 Python基础_8_面向对象2
python基础8_面向对象2文章目录python基础8_面向对象2一、面向对象：继承、属性、方法1. 【记忆】 私有权限2. 继承2.1【记忆】继承介绍父类，也叫基类子类，也叫派生类定义一个父类定义一个子类，继承与Father子类创建对象3.【记忆】重写父类方法3.1【记忆】子类重写父类同名方法：3.2【记忆】子类调用父类同名方法：4. 【重点】多继承4.1【重点】多继承4.2【重点】查看继承顺序4.3【重点】子类调用父类同名方法：5.【知道】私有和继承6.【了解】多态7. 【记忆】属性7.1. 【记忆
2022-01-26 23:18:32
211
原创 Python基础_07_面向对象1
python基础7_面向对象1文章目录python基础7_面向对象1一、面向对象：类和对象、魔法方法1. 面向对象编程概述1.1【了解】面向过程和面向对象的区别1.2【知道】类和对象介绍2. 面向对象编程2.1【重点】定义类和方法2.2【重点】创建对象和调用方法2.3【重点】添加和使⽤属性2.5【记忆】self是什么2.5【理解】self的作用3. 魔法方法3.1【重点】`__init__`方法3.2【重点】`__str__`方法3.3【了解】`__del__`方法4.【应用】烤地瓜4.1. 普通版本4.
2022-01-26 23:18:05
266
原创 Python基础_6_文件
python基础6：文件文章目录python基础6：文件一、文件操作1.【知道】文件的作用2.【重点】文件基本操作2.1. 【记忆】文件自动关闭3.【重点】文件写操作4.【重点】文件读操作4.1. read指定读取内容：4.2. readlines读取所有行：4.3. readline一次读取一行：5.【记忆】打开文件详解5.1 【记忆】访问模式`r`,`w`,`a`的区别注意3: "r": 只读打开文件,不能写f.write("hello world") # io.UnsupportedOperati
2022-01-26 23:17:27
344
原创 Python基础_05_强化和进阶
#python基础5：进阶文章目录一、强化和进阶1.【重点】组包和拆包1.2. 【重点】组包和拆包的应用2. 【理解】引用2.2 【理解】引用指向改变2.3. 【记忆】函数传参是引用传递3.【记忆】可变类型与不可变类型4.【重点】range5.【重点】列表推导式6.【记忆】匿名函数7.【了解】递归函数8.【记忆】enumerate和del二、【应用】学生名片管理系统1.需求分析2.主页面逻辑:3.菜单实现4.添加学生信息:5.显示所有学生信息:6.查询某个学生:7. 修改某个学生8. 删除某个学生一、强
2022-01-26 23:16:18
390
原创 Python基础_04_函数
python基础4：函数文章目录python基础4：函数一、函数1. 函数的基本使用1.1【理解】函数的作用1.2【重点】函数的定义和调用1.3【理解】函数的执行过程1.4【记忆】函数的文档注释2. 函数的参数2.1【理解】函数参数的作用2.2【重点】函数参数的使用2.3【记忆】形参的作用域3. 函数的返回值3.1【理解】函数返回值的作用3.3【重点】通过return给函数设置返回值3.4【记忆】函数默认返回值3.5【重点】return中断函数4. 【重点】四种函数的类型5. 【理解】函数的嵌套调用6.
2022-01-26 23:03:21
377
原创 Python基础_03_容器类型
Python基础3：容器类型文章目录Python基础3：容器类型一、列表1.【重点】列表的定义和使用1.1. 【重点】列表的定义和使用1.2. 【重点】列表的嵌套定义和使用2.【知道】列表常用操作2.1. 【知道】增删操作2.2. 【知道】修改查询2.3. 【知道】排序3.【重点】列表的遍历3.1 【重点】通过for循环遍历3.2 【重点】if…in 和 for…in 的区别3.3 【重点】for…else的使用二、元组1.【重点】元组的定义和使用2.【知道】元组和列表的区别三、字典1.【重点】字典的定义
2022-01-26 23:02:47
1135
原创 Python基础_02_选择和循环语句
Python基础2：选择和循环语句文章目录Python基础2：选择和循环语句一、选择1.【了解】选择应用场景介绍2.【理解】 比较和逻辑运算符2.1 【理解】比较运算符2.2 【理解】逻辑运算符3.【重点】if语句的基本使用3.1 【重点】if语句的使用3.2【重点】if-else语句的使用3.3【记忆】通过if实现的三目运算符3.4【重点】if-elif-else语句的使用4.【难点】if的嵌套5.【应用】猜拳游戏5.1【应用】基础代码实现5.2【记忆】随机数的处理5.3【应用】完整代码二、循环1.【了
2022-01-26 23:02:10
664
原创 Python基础_01_变量和类型、输出输入、运算符
python基础第一天-基础知识文章目录python基础第一天-基础知识一、计算机基础知识1.【了解】硬件系统2.【了解】软件系统二、认识Python1.【了解】Python的介绍2. PyCharm的使用2.1【知道】PyCharm创建工程2.2【了解】PyCharm设置字体三、基础语法1. 第一个Python程序1.1【重点】第一个Python程序（）1.2【重点】bug介绍1.3【重点】注释1.4【了解】PyCharm常用快捷键2. 变量、类型、标示符2.1【重点】变量2.2【重点】类型2.3【重点
2022-01-26 23:01:09
437
Redis笔记Redis笔记Redis笔记Redis笔记Redis笔记Redis笔记Redis笔记
2024-09-18
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人