
数据库
文章平均质量分 58
Seven_0507
慎始善终
展开
-
Python连接操作常见数据库的封装
在工作中经常会使用python连接常见的数据库编写python脚本,用于数据分析中一些过程表的清洗与汇总操作,为了方便现将常见的数据库的操作封装在一起,方便调用使用,Spark连接操作后期补充欢迎指正。import sysimport loggingimport pymysqlimport cx_Oraclefrom pyhive import sqlalchemy_hive, hivefrom clickhouse_driver import Client# from pyspark.sq原创 2021-08-09 15:49:40 · 1504 阅读 · 0 评论 -
Mysql建表、索引、函数、查询使用中的坑!!!
文章目录I’m back!Fighting!序言Mysql建表原则具体内容可参阅Mysql的建表规范与注意事项这篇文章本内容参照MySql表、索引设计参考规范归纳以下只说明特别注意点:基础规范:(1)表存储引擎强烈建议使用InnoDB;(2)表字符集默认使用utf8,必要时候使用utf8mb4;(utf8通用,无乱码风险,汉字3字节,英文1字节)(3)禁止使用存储过程,视图,触发器,Event;(4)禁止在数据库中存储大文件,例如照片,可以将大文件存储在对象存储系统,数据库中存原创 2020-11-11 11:38:30 · 531 阅读 · 0 评论 -
Python连接MySQL、Oracle数据库
一、Python链接MySQL数据库二、Python链接Oracle数据库原创 2018-06-15 09:59:18 · 725 阅读 · 0 评论 -
Hive基本语句及函数用法汇总
文章目录1. Hive的基本概念2. Hive基础sql语法2.1 DDL 操作2.2 DML操作:元数据存储2.3 DQL操作:数据查询SQL2.4 从SQL到HiveQL应转变的习惯3. Hive基本函数汇总3.1 常用数据类型3.2 语法关键字3.3 hive常用函数整理1. Hive的基本概念1.1 hive是什么?Hive是基于Hadoop的数据仓库工具,相当于hadoop之上的...原创 2019-08-20 10:13:59 · 9174 阅读 · 0 评论