- 博客(15)
- 收藏
- 关注
RSS订阅原创 HiveSql的DDL和DML介绍
- 创建数据库-- 创建数据库并指定在hdfs上的位置-- 显示数据库信息-- 修改数据库描述信息-- 删除数据库-- 强制删除。
2024-12-23 14:49:14
1189
原创 数据仓库架构
数据仓库架构是企业数据管理和分析的基础，它旨在整合来自不同源系统的数据，并提供高效的数据查询和分析能力。常见的数据仓库架构包括单层架构、两层架构和多层架构。特点：数据直接从源系统加载到数据仓库中。结构简单，易于实现和维护。优点：实现成本低。维护简单。缺点：性能较差，因为数据没有经过预处理和优化。可扩展性差，难以应对复杂的数据需求。
2024-12-13 14:06:54
561
原创 Linux端口开放及关闭
参数说明--zone=<区域名称>：指定要操作的区域，默认为默认区域。--add-port=<端口号>/tcp：添加TCP端口。--add-port=<端口号>/udp：添加UDP端口。--remove-port=<端口号>/tcp：移除TCP端口。--remove-port=<端口号>/udp：移除UDP端口。--add-service=<服务名称>：添加服务。--remove-service=<服务名称>：移除服务。--permanent：使配置永久生效。
2024-12-13 09:36:12
1230
原创 Linux中crontab的基本使用
作用：定时调度linux任务格式：crontab [ -u user ] {-e/-l/-r}crontab -lcrontab -ecrontab -r。
2024-11-21 15:27:31
412
原创 pg_sql关于时间的函数
作用：提取时间中某些内容（可以实现和date_part类似功能）时间戳转日期（时间戳为数值类型，若为字符型需进行转换）作用：获取日期对应的参数是当前年的第几（周、月、季）格式：日期 +/- interval '加减值'格式：date_trunc(('参数',日期))格式：extract(提取值 from 时间)格式：date_part('参数',日期)作用：获取日期对应参数的起始。作用：实现时间日期的加减。
2024-10-25 17:54:12
2409
原创 Flume的安装和基本使用
Apache Flume是Cloudera提供的一个分布式、高可靠、高可用的数据收集系统，是Apache软件基金会（ASF）的顶级项目。它可以从不同的数据源收集数据，经过聚合后发送到存储系统中，通常用于日志数据的收集。Flume 分为 NG 和 OG (1.0 之前) 两个版本，NG 在 OG 的基础上进行了完全的重构，是目前使用最为广泛的版本。Flume的主要作用是实时读取服务器本地磁盘的数据，将数据写入到hdfs。
2024-10-23 17:20:24
4270
原创 Linux CendOS7安装Oracle11g
这里会弹出一个页面来创建刚才配置的 orcl数据库实例并启动以root用户执行最后一个finsh页面有个url地址信息（忘记截图了）在上面的安装完成信息里也可以看到。
2024-10-21 17:41:06
2931
原创 Hive安装及相关介绍
Hive是facebook开源，捐献给apache组织，作为apache组织的顶级项目(hive.apache.org)。hive是一个基于大数据技术的数据仓库(DataWareHouse)技术，主要是通过将用户书写的SQL语句翻译成MapReduce代码，然后发布任务给MR框架执行，完成SQL 到 MapReduce的转换。可以将结构化的数据文件映射为一张数据库表，并提供类SQL查询功能。数据仓库和数据库数据仓库和数据库一样都是用来保存数据，但是二者的定位有很大的差异。
2024-10-17 11:25:18
878
原创 CendOS下安装Docker
Docker是一种开源的容器化平台，用于构建，部署和运行应用程序。它基于容器化技术，可以将应用程序及其所有依赖项封装在一个独立的容器中，从而实现快速部署和可移植性。
2024-10-16 13:53:43
525
原创 HADOOP安装
进入安装目录，cd /opt/servers/hadoop2.9.2/etc/hadoop。打开core-site.xml清空中的配置，添加如下配置。配置datanode集群节点，修改 slaves （提前配置ip映射，都是用公网ip）注：配置文件中使用到本机的ip就使用本机私网ip，其他主机的ip使用相关公网ip，如在master中。将下载好的压缩包上传至服务器的/opt/inserts并解压到/opt/servers中。配置mapred-site.xml，添加如下代码。
2024-10-07 17:50:30
898
原创 CentOS防火墙设置和IP映射
请注意，关闭防火墙可能会降低系统的安全性。在关闭防火墙之前，请确保已经采取其他措施确保系统的安全。确保状态显示为“inactive”或“disabled”。2. 以root身份登录，或使用sudo命令。2、在最下面添加对应的ip地址和主机名。5.禁止防火墙开机自启。Linux配置IP映射。1、打开ip映射文件。
2024-10-07 17:34:10
351
1
原创 oracle 更改字符集
su - oracle --切换到oracle 用户。如果报错，提示新字符集必须是老字符集的超集。例：utf8改zhs16gbk。
2023-11-17 18:48:12
1154
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人