
database
文章平均质量分 77
data
大怀特
万物之始,大道至简,衍化至繁
展开
-
nebula graph 3.0.2 配置数字安全选项
文章目录验证和授权身份验证本地身份验证用户管理创建用户( CREATE USER )授权用户( GRANT ROLE )撤销用户权限( REVOKE ROLE )查看指定用户权限( DESCRIBE USER )查看指定空间内用户权限( SHOW ROLES )修改用户密码( CHANGE PASSWORD )修改用户密码( ALTER USER )删除用户( DROP USER )查看用户列表( SHOW USERS )内置角色权限使用 OpenLDAP 进行身份验证验证和授权身份验证身份验证用于将转载 2022-04-24 14:01:51 · 1073 阅读 · 0 评论 -
nebulagraph exchange3.0.x
文章目录什么是 Nebula Exchange版本系列适用场景产品优点数据源Q & Aexchange-spark2.4不能把hive表数据导入什么是 Nebula ExchangeNebula Exchange(简称 Exchange)是一款 Apache Spark™ 应用,用于在分布式环境中将集群中的数据批量迁移到 Nebula Graph 中,能支持多种不同格式的批式数据和流式数据的迁移。Exchange 由 Reader、Processor 和 Writer 三部分组成。Reade原创 2022-04-15 18:15:08 · 2243 阅读 · 0 评论 -
nebula graph 3.0.x 导入数据
文章目录nebula graph studio & nebula consolejava clientNebula ExplorerNebula Importer适用场景优势前提条件操作步骤启动命令配置文件说明nebula graph studio & nebula consolejava clientNebula ExplorerNebula Explorer (简称 Explorer)是一款可以通过 Web 访问的可视化图探索工具,搭配 Nebula Graph 内核使用,用于与原创 2022-04-13 20:34:49 · 4158 阅读 · 0 评论 -
nebula graph 常用命令(updating)
文章目录# 创建空间 create space basketballplayer(partition_num = 10,replica_factor = 1,vid_type = FIXED_STRING(30));show spaces;use basketballplayer;# 创建标签create tag player(name string, age int);create tag team(name string);# 查询go from "player100"原创 2022-04-13 16:23:50 · 2491 阅读 · 1 评论 -
nebula graph 3.0.x 安装遇到的问题
文章目录Q & A集群安装不能启动Q & A集群安装不能启动完全按照官网配置集群(3台服务器)(之前配置过单台测试,也搭建过两台集群),不能成功启动某几个服务.错误日志如下nebula-storaged 日志Log file created at: 2022/04/10 23:28:12Running on machine: k8smasterRunning duration (h:mm:ss): 0:00:00Log line format: [IWEF]yyyymmdd原创 2022-04-11 00:06:16 · 1114 阅读 · 0 评论 -
SparkSQL优化分析--saveAsTable
文章目录问题点:优化点:环境 spark2.4.8 on yarn(hadoop2.4.5)优化后package com.bl.bigdata.cdp.execservice.service.batch.schedule.commonimport com.bl.bigdata.cdp.execservice._import com.bl.bigdata.cdp.execservice.utils.business.TableUtilsimport com.bl.bigdata.cdp.ex原创 2022-03-04 19:59:23 · 2932 阅读 · 0 评论 -
Authentication of elastic was terminated by realm reserved – How to solve related issues
Before you begin reading this guide, we recommend you run theElasticsearch Error Check-Upwhich can resolve issues that cause many errors.This guide will help you check for common problems that cause the log “Authentication of Elastic was terminated by ..转载 2021-12-30 15:37:07 · 8033 阅读 · 0 评论 -
elastic Q&A(updating)
文章目录elasticsearchjava clientelasticsearchjava clientjava client连接带基础安全ES URI uri = ElasticSearchClient.class.getClassLoader().getResource("http.p12").toURI(); Path trustStorePath = Paths.get(uri); KeyStore truststore = KeyStore.getInstance("pkcs1原创 2021-12-28 16:56:03 · 2603 阅读 · 0 评论 -
elastic7.16 install 0 - Configure security for the Elastic Stack
文章目录Security needs vary depending on whether you’re developing locally on your laptop or securing all communications in a production environment. Because security needs vary, the following scenarios provide options for configuring the Elastic Stack.Each转载 2021-12-20 20:53:09 · 150 阅读 · 0 评论 -
elastic7.16 install 1 - Set up minimal security for Elasticsearch
文章目录PrerequisitesEnable Elasticsearch security featuresNext: Configure Kibana to connect to Elasticsearch with a passwordConfigure Kibana to connect to Elasticsearch with a password这时主要看自动生成密码就可以了,参考配置kibanaYou enable the Elasticsearch security features翻译 2021-12-20 20:51:07 · 1258 阅读 · 0 评论 -
elastic7.16 install 0 - Set up basic security for the Elastic Stack
文章目录Generate the certificate authorityEncrypt internode communications with TLSGenerate the certificate authorityGenerate the certificate authorityeditYou can add as many nodes as you want in a cluster but they must be able to communicate with each othe转载 2021-12-20 18:22:09 · 91 阅读 · 0 评论 -
trino 安装(带web ui 与 coordinator 和 worker 与 coordinator 安全通讯)
文章目录securityauthenticationself signed certificateauthorization(todo)configcoordinatorworkersecurityauthenticationself signed certificate# Write down the Common Name (CN) for your SSL Certificate. The CN is the fully qualified name for the system that u原创 2021-12-16 18:07:38 · 4790 阅读 · 0 评论 -
为Elastic栈配置安全 - 基础安全配置(生产环境)
在最少安全配置增加密码保护之后 ,需要配置TLS. 传输层处理所有内部通讯在集群中的所有节点.重要:如果你的集群有多个节点,一定在每个节点配置TLS,生产模式下如果没有配置TLS,集群不能启动.传输层依赖在相互的TLS为节点间加密和认证.正确的应用TLS确保恶意节点加入集群交换数据和其它节点.当实现用户和密码认证在HTTP层,对本地集群安全是非常有用的,节点间安全通讯需要 TLS.配置TLS在不同节点是基础的安全配置,来阻止未授权节点访问集群.了解传输环境传输层安全(Transport Lay翻译 2021-12-14 17:20:06 · 623 阅读 · 0 评论 -
为Elastic栈配置安全 - 最少安全配置(ES开发环境)
文章目录提前准备开启ES安全特性为内置用户配置密码配置Kibana用密码连接ES下边做什么?开启ES安全特性,然后创建密码为内置用户.之后你可以增加更多用户,但是使用内置用户简化了程序开启安全为你的集群.重要:最少安全场景对生产集群是不够的.如果你集群有多个节点,必需开始 最少安全配置,然后配置TLS在他们之间.提前准备安装配置ES和Kibana.查看入门ES栈核对你使用license,包含你想要的专门的安全特性.基础license 包含最小安全配置为ES栈,所以你仅仅可以下载分发然后去配翻译 2021-12-14 16:14:45 · 596 阅读 · 0 评论 -
为Elastic栈配置安全 - 概览
文章目录最低安全配置(ES开发环境)基础安全配置(ES生产环境)基础安全加上安全HTTPS通讯(ES 栈)安全需要差异依赖是否你本地开发或是获得通讯在生产环境.由于安全需求不同,下边场景为配置Elastic栈提供选项.建议:每个随后的场景老师构建在上一个,所以你可以增加额外安全通过 在已存在的层.最低安全配置(ES开发环境)如果你想要设置ES在你的开发电脑,这个场景适合你.这个配置阻止未授权来访问你的本地集群,通过设置内置用户和密码.你可以配置密码授权给Kibana.重要:最低安全场景对生翻译 2021-12-14 15:28:03 · 141 阅读 · 0 评论 -
How to create a self-signed SSL Certificate
文章目录OverviewStep 1: Generate a Private KeyStep 2: Generate a CSR (Certificate Signing Request)Step 3: Remove Passphrase from KeyStep 4: Generating a Self-Signed CertificateStep 5: Installing the Private Key and CertificateStep 7: Restart Apache and Testoth原创 2021-12-13 10:11:43 · 409 阅读 · 0 评论 -
Trino文档 - 概览(新)
概览使用案例Trino 不能做什么Trino 可以做什么1.2 Trino 概念概览Server类型Coordinatorworker数据源ConnectorCatalogSchemaTableQuery执行模型StatementQueryStageTasksplitDriverOperatorExchangeTrino 是一个分布SQL查询引擎,设计用来查询大的分布式数据集,分布在一个或更多不同总类的数据源.使用案例这节全面介绍Trino,这样潜在的管理员和用户知道可以从Trino期待什么.Tri翻译 2021-12-07 19:05:52 · 2747 阅读 · 0 评论 -
Apache phoenix操作注意事项[hbase1.2]
Apache phoenix操作注意事项 [hbase1.2]环境命令语法创建表删除表导入数据环境APACHE_PHOENIX-4.14.0-cdh5.11.2.p0.3HBase1.2``自带客户端```bash$PHOENIX_HOME/bin/phoenix-sqlline.py zookeeper_url[:port]命令列出所有表!tables语法创建表create table xx.xxx(mobile varchar primary key,id varcha原创 2021-12-03 10:44:16 · 1636 阅读 · 0 评论 -
phoenix概览
概览在Hadoop中Phoenix是用来做OLTP和业务分析,并且以一种低延时的方式把两个结合起来.强大的标准的SQL和JDBC API,并且可以具有完整的ACID事务能力 利用HBase作为后端存储,在NoSql中可以schema-on-read能力,和灵活的后绑定.Phoenix可以集成到其它的Hadoop框架中,像Spark,Hive,Pig,Flume和MapReduce.使命成为可依赖的OLTP和业务数据分析的数据平台,为Hadoop定义工业标准的API.快速入门已经读翻译 2021-11-04 23:26:19 · 143 阅读 · 0 评论 -
Orc概览
对Hadoop运行负载来说,Orc格式是最小,运行最快的列式存储, 它具有以下特点:ACID事务支持包含支持ACID事务和快照隔离.内建索引用索引方式可以跳到合适的位置,每列包含最小,最大也包含bloom过滤器.复杂类型支持Hive的所有类型,包含复杂类型,struct,lists,maps和unions快速入门在Hive中运用 在Hadoop MapRed中运用 在Hadoop MapReduce中运用 在Java中使用Orc 核心功能ORC是Apache项目..翻译 2021-11-04 22:59:02 · 157 阅读 · 0 评论 -
Hive文件压缩说明(转)
为什么要压缩在Hive中对中间数据或最终数据做压缩,是提高数据吞吐量和性能的一种手段。对数据做压缩,可以大量减少磁盘的存储空间,比如基于文本的数据文件,可以将文件压缩40%或更多。同时压缩后的文件在磁盘间传输和I/O也会大大减少;当然压缩和解压缩也会带来额外的CPU开销,但是却可以节省更多的I/O和使用更少的内存开销。压缩模式说明1. 压缩模式评价可使用以下三种标准对压缩方式进行评价:压缩比:压缩比越高,压缩后文件越小,所以压缩比越高越好。 压缩时间:越快越好。 已经压缩的格式文件是否可原创 2021-11-02 17:15:37 · 1204 阅读 · 0 评论 -
ClickHouse 数仓
Add high performance analytics to any application–from embedded services to systems running on hundreds of servers. Game on!Open Source Meets SQL Column StoresClickHouse is the first open source SQL data warehouse to match the performance, maturity, an翻译 2021-10-13 09:25:27 · 862 阅读 · 0 评论 -
redis计算指定key大小
memory usageredis4 及已上版本>SET""""OK> MEMORY USAGE ""(integer)51memoryusage 命令返回key和value占用内存的bytes--stat持续输出stats模式,在测试上可以做测试>redis-cli-apassword-p6379-hhostname--stat------- data ------ --------------------- load -...原创 2021-09-26 09:31:55 · 2475 阅读 · 0 评论