自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(9)
  • 资源 (1)
  • 收藏
  • 关注

原创 cloudera CDP 7.3.1和CMP 7.3对比

Cloudera CDP 7.3(Cloudera Data Platform Private Cloud Base)的组件逻辑关系图可以从。等多个维度进行梳理。

2025-03-30 15:36:22 568

原创 (CMP)卸载kerberos后测试过程(参照CDH6.3 CDP7.1 CDP7.3)

注意在:HUE里面的hive用户,实际是hive集群的HUE管理员,只能修改密码,不能删除,,不能修改用户名,不建议取消权限、或者取消权限是也要格外小心。1.hue里建hive库名dl_osdata,下面建三张测试表,表数据存储路径为/dldata/dl_osdata/test/表名/文件。例如进到“安全”就点右边“+”号,会出现如下图:先选择“组”,再选“名称”,再点下面的“+”全选,必须有hive选项,其他少选,没有测试,请谨慎,但都可随时添加。

2025-03-26 09:37:37 650

原创 基于CMP7大数据平台与Deepseek大模型(华为升腾NPU)的“文生SQL”智能体融合方案

本方案旨在通过融合CMP7大数据平台的数据管理能力与Deepseek大模型(依托华为NPU强大算力)的自然语言处理优势,构建“文生SQL”智能体,实现业务数据的深度整合,打破数据孤岛,为金融、医疗、商务等场景提供高效、智能的数据查询与分析解决方案,从而替代传统的BI数据中台和业务中台。在金融、医疗、商务等场景下,能够为企业提供高效、精准的决策支持,替代传统的BI数据中台和业务中台,助力企业实现数字化转型和业务创新。针对金融、医疗、商务等不同场景,提供定制化的数据分析和应用功能,满足企业特定的业务需求。

2025-03-19 20:34:54 376

原创 CDH/HDP国产替换CMP(CDH大数据平台国产替换的要求和原因是什么?)

CDH(Cloudera Distribution including Apache Hadoop)大数据平台的国产替换需求源于多重因素,其核心要求和原因可归纳如下:一、国产替换的核心原因二、国产替换的核心要求三、国产替代方案示例总结CDH 的国产替换是技术自主可控、安全合规、成本优化的必然选择。国产平台通过技术创新、生态适配和本地化服务,为企业提供了可靠的替代方案,助力数字化转型与国家信创战略落地。

2025-03-16 15:16:30 401

原创 性能压测实测Ollama与vLLM,性能差距吓死人(CDP7.1.7许可证)

最后结论:Ollama适合测试,vLLM适合生产。

2025-03-04 14:21:56 180

原创 DeepSeek:全方位客户赋能、高效实施与全面落地服务

总结了一下,现在deepseek部署后需要做的工作。

2025-03-04 14:01:56 110

原创 CDH/HDP国产替换之路

主流信创生态厂商的适配兼容,支持国产CPU、国产OS、国产服务器、国产中间件,支持X86与国产硬件混部,包括:华为&飞腾ARM架构、龙芯MIPS架构、申威Alpha架构等国产服务器,中标麒麟、银河麒麟、UOS等国产操作系统,飞腾、鲲鹏等国产芯片;支持分布式事务处理,保障数据强一致性。功能,包括数据库在线开发与协同,任务调度,数据整合,数据安全防护,元数据管理,数据资产目录,数据服务开发管理,标签管理,数据商城功能,更早更全。兼容Teradata,Oracle,DB2等方言,方便业务平滑迁移,降低迁移成本。

2024-12-10 14:45:33 1809

原创 CDH6.3 运行hive -e “show databases;“报错:hive-env.sh:行24: hbase-common.jar: 权限不够(CDP7.1.7许可证)

opt/cloudera/parcels/CDH-6.3.2-1.cdh6.3.2.p0.1605554/bin/../lib/hive/conf/hive-env.sh:行29: /opt/cloudera/parcels/CDH-6.3.2-1.cdh6.3.2.p0.1605554/lib/hbase/lib/htrace-core.jar: 权限不够。修改相关的*.sh运行脚本,因为SH脚本在KylinOS下的执行结果和在原redhat7.9下的执行结果不一致。

2024-11-04 10:24:52 671

原创 keberos+sentry授权单表及其他相关操作方法(CDP7.1.7许可证)

root@dc ~]# find / -maxdepth 10 -name "hive.keytab" -exec ls -lh {} + #查找hive.keytab文件,选择就近文件大于0的,如下:1987可能随节点、时间变。1.hue里建hive库名dl_osdata,下面建三张测试表,表数据存储路径为/dldata/dl_osdata/test/表名/文件。[root@dc ~]# kdestroy -c /tmp/krb5cc_$UID #销毁凭据,不影响在线系统。

2024-10-30 10:36:30 1548 2

CDH6-7集群卸载Kerberos认证并恢复服务配置与测试

内容概要:本文档详细记录了在CDH6-7集群环境中卸载Kerberos认证的具体步骤及其相关服务的调整方法。首先需要停止集群内的各项服务如Spark、Zookeeper等,并确保Kerberos服务器的相关组件已停止运行。接着对HDFS、HBase、Hue等多个关键组件进行配置更改,包括但不限于取消安全验证选项、调整权限设置以及清理旧数据。此外还需特别关注Sentry权限管理模块的状态变更。最后,逐步重启各个服务,并解决可能出现的问题,如Kafka启动错误等。同时提供了针对时钟同步的操作指南,确保集群节点间的时间一致性。 适合人群:熟悉Linux操作系统和大数据平台运维的技术人员,尤其是负责CDH集群管理和维护的专业人士。 使用场景及目标:适用于需要移除现有Kerberos认证机制的大规模分布式系统管理员,帮助他们顺利完成从强认证到简单认证模式的转换,保障业务连续性和稳定性。 其他说明:文中涉及大量具体命令行指令,建议读者仔细阅读每一步骤后再执行相应操作,避免因误操作导致不可逆的影响。对于某些特定环境下的特殊处理方式也有提及,例如HA架构下HDFS服务的额外初始化步骤。

2025-03-27

C#个人浏览器源代码

个人浏览器源代码,主要解决Session、脚本、Windows.Close等问题

2008-12-04

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除