慎用Atlas 1.0

【CDH 6.3.1 集成Atlas】 本文详细介绍了如何将CDH6.3.1与Apache Atlas 2.1.0进行集成配置,包括Atlas源码的修改、编译、安装,以及与HBase、Solr、Kafka的集成,以及到Hive的集成步骤,确保数据治理和元数据管理的有效性。 阅读详情

在我的最新网站开发过程中,我发现了atlas一点不足的地方。

一个webform页面嵌入了ajax,我用httpprofessional抓取数据时发现

  • 我的webform页面到客户端只有6k;
  • ajax生成了4个脚本文件却有70k.

70K对于现在的网络带宽来说其实不算什么,但是这个比值却是很大的。

而且更重要的是我不知道atlas中为什么没有缓存这个70k在客户端,每次都要自动重新获取一次。

在我自己的认知中,我觉得这70k的代价太多了,或许我会选择其他的ajax框架和或者修改相应的现有框架的代码.

CDH 6.3.1 集成Atlas 备注: 安装之前 先要准备好 JDK1.8 Zookeeper Kafka Hbase Solr 文章目录一. Atlas下载二.ATLAS源码编译2.1 Intellij IDEA 导入Maven项目2.2 修改pom文件2.3 兼容HIVE2.1.1版本,修改ATLAS源代码2.4 编译2.4.1 JDK版本不够2.4.2 缺少jar包2.5 编译成功三. ATLAS安装3.1 解压3.2 修改配置文件atlas-env.sh3.3 修改配置文件atlas-application.properties3 阅读详情

相关推荐

CDH6.3.2 集成配置 ATLAS-2.1.0

APACHE ATLAS安装部署,数据治理。

qinxw1687的博客 2901

zeb atlas 做受_ZEB(零电子邮件退回)和新的Outlook规则

zeb atlas 做受I am always made uncomfortable when I see an email inbox with 1000's of emails. I wonder how folks can handle the psychic weight of all those emails. I continue to try to effectively imple...

cunfuteng7334的博客 2万+

Atlas 2.0.0 安装

一、安装前环境准备 软件版本 1 JDK8 2 Hadoop 2.7.2 / Hadoop 3.1.3 3 Kafka 0.11.0.2 4 HBase 1.3.1 5 Solr 5.2.1 6 Hive 2.3.1 / Hive 3.1.2 7 Azkaban 2.5.0 8 Atlas 0.8.4 二、安装 solr-5.2.1 tar -zxvf solr-5.2.1.tgz -C /opt/module/ mv solr-5.2.1/ solr 进

qq_20519927的博客 951

以下是computer vision:algorithm and application计算机视觉算法与应用这本书中附录里关于计算机视觉的一些测试数据集和源码站点,我整理了下,加了点中文注解

以下是computer vision:algorithm and application计算机视觉算法与应用这本书中附录里的关于计算机视觉的一些测试数据集和源码站点,我整理了下,加了点中文注解。 ComputerVision: Algorithms and Applications Richard Szeliski     在本书的最好附录中,我总结了一些对学生,教授和研究者有用的附加

朱本福 1万+

Atlas 1.1.0 (+ cdh 5.16.2)编译与安装

apache atlas 1.官网地址: https://atlas.apache.org/#/ 下载地址: https://atlas.apache.org/#/Downloads 2.架构原理 3.各组件版本 Atlas 1.1.0 + cdh 5.16.2 + solr 7.7.3 组件 版本 Flume NG 1.6.0+cdh5.16.2+196 Hadoop 2.6.0+cdh5.16.2+2863 MapReduce 1 2.6.0+cdh5.16.2+2863 HDFS 2.6.0+cdh

fan_bigdata的博客 2949

atlas关联spark

关于安装atlas并且连接到hive相关文档推荐: atlas搭建教程1 atlas搭建教程2 如需增添字段级血缘,需要修改如图以下共三处。 Spark Atlas Connector安装 spark2.4.0 atlas2.0.0 scala2.11.12 java1.8 通过https://github.com/hortonworks-spark/spark-atlas-connector 下载zip解压后通过mvn编译 mvn package -DskipTests mvn3.6.3编译成功,

weixin_43899386的博客 3472

2020 ECCV 所有论文及补充材料链接(一)

2020 ECCV 所有论文及补充材料链接(一) 2020 ECCV 所有论文及补充材料链接(二) ----------------------------------------------------------------- Quaternion Equivariant Capsule Networks for 3D Point Clouds Yongheng Zhao, Tolga Birdal, Jan Eric Lenssen, Emanuele Menegatti, Leonidas

u014546828的博客 7369

Ambari升级Atlas1.1.0到2.2.0

Ambari升级Atlas1.1.0到Atlas2.2.0

li1579026891的博客 1222

Zebras

题意 给你一个“01”串,问你是否可以把这个串分成k个Subsequence ( 举个例子: awkwqtez, akw是其subsequence,而kwqt是其substring。 即substring必须是原字符串中连续的字符串,而subsequence可以不是。 ) 并且保证这k个Subsequence均符合010101…010即(01)n+0(01)_n + 0(01)n​+0 k任意...

weixin_44412226的博客 1130

Atlas2.1.0集成CDH6.3.1进行大数据元数据管理

Atlas源码下载 我选择的是Atlas2.1.0从git下载 git clone -b release-2.1.0-rc3 https://github.com/apache/atlas.git Atlas源码编译 1.修改pom文件 因与CDH6.3.1集成,在repositories中新增以下部分: <repository> <id>cloudera</id> <url>https://repository.cloudera.co

gmHappy 3229

atlas必备资源包

apache-atlas-2.0.0-hive-hook.tar.gz apache-atlas-2.0.0-server.tar.gz

[unity3D基础知识]NGUI中深度depth和z轴关系 (转载)

问题源自一个帖子,因为上传的图比较多,就另开了这个贴写下自己的试验结果,原帖在下面链接中 http://game.ceeger.com/forum/read.php?tid=8911#info NGUI中是用depth来控制sprite显示顺序的,本来这很好用,但碰到上面帖子中的问题时却不好解决了,于是我试验了下。以下是一些总结,不对的地方请指正。 下面的内容可能看起来比较绕,这样的话只需实

Simon 3205

IGBT单管并联方案全解析:从均流设计到热管理实战技巧

本文深入解析了IGBT单管并联技术在新能源车电驱系统中的应用,重点探讨了均流设计与热管理实战技巧。通过优化寄生电感控制、动态均流和驱动电路设计,提升系统稳定性和效率,为工程师提供了一套完整的解决方案。

weixin_28720573的博客 441

Atlas 2.0.0编译与CDH6.2.1集成

Atlas 2.0.0编译与CDH6.2.1集成 Atlas能够提供开放式的元数据管理和治理功能。能够构建表与表之间的血缘关系,并且支持对表和构建表的过程进行分类管理。对于平台数据量越来越大,元数据管理显得至关重要,元数据有效的表达了数据的来源和流向以及依赖,Atlas的出现,有效的解决了元数据的管理问题。 Atlas架构原理 核心组件 核心层Core 类型系统Type System: Atlas 允许用户为他们想要管理的元数据对象定义一个模型。该模型由称为 "Type" 的定义组成。"类型"

久醉绕心弦的博客 786

OSPF路由协议配置

构建直连连通让R1、R2、R3、R4加入OSPF,实现全网互通。掌握OSPF邻居状态的解读。掌握单区域OSPF的配置。理解OSPF的基本概念。AR3上的OSPF配置。AR4上的OSPF配置。R1上的OSPF配置。R2上的OSPF配置。

SURTR999的博客 7696

python——模拟砍价

类型:随机数。

m0_62488776的博客 1971

Atlas 2.1.0 实践(1)—— 编译Atlas

为什么要做数据治理?业务繁多,数据繁多,业务数据不断迭代。人员流动,文档不全,逻辑不清楚,对于数据很难直观理解,后期很难维护。在大数据研发中,原始数据就有着非常多的数据库,数据表。而经过...

大数据流动 510

(UE5 5.2)HISM Mobile DrawInstance在渲染层的实现浅分析

在 (UE4 4.27) UHierarchicalInstancedStaticMesh(HISM)原理分析 这篇博客大致介绍HISM组件从游戏线程到渲染线程的重建KD-Tree和剔除并提交DrawCall逻辑,但是没有分析渲染层的大致数据结构和实现. 可以看出FHierarchicalStaticMeshSceneProxy 实际存储Instance数组数据来自于FInstancedStaticMeshSceneProxy FHierarchicalStaticMeshSceneProxy只是以FClu

qq_29523119的博客 2725

Centos7VM 部署 Apache atlas 2.1.0

Centos7VM 部署 Apache atlas 2.1.0 一、环境部署 centos 7 python 2.7.5(centos自带) maven 3.8.2 java zulu8.56.0.21-ca-jdk8.0.302-linux_x64 atlas 2.1.0 kafka 2.12-2.7.0 hbase 2.0.2 zookeeper Hbase2.0.2内置 solr 7.5.0 二、步骤 准备一台干净的centos7的VM环境. 创建 /software 目录,并上传 ja

一名假人的博客 2028

摄像头模组CCM简介

摄像头模组,全称Camera Compact Module,简写为CCM。CCM 包含几大件: 镜头(lens)、音圈马达(VCM)、传感器(sensor)、软板(FPC)、图像处理芯片(DSP)。工作原理:物体通过镜头(lens)聚集的光,通过CMOS或CCD集成电路,把光信号转换成电信号,再经过内部图像处理器(ISP)转换成数字图像信号输出到数字信号处理器(DSP)加工处理,转换成标准的GRB、YUV等格式图像信号。摄像头模组主要由以下几个部分组成:镜头(Lens):将光线汇聚到图像传感器上。

m0_73482095的博客 1万+

DeepSeek跨会话协作指南:让AI成为你的「第二大脑」

通过DeepSeek的跨会话协作系统,用户实测工作效率提升63%。

紫夜若涵的博客 1475

apache Atlas 1.2.0 搭建以及hive的集成

apache Atlas 1.2.0 搭建以及hive的集成 简介 ps:(官网摘抄) Atlas 是一组可扩展且可扩展的核心基础治理服务,使企业能够高效、高效地满足 Hadoop 内的合规性要求,并允许与整个企业数据生态系统集成。 为组织提供开放的元数据管理和治理功能,以构建其数据资产目录,对这些资产进行分类和治理,并为数据科学家、分析师和数据治理团队提供围绕这些数据资产的协作功能。 特点: 元数据类型和实例 各种 Hadoop 和非 Hadoop 元数据的预定义类型 能够为要管理的元数据定义新类型 类

weixin_44445168的博客 1508

手把手教你学Simulink——基于Simulink的PMSM MTPA + FW 全速域平滑切换策略

本文提出一种基于Simulink的PMSM全速域平滑切换控制策略,通过融合MTPA和弱磁控制(FW)实现基速附近的无冲击过渡。在过渡区采用加权融合电流给定方法,使电流超调<5%、转速波动<2%,全速域效率>90%。文章详细介绍了系统架构、核心算法及Simulink建模步骤,包括融合控制器设计、切换逻辑实现和参数优化。仿真结果表明,该方法相比传统硬切换显著改善了动态性能,并扩展了调速范围。同时提供了可直接复用的工程模板和MATLAB代码,为电机控制工程师提供了实用的全速域控制解决方案。

MHD0815的博客 80

Atlas2.1.0——编译安装使用

一、Atlas2.1.0编译 编译环境: 环境准备,jdk8_151以上,maven3.6.6 下载源码包: 国内下载地址:https://mirrors.tuna.tsinghua.edu.cn/apache/atlas/2.1.0/ 官方下载地址:http://atlas.apache.org/Downloads.html 编译: 1. 解压源码包,进入解压后源码包的目录。 sudo tar -zxvf apache-atlas-2.1.0-sources.tar.gz #重命名 mv ./apach

qq_37797234的博客 900

Open3D 进阶(22)间接平差法拟合空间曲线

空间曲线拟合在电力线三维重建中有着广泛的应用,本文利用python使用间接平差法对三维空间曲线的拟合进行代码实现。

点云侠的博客 1058

android 蓝牙通讯demo

android 下蓝牙通讯demo,实现了发现蓝牙,使能蓝牙,通过蓝牙发送消息。

上一篇: 提供10家博客的开放性搬家服务(包括csdn和cnblogs)
下一篇: 少谈些模式和架构
platform
博客等级 码龄26年 1117粉丝 351原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值