- 博客(27)
- 资源 (2)
- 收藏
- 关注
原创 FLink多表关联实时同步
Oracle->Debezium->Kafka->Flink->PostgreSQLFlink消费Kafka中客户、产品、订单(ID)三张表的数据合并为一张订单(NAME)表。
2022-12-30 10:09:25
2874
1
转载 Lambda架构 vs Kappa架构
Lambda 架构 Lambda 架构由Storm的作者Nathan Marz提出,其设计目的在于提供一个能满足大数据系统关键特性的架构,包括高容错、低延迟、可扩展等。其整合离线计算与实时计算,融合不可变性、读写分离和复杂性隔离等原则,可集成Hadoop, Kafka, Spark,Storm等各类大数据组件。 Lambda 架构可分解为三层Layer,即Batch Layer,
2017-05-11 09:21:50
7745
转载 hadoop2.x常用端口
组件节点默认端口配置用途说明HDFSDataNode50010dfs.datanode.addressdatanode服务端口,用于数据传输HDFSDataNode50075dfs.datanode.http.addresshttp服务的端口HDFS
2016-08-29 18:03:48
616
转载 Cloudera的CDH和Apache的Hadoop的区别
目前而言,不收费的Hadoop版本主要有三个(均是国外厂商),分别是:Apache(最原始的版本,所有发行版均基于这个版本进行改进)、Cloudera版本(Cloudera’s Distribution Including Apache Hadoop,简称CDH)、Hortonworks版本(Hortonworks Data Platform,简称“HDP”),对于国内而言,绝大多数选择CDH版本
2016-08-26 09:41:56
15127
转载 CDH 的Cloudera Manager免费与收费版的对比表
CDH 特性免费版付费版Deployment, Configuration & Management系统管理Automated Deployment & Hadoop Readiness Checks自动化部署及快速检查••Install the complete CDH stack in minute
2016-08-26 09:41:05
21973
转载 RAID详解[RAID0/RAID1/RAID10/RAID5]
一.RAID定义RAID(Redundant Array of Independent Disk 独立冗余磁盘阵列)技术是加州大学伯克利分校1987年提出,最初是为了组合小的廉价磁盘来代替大的昂贵磁盘,同时希望磁盘失效时不会使对数据的访问受损 失而开发出一定水平的数据保护技术。RAID就是一种由多块廉价磁盘构成的冗余阵列,在操作系统下是作为一个独立的大型存储设备出现。RAID可以充分发 挥出多
2016-08-18 12:27:57
5334
原创 SparkSQL与Hive的整合
SparkSQL与Hive的整合1. 拷贝$HIVE_HOME/conf/hive-site.xml和hive-log4j.properties到 $SPARK_HOME/conf/2. 在$SPARK_HOME/conf/目录中,修改spark-env.sh,添加export HIVE_HOME=/usr/local/apache-hive-0.13.1-binexport SPARK_CLASS
2016-08-17 09:32:14
512
原创 软件开发人员的基本素质
基本原则²1、人机交互准确性,不要让电脑撒谎;²2、编码规范性,让你的代码成为艺术品;²3、代码与文档同步,天下无难事;²4、软件健壮性,允许你的客户随便操作;²5、逻辑完整性,端到端流程清晰完整;²6、工作主动性,我才是“主角”;任务执行²1、计划性,无规矩不成方圆;²2、计划严谨性,家有家规,国有国法;²3、保质保量,给自己留点“面子”;
2013-08-28 15:17:11
817
2
原创 打破传统软件开发思路,打造新型应用程序软件
打破传统软件开发思路,打造新型应用程序软件――从易学易用的角度学习OO大雨点 2004年8月16日读者: 本文适用于具有一年以上工龄的可执行应用程序类开发人员。 做MIS的朋友就不用看本文了,因为本文介绍的内容,基本上你已经都做到了!声明: 常在网上转悠,学习了不少知识,网络是我们互相学习、共同提高的一个非常不错的平台,总是学
2004-08-17 15:45:00
1468
原创 如何开发优秀软件
一、多项软件技术和开发方法的综合应用。面向对象的设计和库文件的使用将使程序的模块化增强、运行稳定、维护和升级更容易,库文件动态加载,可以在不退出主程序的情况下对程序进行升级。二、完善的开发文档、有序的开发过程。开发前完善的开发文档是必须的,包括Word、Visio、Rose、PowerDesigner、MSProject等 1、不因员工的流失,增加额外的工作和困难;2、更能直观、清
2003-09-28 00:28:00
2020
2
原创 代码艺术(程序员值得一看)
一看到这个题目,也许会有人说:代码有什么艺术可言,同一种编程语言的代码不是都一样吗? 其实不然,计算机软件有千千万万个,而开发工具也有N种,而源代码更是举不胜举,代码风格更是千千万万种,程序流程也是千姿百态,虽然目前市场上已经有什么代码编写标准,但它终归是一个标准而已,只能介绍一些变量命名、语法格式等通用标准,而我在这里所要说的是这之外的东西----代码艺术。 相信每一个程序员都可能
2003-09-28 00:28:00
4771
原创 软件艺术
大名鼎鼎的《黑客帝国》已经播出好长时间了,它正在被人们渐渐得淡忘,但我对它却记忆尤新,在该片中作者将计算机程序和人类放在同等的位置上,使人与程序很难区分,我很赞成这种思法,其实程序和人之间确实存在着众多的相同之处,先拿人来说吧,一个人长的漂亮,又有本领,思想先进才被众人喜欢,而一个程序同样如此,界面漂亮,功能强大,内核结构先进,程序稳定才被众人所接受。人长得漂亮,并不是浓妆打扮出来的漂亮
2003-09-28 00:28:00
1300
MySQL精简版-Linux版
2022-12-01
MySQL精简版-Windows版
2022-12-01
myplsql
2007-02-27
plsqlkey
2007-02-15
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人