
1 项目开发与方法论
文章平均质量分 55
yuzhic
这个作者很懒,什么都没留下…
展开
-
上海太保P05项目——HashCode取值规则
带anchor(锚点)的实体 - 带status表的实体(Commercial agreement、Group agreement、Individual agreement、Claim folder、Elementary claim)§ 除表的主键、type id、Partition key、Status、Status date、Status原创 2007-04-14 19:10:00 · 1729 阅读 · 0 评论 -
深圳地铁AFC决策支持系统——游标是怎么干掉的?
主题:设备压数统计 (一)分析视角时间:年/季/月/日站点:线路/站点终端:设备(二)分析指标压数数量(是否正常上传交易数据,平时3000笔,今天只有1000笔,判定为2000笔没有上传,同一台设备和其前七天比较,在某个范围内浮动的比例,超出范围的要显示出,人工定参数来进行查询)时间、车站、设备号(三)数据源分析:n 压数数量(交易异常):拿今天原创 2007-09-29 01:51:00 · 1460 阅读 · 0 评论 -
上海太保P05项目——DS测试
JOB测试一般要求: CIF:对非字符型字段空值检查,日期检查。 LDF:要求数据要覆盖JOB的所有路径,即每条路径至少需要有一条数据通过。 LOD:把LDF生成的文件进行加载,查询数据库检查所加载的数据是否正确。 测试方法: 1、由于JOB的数据流程顺序,可以把JOB按照先后排序,按顺序造数原创 2007-05-18 21:14:00 · 1838 阅读 · 0 评论 -
上海太保P05项目——DS概要设计
CIF层:读取EXF文件,完成类型转换、数据变换、TRIM空格等任务并将结果写入CIF文件。 LDF层(STEP1+STEP2):读取CIF文件,完成业务逻辑转换(如LOOKUP、MERGE、AGGREGATION、JOIN等)任务并将结果写入LDF文件。该过程比较复杂,根据实际业务逻辑没有同意的处理流程,但结果都是要生成一个用于预加载的LDF文件。如果业务逻辑非原创 2007-05-18 11:43:00 · 1728 阅读 · 0 评论 -
上海太保P05项目——PARTITION_KEY解决方案
需求: 在进行多表关联时,所涉及的关联表行数巨大,关联速度达不到要求。 解决方案: §在所有大表中建立 PARTITION_KEY字段, 按照该键的键值对表进行物理分区。PARTITION_KEY从PARTITION_CONFIG表中获得。分区策略是按照分公司进行分区。 PARTITION_KEY表的数据结构:Name Typ原创 2007-05-11 21:57:00 · 2185 阅读 · 0 评论 -
广州国税——ETL开发总体概述
BM:底层模块。存放由业务库抽取过来的数据,相当于ODS。 DW:目标模块,即目标库。 OLAP:多维数据库。 OLTP:二维数据库。 ETL开发总体概述图: OLAP(多维数据库) OLAP报表原创 2007-07-25 17:53:00 · 1741 阅读 · 0 评论 -
上海太保P05项目——项目开发的整体理解
项目目标:按照IW模型为太保的业务系统建立数据仓库。 现实描述:业务系统是由很过个数据组成,有Informix,Oracle,DB2数据库和一些平面文件,太保目前总共有16个业务系统,对应16个数据库。 生产库是Oracle数据库。 生产库是所有业务系统在业务工作中所产生的数据的存储。 数据抽取人员用脚本把业务系统的数据抽取到生产库里(ORACLE),DS开发流程就从生产库开始。原创 2007-04-25 22:34:00 · 2836 阅读 · 0 评论 -
上海太保P05项目——太保系统概况(部分)
一、车险系统: 1、管理员系统 2、ODS系统 3、车险 (1) 批改 (2) 理赔 (3) 承保二、车险理赔: 1、柜面系统 2、手续费系统 3、两核系统 4、车险理赔原创 2007-04-21 18:29:00 · 1597 阅读 · 0 评论 -
上海太保P05项目——模型、增量、存量、UID与HASHCODE的逻辑
锚表里面存在有UNIQUE_ID_IN_SOURCE_SYSTEM,只是这个字段没有用到。模型:全球200多家保险公司共同制订的一套通用系统,相当于一套规则。类似于石油欧配克组织。在保险系统里面,有一种表关系,这种关系是:一张表的记录,对应多张表的记录(1:N),处于N那边的表是对处于1那边的表的一个修改版本。这两种表,都存在UID与HASHCODE字段。具有关系的两张表记录,其UID号是原创 2007-04-17 14:55:00 · 2215 阅读 · 0 评论 -
上海太保P05项目——业务唯一号(UNIQUE_ID_IN_SOURCE_SYSTEM)与哈希号(HashCode)的作用
提示:锚表是没有HashCode的。 UNIQUE_ID_IN_SOURCE_SYSTEM:业务唯一号,用以唯一标识一个业务的主键 HashCode:哈希号,用以判断是否增量记录 UNIQUE_ID_IN_SOURCE_SYSTEM(业务唯一号)构键规则一般是:系统号_表名_表主键,用以标识唯一业务记录。HashCode号一般由非主键非常量字段原创 2007-04-14 18:14:00 · 2262 阅读 · 0 评论 -
广东国税——unix aix命令
AIX系统命令:ls 查看当前目录文件。ls -a 查看当前目录文件,并把根目录显示出来。ls -l 查看当前目录文件,把文件的用户也显示出来。pwd 查看当前路径。cd 访问文件夹。ps 查看进程情况。ps -a 查看可执行命令(PID TTY TIME CMD)。ps -ef 查看进程( UID PID PPID C ST原创 2007-11-05 10:14:00 · 1408 阅读 · 0 评论