
大数据项目实施
文章平均质量分 70
金融业务专家
从事银行信息安全和数据开发10年经验。致敬所有技术宅。
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
冒烟测试第一天思考---如何提升测试可靠性和效率
提前准备测试数据(如基础账号、业务配置),并在测试后清理脏数据,确保每次测试的独立性。将冒烟测试嵌入持续集成流程,每次代码提交后自动触发构建和冒烟测试,快速反馈版本质量。根据需求变更和版本迭代,定期评审和优化冒烟测试用例,删除冗余用例,补充新增功能点。通过以上方法,可显著提升冒烟测试的通过率,并为功能测试奠定坚实基础。若冒烟测试失败,自动通知开发团队并暂停后续流程,避免低质量版本进入功能测试阶段。对依赖外部系统的接口,使用Mock服务模拟返回值,确保冒烟测试不受外部环境影响。原创 2025-03-19 19:31:45 · 340 阅读 · 0 评论 -
针对100人的大型团队,如何要确保冒烟测试顺利通过
通过自动化、风险管控、流程协同和工具优化,可显著提升冒烟测试通过率。例如,某团队通过自动化冒烟测试将构建失败率从30%降至5%,同时通过缺陷根因分析减少40%的重复性问题。这些方法不仅能降低功能测试阶段的缺陷密度,还能加速整体交付效率。原创 2025-03-19 19:26:46 · 358 阅读 · 0 评论 -
大数据项目实施案例
第一、项目目标将超过30个核心系统数据,实施同步复制,统一集中到大数据平台。1)将数据实施同步,数据量很大。---数据比较复杂2)数据复制的实时性、准确性3)复制数据需要增加标签(操作时间、操作类型、操作人等),便于后端识别数据。4)如何抽取数据,减轻对生产库的影响。如视图、临时表、dg库等手段。5)如何更好的适配后端应用,保证数据规格灵活,预留字段充足。可以考虑建立编...原创 2018-12-24 17:42:34 · 14782 阅读 · 1 评论 -
数据仓库技术完成的功能
数据仓库技术:主要是将各个生产系统的数据,根据约定的数据规格(需要有10年左右的扩展性)汇总到一个平台。亦成为数据处理中心、中央存储。同时根据需要,需要支持从其他数据市场(数据集市)获取数据。保证数据储备的充足性。数据仓库的数据:1)管理需求:系统管理员需要监控硬件、软件资源。 仓库功能管理员需要完成仓库的系统稳定。2)根据角色,操作员、业务主管需要预处理应用中的数据,特别是需要支...原创 2018-12-24 18:05:36 · 503 阅读 · 0 评论 -
hadodop之hive 第一章 hive原理及如何使用Mysql作为hive的metastore元数据库
hive是什么?体系结构简洁 Hive的安装与管理 HiveQL 数据类型,表以及表的擦欧洲哦 HiveQL 查询数据 Hive Java客户端 Hive的自定义函数 UDF --- 加深拓展 hive是facebook 应用的。 1、Hive 建立在Hadoop上的数据仓库基础架构。是一种可以存储、查询和分析存储在hadoop中的 大规模数据...原创 2019-06-16 19:42:04 · 323 阅读 · 0 评论