
数据开发
文章平均质量分 90
神州数码云基地
神州数码云基地官方博客。专注于AI、云原生、云计算、开源ERP、数据库。
展开
-
数据开发|如何使用Apache Airflow进行任务调度?干货分享!
执行器将任务实际执行在相应的工作节点上,并将执行结果返回。负责根据定义的 DAG(Directed Acyclic Graph,有向无环图)图,计划和触发任务的执行。元数据库存储了 Airflow 的元数据,包括 DAG 的定义、任务实例的状态、任务执行日志等。这允许用户在不同的任务和工作流之间共享信息,并支持任务的重试、回溯和监控。,用于监控和管理工作的状态、任务的执行情况、查看日志以及触发任务的手动运行等。Airflow 提供实时的任务监控和日志记录功能,使用户能够方便地跟踪任务的执行情况并解决问题。原创 2024-09-23 09:49:26 · 1467 阅读 · 0 评论 -
数据开发|一文讲清楚精益数据方法论在数据治理中的应用
谷歌的所有产品都因其强大的安全功能而被认可,这些功能不断保护着用户的信息。而他们的旗帜生成式人工智能产品也不例外。精益数据方法论是一种基于数据仓库的商业智能分析方法论,它强调以最小的数据投入获得最大的业务价值。通过明确分析目标、优化数据流程、提升数据质量等步骤,精益数据方法论帮助企业更加精准地洞察市场趋势、优化产品策略、提升运营效率。精益数据方法论以其高效、精准的特点,在数据分析、数据治理领域展现出强大的潜力。原创 2024-05-30 16:48:21 · 541 阅读 · 0 评论