DolphinDB 作为一款高性能时序数据库,其在实际生产环境中常有数据的清洗、装换以及加载等需求,而对于该如何结构化管理好 ETL 作业,Airflow 提供了一种很好的思路。本篇教程为生产环境中 ETL 实践需求提供了一个解决方案,将 Python Airflow 引入到 DolphinDB 的高 ...
近日,调度系统迁移工具 Air2phin 宣布开源。借助 Air2phin,用户可 2 步将调度系统从 Airflow 迁移至 Apache DolphinScheduler,为有调度系统迁移需要的用户带来极大便利。 Air2phin 是什么? Air2phin 是一个最近宣布开源的调度系统迁移工具,旨在将 Apache Airflow DAGs 文件转换 ...
20世纪公司的最有价值的资产是其生产设备;而21世纪公司的最有价值的资产是其知识工人以及知识工人的生产效率。 今年5月,PingCode 发布了第六款子产品 Flow ,同时这也是国内首款研发自动化工具,我们希望将那些烦闷的、重复性的和事务性的工作从手动操作 ...
Python 官方发布 了 2020 年 Python 开发者调查结果。这是官方年度 Python 开发者调查的第四次迭代,由 Python Software Foundation 和 JetBrains 共同开展。2020 年 10 月,来自近 200 个国家/地区的超过 28,000 名 Python 开发者和爱好者参与了调查,以揭示该语言及其周围生态系统的 ...
Apache Airflow 是一个用于编排复杂计算工作流和数据处理流水线的开源工具。 如果您发现自己运行的是执行时间超长的 cron 脚本任务,或者是大数据的批处理任务,Airflow 可能是能帮助您解决目前困境的神器。本文将为那些想要寻找新的工具或者说不知道有这款 ...
它是DAG定义文件 上面的Airflow Python脚本实际上只是一个配置文件,用代码来指定DAG结构,这一点可以让你的思路清晰一些(可能不是每个人都觉得很直观)。定义的任务会在不同的上下文中运行,并且上下文与脚本有关。不同的任务在不同的时间点运行在不同的工作节点上,这意味着脚本不适用于 ...
纽约知名时尚杂志《Esquire》日前正式公布了今年第 12 月刊的封面人物,那便是流行天后 Rihanna。据悉编辑团队还特别请来时尚摄影师 Ellen Von Unwerth ...
一切就绪,即刻注册我们的电子報,随时知悉最新动态。 订阅 一旦订阅,代表您同意本公司的使用条款和 隐私政策。
一些您可能无法访问的结果已被隐去。
显示无法访问的结果