• 企业服务案例
  • 极客时间
  • 极客时间训练营
  • 企业培训
  • 高端学员
  • App下载
  • 行知数字中国
  • 大模型领航者
logo
  • 首页
  • 技术会议
  • 课程
  • 直播
  • 专题
  • 电子书
  • 视频
  • AI指南
  • 榜单
  • 研究中心

 写点什么

创作场景


  • 记录自己日常工作的实践、心得
  • 发表对生活和职场的感悟
  • 针对感兴趣的事件发表随笔或者杂谈
  • 从 0 到 1 详细介绍你掌握的一门语言、一个技术,或者一个兴趣、爱好
  • 或者,就直接把你的个人博客、公众号直接搬到这里
登录/注册
  • 企业动态
  • 行业深度
  • AI&大模型
  • 大前端
  • 后端
  • 架构
  • 大数据
  • 软件工程
  • 云计算
  • 管理/文化
  • 芯片&算力
  • 鸿蒙专区
用户头像

白鲸开源

2022-03-18 加入
IP属地:天津
北京白鲸开源科技有限公司
一家开源原生的DataOps商业公司。
致力于打造下一代开源原生的DataOps 平台,助力企业在大数据和云时代,智能化地完成多数据源、多云及信创环境的数据集成、调度开发和治理,以提高企业解决数据问题的效率,提升企业分析洞察能力和决策能力。
 关注
  • 39

    发布数

  • 12

    关注者

  • 0

    关注了

  • 发布
  • 评论
  • 划线
  • 收藏
  • 关注
  • 全部分类 
DolphinScheduler 集成 Arthas 实现接口调用监控,提升调度任务可靠性

本文介绍了在 Apache DolphinScheduler 中嵌入 Arthas 的方法,以实现对接口调用的监控。Arthas 是一款强大的 Java 诊断工具,能够帮助开发者实时查看应用程序的运行状态、性能瓶颈和方法调用情况。在 DolphinScheduler 中集成 Arthas,可以方便地捕获任务调度时的关键

用户头像
白鲸开源

11-06
 18
使用 SeaTunnel 从 InfluxDB 同步数据到 Doris

本文介绍了如何使用 SeaTunnel 将数据从 InfluxDB 同步到 Doris。通过 SeaTunnel 强大的数据集成功能,用户可以高效地将存储于 InfluxDB 中的时间序列数据传输至 Doris,便于数据的访问与分析。

用户头像
白鲸开源

11-06
 19
DolphinScheduler 集成 Arthas 实现接口调用监控,提升调度任务可靠性

本文介绍了在 Apache DolphinScheduler 中嵌入 Arthas 的方法,以实现对接口调用的监控。Arthas 是一款强大的 Java 诊断工具,能够帮助开发者实时查看应用程序的运行状态、性能瓶颈和方法调用情况。

用户头像
白鲸开源

11-05
 18
白鲸开源发布迁移工具 Airphin 并开源,2 步迁移 Airflow 至 Dolphinscheduler
白鲸开源发布迁移工具 Airphin 并开源,2 步迁移 Airflow 至 Dolphinscheduler

白鲸开源正式发布调度系统迁移工具 Airphin,并宣布将其开源。借助 Airphin,用户可 2 步将调度系统从 Airflow 迁移至 Apache DolphinScheduler,为有调度系统迁移需要的用户带来极大便利。

用户头像
白鲸开源

2023-02-22
 195
非代码的贡献也能成为Committer,我与DolphinScheduler社区的故事
非代码的贡献也能成为 Committer,我与 DolphinScheduler 社区的故事

每个人对于”开源社区“的定义都不一样,在社区的想法也完全不一样,我认为玩开源就像”谈恋爱“,要想方设法对它好,在接触 Apache DolphinScheduler 社区之后,我从”非技术“的视角真真实实地感受到了 Apache Way 。

用户头像
白鲸开源

2023-02-10
 141
BIGO 如何做到夜间同时运行 2.4K 个工作流实例?

主要介绍了 BIGO 如何使用 DophinScheduler 来调度以 Spark 为主的多种类型的离线任务,以及为了满足业务需求、提升用户使用体验,在 DS 和 Spark 上所做的各种改进。

用户头像
白鲸开源

2023-02-08
 184
Apache Spark + 海豚调度:PB 级数据调度挑战,教你如何构建高效离线工作流

2010 年,我国进入移动互联网,数据规模成几何式增长。在大数据开源技术领域,以 Hadoop 为核心的大数据生态系统面对海量数据也不断发展与迭代,大数据处理流程中的各个开源组件,也一起开启了狂飙突进的大数据时代,推动整个行业开启了数字化变革之路。

用户头像
白鲸开源

2023-01-09
 135
突破单点瓶颈、挑战海量离线任务,Apache Dolphinscheduler在生鲜电商领域的落地实践
突破单点瓶颈、挑战海量离线任务,Apache Dolphinscheduler 在生鲜电商领域的落地实践

惊喜:文末有插件推荐,随着大数据的进一步发展,不管是离线任务量还是实时任务量都变得越来越多,对调度系统的要求也越来越高,不仅要求系统稳定还要求操作简单,上手方便。

用户头像
白鲸开源

2022-10-21
 257
挑战海量数据:基于Apache DolphinScheduler对千亿级数据应用实践
挑战海量数据:基于 Apache DolphinScheduler 对千亿级数据应用实践

对于千亿级数据量的数据同步需求,进行分析和选型后,最终决定使用 DolphinScheduler 进行任务调度,并周期调度 DataX、SparkSQL 等方式进行海量数据迁移。

用户头像
白鲸开源

2022-10-11
 315
Apache Dolphin Scheduler 3.0.1 发布,对核心及 UI 相关进行优化

点亮 ⭐️ Star · 照亮开源之路

用户头像
白鲸开源

2022-10-10
 150
DophineSheduler 上下游任务之间动态传参案例及易错点总结

​

用户头像
白鲸开源

2022-09-28
 330
ApacheCon Asia 2022 精彩回顾 | 如何让更多人从大数据中获益?

点亮 ⭐️ Star · 照亮开源之路

用户头像
白鲸开源

2022-09-20
 66
个人成就
  • 发布了 39 篇内容

    共 18.2字, 被阅读 7242次

  • 获得了 14 次赞同

    获得了 8次喜欢, 获得了 6 次收藏

  • 参与了 12 次互动

    互动包含发布评论、点赞评论、参与投票等

TA 关注的
频道
  • 大数据
  • AI&大模型
最新评论
  • InfoQ写作社区官方您好,请添加文字君的微信 infoqwriter, 之后会拉您进群哦

     一文读懂,硬核 Apache DolphinScheduler3.0 源码解析

  • logo

    促进软件开发及相关领域知识与创新的传播

  • 关于我们
    我要投稿
    合作伙伴
    加入我们
    关注我们
  • 联系我们
    内容投稿:[email protected]
    业务合作:[email protected]
    反馈投诉:[email protected]
    加入我们:[email protected]
    联系电话:010-64738142
    地址:北京市朝阳区望京北路9号2幢7层A701
  • InfoQ 近期会议
    上海 · QCon 全球软件开发大会 2024.10.18-19
    北京 · AICon 全球人工智能开发与应用大会 2024.12.13-14
  • 全球 InfoQ
    会议图片InfoQ En
    会议图片InfoQ Jp
    会议图片InfoQ Fr
    会议图片InfoQ Br
Copyright © 2024, Geekbang Technology Ltd. All rights reserved. 极客邦控股(北京)有限公司 | 京 ICP 备 16027448 号 - 5京公网安备京公网安备 11010502039052号 | 产品资质
白鲸开源
OSZAR »