ds

最新版海豚调度dolphinscheduler-3.1.3配置windows本地开发环境

dolphinschedule配置企微告警服务（WeChat群组）

一、前置说明 ds配置好工作流后，比较重要的一个就是上线后的监控报警服务，如果你是基于企微作为协同办公的，WeChat群组预警必须是要安排上的，文章基于自建应用配合群组方式构建预警群，接入后，任务成功或者…

21考研数据结构笔记

pdf电子档可关注公众号“是编程还是玩”回复 “DS” 获取。

dolphinscheduler的僵尸任务清理和清理一直在运行的任务状态

dolphinscheduler的僵尸任务清理界面操作不了的只能去数据库更改状态或则删除掉原因：海豚调度中有几百条僵尸任务， 界面怎么也删不掉，想从数据库中删除，开始查找从数据库删除的办法。参考以下脚本，结合我库中僵尸…

尚硅谷大数据项目《在线教育之离线数仓》笔记007

视频地址：尚硅谷大数据项目《在线教育之离线数仓》_哔哩哔哩_bilibili 目录第12章报表数据导出 P112 01、创建数据表 02、修改datax的jar包 03、ads_traffic_stats_by_source.json文件 P113 P114 P115 P116 P117 P118 P119 P120 P121 P122【122_在…

海豚调度器完全设置东八区

为了兼容全世界不同时区，默认情况下，海豚调度器使用的是 UTC 0 时区，包括保存到数据库表中的数据时区，以及展示到页面上的时区。如果我们想在页面上看到东八区时间，则需要在页面上手动选择上海时区，如下图…

dolphinscheduler有任务一直在运行（问题）目前对数据库解决

dolphinscheduler有任务一直在运行（问题）目前对数据库解决危害： 这么多的任务没有结束，会涉及很多问题的，系统的数据盘会不断入职日志，数据量很大， 其实对于dolphinscheduler的性能是下降的&a…

dolphinscheduler海豚调度（四）钉钉告警

在之前的博文中，我们已经介绍了DolphinScheduler海豚调度的基本概念和工作流程，以及Shell任务和SQL任务的实践。今天，让我们来学习DolphinScheduler中的另一个重要功能：钉钉告警。钉钉群添加机器人在钉钉群添加机器人&#xf…

源码编译 DolphinScheduler 1.3.9 海豚调度，修改Hadoop、Hive组件版本兼容

大前提： maven3 jdk8 环境 maven 私服换成国内镜像，推荐阿里云 maven 镜像 maven-3.6.3\conf\settings.xml <mirrors><mirror><id>aliyunmaven</id><mirrorOf>*</mirrorOf><name>阿里云公共仓库</name&g…

解决DolphinScheduler配置Kerberos过期问题(每次重启解决)

运行环境 DolphinScheduler版本:3.0.0 (报错内容在github的issue上好像说是bug) Crontab定时任务测试过0,12,20点,最后使用20点任务几乎没有,但是12点也几乎没有任务,但是无效 0 20 * * * kinit -kt /opt/software/kerberos/hdfs.keytab hdfs /etc/krb5.conf配置 ticket…

安卓移动设备使用DS file文件管理工具远程访问本地群晖NAS文件

文章目录 1. 群晖安装Cpolar2. 创建TCP公网地址3. 远程访问群晖文件4. 固定TCP公网地址5. 固定TCP地址连接6. 结语 DS file 是一个由群晖公司开发的文件管理应用程序，主要用于浏览、访问和管理存储在群晖NAS（网络附加存储）中的文件。这个应用…