【尚硅谷】DolphinScheduler2.x安装到优化(工作流调度平台)

作者: 尚硅谷分类: 计算机技术 发布时间: 2022-06-23 14:55:00 浏览:55083 次

【尚硅谷】DolphinScheduler2.x安装到优化(工作流调度平台)

DolphinScheduler:
欢迎关注中国最流行的大数据调度系统 - Apache DolphinScheduler: https://github.com/apache/dolphinscheduler

【回复】回复 @我的青春大有问题 :Apache 项目靠的不是一家公司之力,集结的是全社会的贡献者一起共建! Apache 项目是 Apache 开源基金会旗下的,不属于任何一家公司,欢迎一起用开源,也欢迎有精力能参与到开源项目的建设中来,成长那是 so so 的快[妙啊]
【回复】回复 @DolphinScheduler : 看到还有 Azkaban、Oozie 视频教程,DolphinScheduler 能甩他们 20 条街,欢迎对比比对[doge]
【回复】DolphinScheduler 中文社区欢迎大家关注[调皮]
极夜寒锋:
笑死,我们公司这业务量根本用不上这种东西[滑稽]

少龙008:
由于最近公司在使用dolphinscheduler2.0.5,这两天一口气看完了所有视频。怎么说呢,讲的确实很详细,但是深度不够,只是简单入个门而已,连hadoop相关的任务一个都没讲。 应该讲一些,怎么调用MapReduce或者spark任务,或者hive/impala sql任务等等。

【回复】脚本或者spark任务的jar包程序放到服务器,然后调度中配置对应路径的文件就行
【回复】都已经讲到这个份上了你还不会举一反三吗? 你可以选择使用shell用hive -e的方式调shell跑MR。
梁自强00:
胡说八道呢,真正的企业级数据会有成千上万个脚本,都上传到hdfs上面去管理? 这就是培训机构和企业实战的区别吧

【回复】真实张口就来哦,有利有弊,你说的成千上万脚本这个是会存在占用过多元数据。 但是你把脚本放在worker机器外的储系统肯定也是有好处的,至少每次去调度的时候不用分发。另外这个不跟培训机构有关系吧,这个是该调度器的默认行为,觉得有弊端自己去社区提issue,有本事自己去二开出来搞分享才是牛的,这只是个教学视频,别搁这儿找存在感,给你白嫖还叽叽歪歪?
十五的月亮圆不圆_:
已学完,说一下自己的感悟: 1、教学重难点突出,板书条理清晰。教学步骤设计合理,由浅入深,循序渐进。 2、教师基本功扎实,知识讲解准确,教学设计合理,始终以学生为主体,自主学习,小组交流讨论,上台交流展示等形式,师生配合默契,取得了较好的学习效果。 3、教师教态自然,语调亲切,并不断鼓励学生,充分发挥学生的主体作用。使学生在和谐融洽的课堂氛围中学习,推进了知识的掌握和智力的发展,达到了良好的教学效果。 4、教师准确的把握了设疑的方向,调动了学生学习的兴趣,使学生进入积极的的思维状态。 5、教师组织课堂教学效果好,语言清晰,能注重学法指导,培养学生的创新能力,问题设计富有启发性。 6、教学环节设计安排清晰明了,过渡自然。

寄居の友人c:
这玩意很强,但也被坑惨了。修改了邮件告警(公司内网环境),没导入jar依赖,找了好几天,找不到还是让架构师找了一天才发现我修改的告警插件没有导入jar放在libs下

卷王的生活:
我是谷粉,但事实上我从来不会去粉任何一个明星或者其他的团队,但是总有些人是不一样的。尚硅谷的视频从来都很仔细明了,对比其他机构或者个人的教学视频,差距显而易见。秉承开源精神的尚硅谷,确实是不一样的。在欧美对我国封锁如此严重的现在,我们如何能扫蔽自珍?是达则兼济天下,还是资本垄断市场?尚硅谷用行动证明了他的精神。 ps:你可能认为我是个白嫖党,但是我确实是很认真的写出这段话的(狗头)

勿忘初心恩:
框架搭好了,谁能帮我解答下为啥配置MySQL数据源出现jdbc错误,不是lib目录下的那个8.0驱动么,还是需要配置其他的

【回复】这个我也遇到了,其实是因为那个 你在配置文件里的时候,创建的哪个用户要写对
大数据小李子:
已入职,高新,不说了,来单了![脱单doge]

大数据框架 DolphinScheduler DolphinScheduler2.x 分布式 大数据 尚硅谷

如果觉得我的文章对您有用,请随意打赏。您的支持将鼓励我继续创作!