当前位置: 首页 > news >正文

Flink 命令行提交、展示和取消作业

Apache Flink 是一个流处理和批处理的开源框架,用于在分布式环境中执行无边界和有边界的数据流。你可以使用 Flink 的命令行界面(CLI)来提交、展示和取消作业。

提交作业

使用 Flink CLI 提交作业的命令格式通常如下:

./bin/flink run -m <jobmanager_host>:<jobmanager_port> -c <entrypoint_class> <jar_file_path> <arguments>
  • -m <jobmanager_host>:<jobmanager_port>:指定 JobManager 的地址和端口。
  • -c <entrypoint_class>:指定 JAR 文件中包含作业入口点的类。
  • <jar_file_path>:要提交的 JAR 文件的路径。
  • <arguments>:传递给作业的任何可选参数。

例如:

./bin/flink run -m localhost:6123 -c com.example.MyFlinkJob /path/to/my-flink-job.jar --input /path/to/input --output /path/to/output

展示作业

要查看 Flink 集群上正在运行的作业,你可以使用 Flink 的 Web UI。默认情况下,Web UI 可以在 JobManager 的 8081 端口上访问(例如,http://localhost:8081/)。在 Web UI 上,你可以看到所有正在运行的作业、它们的任务、以及相关的性能指标。

另外,你也可以使用 Flink CLI 的 list 命令来列出正在运行的作业:

./bin/flink list -m <jobmanager_host>:<jobmanager_port>

取消作业

要取消 Flink 集群上正在运行的作业,你可以使用 Flink CLI 的 cancel 命令,并指定作业的 ID:

./bin/flink cancel -m <jobmanager_host>:<jobmanager_port> <job_id>

其中 <job_id> 是你想要取消的作业的 ID。你可以通过 Flink Web UI 或 list 命令来获取作业的 ID。

例如:

./bin/flink cancel -m localhost:6123 00000000000000000000000000000000

注意:你需要确保你有足够的权限来提交、展示和取消作业。在某些环境中,可能需要特定的身份验证或授权。

相关文章:

  • 安装golang
  • 【机器学习】神经网络与深度学习:探索智能计算的前沿
  • Python基础教程(十五):面向对象编程
  • 聚焦赛宁网安竞赛平台+赛事服务,引领网络安全竞赛新潮流
  • 浏览器无痕模式和非无痕模式的区别
  • 低功耗蓝牙ble开发(一)——bluez介绍及源码分析
  • 操作系统复习
  • Java | Leetcode Java题解之第151题反转字符串中的单词
  • 【Quartus 13.0】EP1C3144I7 部署4*6矩阵键盘
  • [羊城杯 2020]easyser
  • Android无障碍服务
  • 微信小游戏插件申请,微信小程序插件管理
  • 新手怎么使用GitHub?
  • 解决CentOS 7无法识别ntfs的问题
  • 2024.6.12总结
  • Linux2(文件类型分类 基本命令2 重定向)
  • Android 汉字转拼音(两行就够了)
  • tomcat10部署踩坑记录-公网IP和服务器系统IP搞混
  • 图片转Base64
  • 打造专属 Switch 模拟游戏机
  • 陈燮阳从艺60周年:指挥棒不停,心跳就不会老去
  • 新加坡执政党人民行动党在2025年大选中获胜
  • 美国警方:爱达荷州交通事故致7人死亡,8名伤者预计无生命危险
  • 经济日报:仅退款应平衡各方权益
  • 美法官裁定特朗普援引战时法律驱逐黑帮违法,系首次永久性驳回
  • 亚马逊一季度利润增超六成:云业务增速放缓,警告关税政策或影响业绩指引