Flink Scala 代码启动本地WebUI: 代码语言:javascript 复制 val configuration=newConfiguration()//设置WebUI绑定的本地端口configuration.set(RestOptions.BIND_PORT,"8081")//使用配置val env:StreamExecutionEnvironment=StreamExecutionEnvironment.createLocalEnvironmentWithWebUI(configuration) 三、编写完整代码启动并访问...
0 序言 在本地环境(本地电脑)开发、调试,或集群环境下运行Flink Job时,需要利用Web UI观测作业内部的运行情况。 本文仅演示通过本地电脑环境(LocalEnvironment)直接提交运行Flink作业时,启用WEB UI的场景。 StreamExecutionEnvironment
sleep 10s web_frontend=`yarn application -appStates RUNNING -list | grep ${yarn_name} | awk -F ' ' '{print $NF}'` echo "Web frontend listening at ${web_frontend}" 2.Flink Dashboard简介 1641971856(1).png 3.Flink Running Jobs简介 Overview ui 1641972407(1).png Exception ui 1641972672(...
Flink WebUI提供基于Web的可视化开发平台,用户只需要编写SQL即可开发作业,极大降低作业开发门槛。同时通过作业平台能力开放,支持业务人员自行编写SQL开发作业来快速应对需求,大大减少Flink作业开发工作量。 Flink WebUI功能仅支持MRS 3.1.0及之后版本。 Flink WebUI特点 Flink WebUI主要有以下特点: 企业级可视化运维:运维...
「Flink」Flink 1.9 WebUI运行作业界面分析 运行作业界面 在以下界面中,可以查看到作业的名称、作业的启动时间、作业总计运行时长、作业一共有多少个任务、当前正在运行多少个任务、以及作业的当前状态。 这里的程序:一共有17个任务,当前正在运行的是17个任务。
【摘要】 Flink本地模式开启WebUI在工作中我们一般使用IntelliJ IDEA开发工具进行代码开发,为了能方便快速的调试Flink和了解Flink程序的运行情况,我们希望本地开发工具中运行Flink时能查看到WebUI,这就可以在编写Flink程序时开启本地WebUI。一、在Flink 项目中添加本地模式 WebUI的依赖在Flink1.15版本之前根据使用Scal...
笔者最近开始学习flink,但是flink的webui上各种指标错综复杂,在网上也没有找到一个比较详尽的资料,于是个人整理了一下关于flink中taskmanager的webui各个指标的含义,供大家参考。 注:括号中仅为个人理解 如下图,是一个flink任务中的某个taskmanager的ui 以下介绍顺序为从上到下,从左至右 ...
在Flink的Deployment配置中添加以下环境变量,以启用Web UI: ```yaml env: - name: JOB_MANAGER_REST_PORT value: "8081" - name: JOB_MANAGER_RPC_PORT value: "6123" ``` ### 步骤 3:启动Flink Web UI 通过kubectl命令端口转发,将Flink JobManager的8081端口映射到本地端口: `...
三.通过Web UI执行jar文件 3.1 上传文件 选择"Submit New Job"后,选择"Add New" 选中第二步打包生产的jar文件 如下提示上传成功 但是要注意的是,我们只是把jar文件是上传到服务器上,而并没有开始执行 双击界面上的jar文件,可以看到有参数 Entry class 我们需要运行的class的完整路径 Parallelism 并行度 Program ...
「Flink」Flink1.9WebUI运行作业界面分析 「Flink」Flink1.9WebUI运⾏作业界⾯分析 运⾏作业界⾯ 在以下界⾯中，可以查看到作业的名称、作业的启动时间、作业总计运⾏时长、作业⼀共有多少个任务、当前正在运⾏多少个任务、以及作业的当前状态。这⾥的程序：⼀共有17个任务，当前正在运⾏的是...