基本概念
工作空间
工作空间(Workspace)是管理资源、任务的基本单元,工作空间资源互相隔离、数据互相独立,您可在不同的工作空间管理不同的任务。
数据源
数据源即数据的来源,不同的数据源,数据的存储、传输、处理和应用的模式、场景、技术和工具也不相同。
作业
作业(Job)指完成对数据的一系列操作,通过作业实现数据处理的业务逻辑。
计算集群
计算集群是作业的运行环境。大数据工作台提供全托管式的 Flink 集群管理,在计算集群中,您只需关注所需计算资源的大小、并发度。
调度
调度(Schedule)指手动触发或者周期性触发任务的执行。
发布
发布(Release)指将开发的作业从开发环境发布至调度系统的过程。完成发布后,相应的代码、调度配置全部合并至调度系统中,调度系统根据相关配置进行调度操作,未提交发布的作业不会进入调度系统。
作业实例
作业实例(Instance)是某个作业在某时某刻执行的一个快照。调度系统中的任务,经过调度系统、手动触发运行后,会生成一个实例。实例中会有任务的运行时间、运行状态和运行日志等信息。