Technology 分布式任务系统 cronsun 苏创绩 @Copyright Sunteng Technology 目录 01 任务系统 02 分布式任务系统 03 cronsun 04 心得体会 @Copyright Sunteng Technology Part One 01 任务系统 @Copyright Sunteng Technology 任务 1. 什么时间 什么时间 2. 什么地点 3. 做什么事 @Copyright Sunteng Technology 一个简单的任务 0 8 * * * echo "Hello Gophers!" @Copyright Sunteng Technology cron crond crontab cmd1 cmd2 cmd3 ... @Copyright @Copyright Sunteng Technology 早期的 cron V7，1979 1. 在Version 7 Unix里是一个系统服务 2. 只用 root 运行任务 3. 算法简单直接 @Copyright Sunteng Technology 早期的 cron 运行逻辑 1. 读 /usr/lib/crontab 文件 2. 如果有命令要在当前时间执行，就用

title: Electron 应⽤处理⻓任务 date: 2020-11-26 tags: electron, node description: 通过 Electron 托盘（tray）实现后台执⾏⻓任务。 Electron 应⽤在执⾏⼀些⻓时间任务（⽐如上传、下载），我们想关闭界⾯后任务依旧执⾏。再次打开界⾯，依旧可以看到正在执⾏的任务以及任 务进度。托盘可以帮我们实现这个功能。 setContextMenu(contextMenu) }) 基于托盘功能实现后台运⾏应⽤ 关闭应⽤前唤醒对话框⼆次确认 关闭应⽤时，触发对话框，可⽀持 3 种场景： 点击「取消」取消关闭操作； 点击「退出」，「后台运⾏」选中时，界⾯关闭，托盘不关闭，任务继续执⾏； 点击「退出」，「后台运⾏」不选中，界⾯、托盘关闭，直接退出，任务终⽌。 mainWindow.on('close', (e) => { createFromPath(path.resolve(__dirname, 'icon.png')), message: `确定要退出吗？`, detail: '选择后台运⾏，正在运⾏的任务将在系统托盘中继续运⾏。', checkboxLabel: '后台运⾏', checkboxChecked: true, buttons: btns,

与 script 模式 ) 结束后，事件回调也将不起作用，你可 4.1. User’s guide 15 PyWebIO, 发布 1.1.0 以在任务函数末尾处使用pywebio.session.hold() 函数来将会话保持，这样在用户关闭浏览器页面前， 事件回调将一直可用。 输出域 Scope PyWebIO 使用 Scope 模型来对内容输出的位置进行灵活地控制，PyWebIO 的内容输出区可以划分出不同的输 输出动画 PyWebIO 在 输 出 内 容 时 默 认 会 使 用 淡 入 的 动 画 效 果 来 显 示 内 容， 可 使 用set_env(output_animation=False) 来关闭动画。 有关不同环境配置的效果可查看 set_env Demo 布局 一般情况下，使用上文介绍的各种输出函数足以完成各种内容的展示，但直接调用输出函数产生的输出之间 都是竖直排列的，如果想实 模式下，PyWebIO 会启动一个 Web 服务来持续性地提供服务。需要提供一个任务函数 (类似于 Web 开发中的视图函数)，当用户访问服务地址时，PyWebIO 会开启一个新会话并运行任务函数。 使用start_server() 来启动 PyWebIO 的 Server 模式，start_server() 除了接收一个函数作为任务函 数外，还支持传入函数列表或字典，从而使一个 PyWebIO Server

与 script 模式 ) 结束后，事件回调也将不起作用，你可 4.1. User’s guide 15 PyWebIO, 发布 1.0.3 以在任务函数末尾处使用pywebio.session.hold() 函数来将会话保持，这样在用户关闭浏览器页面前， 事件回调将一直可用。 输出域 Scope PyWebIO 使用 Scope 模型来对内容输出的位置进行灵活地控制，PyWebIO 的内容输出区可以划分出不同的输 输出动画 PyWebIO 在 输 出 内 容 时 默 认 会 使 用 淡 入 的 动 画 效 果 来 显 示 内 容， 可 使 用set_env(output_animation=False) 来关闭动画。 有关不同环境配置的效果可查看 set_env Demo 布局 一般情况下，使用上文介绍的各种输出函数足以完成各种内容的展示，但直接调用输出函数产生的输出之间 都是竖直排列的，如果想实 模式下，PyWebIO 会启动一个 Web 服务来持续性地提供服务。需要提供一个任务函数 (类似于 Web 开发中的视图函数)，当用户访问服务地址时，PyWebIO 会开启一个新会话并运行任务函数。 使用start_server() 来启动 PyWebIO 的 Server 模式，start_server() 除了接收一个函数作为任务函 数外，还支持传入函数列表或字典，从而使一个 PyWebIO Server

onclick=btn_click) 注解: 在 PyWebIO 会话 (关于会话的概念见下文Server 与 script 模式 ) 结束后，事件回调也将不起作用，你可 以在任务函数末尾处使用pywebio.session.hold() 函数来将会话保持，这样在用户关闭浏览器页面前， 事件回调将一直可用。 输出域 Scope PyWebIO 使用 Scope 模型来对内容输出的位置进行灵活地控制，PyWebIO 的内容输出区可以划分出不同的输 输出动画 PyWebIO 在 输 出 内 容 时 默 认 会 使 用 淡 入 的 动 画 效 果 来 显 示 内 容， 可 使 用set_env(output_animation=False) 来关闭动画。 有关不同环境配置的效果可查看 set_env Demo 布局 In general, using the output functions introduced above is enough [lambda: go_app('task_1')]) hold() def index(): put_link('Go task 1', app='task_1') # 使用 app 参数指定任务名 put_link('Go task 2', app='task_2') (下页继续) 4.1. User’s guide 21 PyWebIO, 发布 1.2.3 (续上页) # 等价于

onclick=btn_click) 注解: 在 PyWebIO 会话 (关于会话的概念见下文Server 与 script 模式 ) 结束后，事件回调也将不起作用，你可 以在任务函数末尾处使用pywebio.session.hold() 函数来将会话保持，这样在用户关闭浏览器页面前， 事件回调将一直可用。 输出域 Scope PyWebIO 使用 Scope 模型来对内容输出的位置进行灵活地控制，PyWebIO 的内容输出区可以划分出不同的输 输出动画 PyWebIO 在 输 出 内 容 时 默 认 会 使 用 淡 入 的 动 画 效 果 来 显 示 内 容， 可 使 用set_env(output_animation=False) 来关闭动画。 有关不同环境配置的效果可查看 set_env Demo 4.1. User’s guide 19 PyWebIO, 发布 1.2.2 布局 一般情况下，使用上文介绍的各种输出函数足 [lambda: go_app('task_1')]) hold() def index(): put_link('Go task 1', app='task_1') # 使用 app 参数指定任务名 put_link('Go task 2', app='task_2') start_server([index, task_1, task_2]) # 或 start_server({'index':

· · · · · · · · · · · · 95 4.2.2 检测及关闭系统 swap· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 96 4.2.3 检测及关闭目标部署机器的防火墙· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 292 6.7.7 关闭集群 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 1336 11.11.3 TiCDC 运维操作及任务管理 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 1337

1 在 TiKV 部署目标机器上添加数据盘 EXT4 文件系统挂载参数 · · · · · · · · · · · · · · · · · · · · · · · · · 455 5.2.2 检测及关闭系统 swap· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 节点的临时空间（推荐）· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 457 5.2.4 检测及关闭目标部署机器的防火墙· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 458 5 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 763 8.5.6 关闭资源管控特性 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · ·

1 在 TiKV 部署目标机器上添加数据盘 EXT4 文件系统挂载参数 · · · · · · · · · · · · · · · · · · · · · · · · · 471 5.2.2 检测及关闭系统 swap· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 节点的临时空间（推荐）· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 473 5.2.4 检测及关闭目标部署机器的防火墙· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 474 5 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 779 8.5.6 关闭资源管控特性 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · ·

1 在 TiKV 部署目标机器上添加数据盘 EXT4 文件系统挂载参数 · · · · · · · · · · · · · · · · · · · · · · · · · 470 5.2.2 检测及关闭系统 swap· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 节点的临时空间（推荐）· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 472 5.2.4 检测及关闭目标部署机器的防火墙· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 473 5 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 761 8.5.7 关闭资源管控特性 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · ·