A Day in the Life of a Data Scientist Conquer Machine Learning Lifecycle on Kubernetes
A Day in the Life of a Data Scientist Conquer Machine Learning Lifecycle on Kubernetes Brian Redmond • Cloud Architect @ Microsoft (18 years) • Azure Global Black Belt Team • Live in Pittsburgh, PA code • Ops teams embracing source control (git) • Automated testing • Repeatable/consistent • CI/CD • This has worked well for App Dev. Now time for AI/ML • But, must ensure data scientist are not hindered Scalable • Easy to explore hyper-parameters space • Easy to do distributed training But really, Data Scientists shouldn’t have to care about containers, kubernetes and all that stuff • Pachyderm can0 码力 | 21 页 | 68.69 MB | 1 年前3基于go和flutter的实时通信/视频直播解决方案 段维伟
(浏览器/原生客户端/flutter 客户端) SFU工作原理 SFU 服务器 https://pion.ly/ The Open Source, Cross Platform Stack for Real-time Media and Data Communication. https://github.com/pion Pion 介子 纯Go语言的WebRTC 全家桶 作者:0 码力 | 38 页 | 2.22 MB | 1 年前3JavaScript 正则表达式迷你书 老姚 - v1.1
7.2.9. 修饰符 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 70 7.2.10. source 属性 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 71 7.2.11. 构造函数属性. . . => true JavaScript 正则表达式迷你书 7. 第七章 正则表达式编程 | 第 70 页 7.2.10. source 属性 正则实例对象属性,除了 global、ingnoreCase、multiline、lastIndex 属性之外,还有一个 source 属性。 它什么时候有用呢? 比如,在构建动态的正则表达式时,可以通过查看该属性,来确认构建出的正则到底是什么: var className = "high"; var regex = new RegExp("(^|\\s)" + className + "(\\s|$)"); console.log( regex.source ) // => (^|\s)high(\s|$) 即字符串"(^|\\s)high(\\s|$)" 7.2.11. 构造函数属性 构造函数的静态属性基于所执行的最近一次正则操作而变化。除了是0 码力 | 89 页 | 3.42 MB | 10 月前3JavaScript 正则表达式迷你书 老姚 - v1.0
7.2.9. 修饰符 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 70 7.2.10. source 属性 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 71 7.2.11. 构造函数属性. . . => true JavaScript 正则表达式迷你书 7. 第七章 正则表达式编程 | 第 70 页 7.2.10. source 属性 正则实例对象属性,除了 global、ingnoreCase、multiline、lastIndex 属性之外,还有一个 source 属性。 它什么时候有用呢? 比如,在构建动态的正则表达式时,可以通过查看该属性,来确认构建出的正则到底是什么: var className = "high"; var regex = new RegExp("(^|\\s)" + className + "(\\s|$)"); console.log( regex.source ) // => (^|\s)high(\s|$) 即字符串"(^|\\s)high(\\s|$)" 7.2.11. 构造函数属性 构造函数的静态属性基于所执行的最近一次正则操作而变化。除了是0 码力 | 89 页 | 3.42 MB | 10 月前32022 Apache Ozone 的最近进展和实践分享
OBS Layout 12.219 Hive 删除表(Rename操作) ● FileSystem delete on table directory path ● Moves table data to trash 举例: fs.delete(“/catelog_sales”) 均衡器Ozone Balancer(HDDS-4656) 时机 ● 新的节点加⼊Ozone集群 Container Group2 客户端 写⼊⽂件 256MB 256MB 256MB 256MB 256MB 256MB 256MB 256MB 256MB 0 data1 data2 data3 parity1 parity2 数据写⼊ • EC Container Group:给定Container的⼀组满⾜EC策略的副本实例 • 物理块:每个DN磁盘上的数据块,默认是256MB Container Group 客户端 读取⽂件 Chunk1 Chunk2 Chunk3 Chunk4 Chunk5 Chunk6 Chunk7 Chunk8 … data1 data2 data3 parity1 parity2 B-2-d B-2-d B-2-d B-2-p B-2-p Chunk2 1MB Chunk3 1MB Parity1 1MB Parity2 0 码力 | 35 页 | 2.57 MB | 1 年前3清华大学 DeepSeek+DeepResearch 让科研像聊天一样简单
Prompts(指令) 描述 Can you load and preview the data? 加载,预览一下数据 Can you list the top 10 key points? 最重要的十个要点 What are the trends shown in this data? 找趋势 Can you describe the data? 描述数据 Show me the top trends in a using this data? 创建一个热力图 Can you segment this data and create a table? 切分数据 Can you create a graph using this data? 制作一个图 Can you create a world cloud? 做一个词云 Can you create a chart using this data? 画一个图表 graphs more beautiful? 把图美化一下 Can you write a one sentence recap of this data? 快速回顾一下 Create a visual chart, based on this data. 做一个视觉图表 What’s the main takeaway from this dataset? 找出最主要的信息 Can you explain0 码力 | 85 页 | 8.31 MB | 7 月前3Manage Edge Nodes with KubeEdge and Case Study
• Case study • Water utility management • Campus surveillance system Edge Scenario/Characters (vs Data Center) • Similar requirement • Edge/Cloud nodes management • Application management • Inter-service Cloud/Edge metadata bi-direction sync • Component • Edge Metadata Store: Etcd • Sync Service: • Mirror data between Etcd@Cloud and Etcd@Edge • Base on Etcd watch/get • Sync Algorithm • Eventually consistent Configuration (Pod Spec) • Goal • Offline autonomous – network connectivity • Only sync change data – network performance • Lightweight Kubelet – resource constrain edge node • Components • Edge Controller:0 码力 | 11 页 | 1.42 MB | 1 年前3Kubernetes Operator 实践 - MySQL容器化
manager 进程 mysql-pod-1 app-container mysql init-container mha-node data-dumper mysql-pod-2 init-container data-dumper data ConfigMap mysql-conf mysql-operator-pod app-container mysql-operator0 码力 | 42 页 | 4.77 MB | 1 年前3消息中间件RocketMQ原理解析 - 斩秋
lave的话, 把masterOffset 值赋为 minOffset) 向 socket 写入同步数据: 传输数据协议Data> 4.2 ReadSocketService 读取 slave 通过 HAClient 向 master 返回同步 commitLog 的物理偏移量 phyOffset 值 NettyDecoder, NettyEncoder 对 RemotingCommand 进行协议的编码与解码 协议格式 data> data> 1 2 3 4 协议分4部分,含义分别如下 1、大端4个字节整数,等于2、3、4长度总和 0 码力 | 57 页 | 2.39 MB | 1 年前3强大的音视频处理工具: FFmpeg
-t duration (input/output) When used as an input option (before -i), limit the duration of data read from the input file. When used as an output option (before an output url), stop writing the reserved, powered by Gitbook最后更新: 2021-09-14 08:51:37 -dn disable data -dn disable data Audio options: Audio options: -aframes number -aframes number set0 码力 | 73 页 | 11.57 MB | 1 年前3
共 16 条
- 1
- 2