Alluxio 助力 Kubernetes, 加速云端深度学习
Kubernetes, 加速云端深度学习 范斌 Alluxio 创始成员 车漾 阿里云高级技术专家 目录 • 我们是谁 • 问题背景 • Alluxio 助力云原生 AI 模型训练 • 相关资料 • Alluxio 是谁 • Allluxio 与 Kubernetes 结合 • Alluxio 优化实践 我们是谁? 车漾 阿里云高级技术专家 范斌 Alluxio 创始成员 背景0 码力 | 22 页 | 11.79 MB | 1 年前32020美团技术年货 算法篇
KDD Cup 2020 多模态召回比赛亚军方案与搜索业务应用 161 CIKM 2020 | 一文详解美团 6 篇精选论文 179 MT-BERT 在文本检索任务中的实践 192 美团无人车引擎在仿真中的实践 204 美团无人配送 CVPR2020 论文 CenterMask 解读 215 WSDM Cup 2020 检索排序评测任务第一名经验总结 225 美团内部讲座|清华 多模态召回比赛季军方案与搜索业务应用 252 对话任务中的“语言 - 视觉”信息融合研究 267 ICDM 论文:探索跨会话信息感知的推荐模型 278 自然场景人脸检测技术实践 289 技术解析 | 横纵一体的无人车控制方案 304 目录 智能搜索模型预估框架 Augur 的建设与实践 作者:朱敏 紫顺 乐钦 洪晨 乔宇 武进 孝峰 俊浩等 1. 背景 在过去十年,机器学习在学术界取得了众多的突破,在工业界也有很多应用落地。美 9K 条样本进行 了人工标注作为 Benchmark 数据集。 样本去噪 无意义单字 Query 过滤。由于单字 Query 表达的语义通常不完整,用户点击行为也 比较随机,如 < 优,花漾星球专柜(中央大道倍客优)>,这部分数据如果用于训练会 影响最终效果。我们去除了包含无意义单字 Query 的全部样本。 正样本从用户下单的 POI 中进行随机采样,且过滤掉 Query 只出现在0 码力 | 317 页 | 16.57 MB | 1 年前3Pivotal HVR meetup 20190816
Products 天天拍车是国内领先的二手车竞拍平台,现有核心业务是二手车线上 竞拍。同时,天天拍车还提供上门检测、线上竞拍、包办手续等一站 式二手车交易服务。 天天拍车运用互联网技术,从根本上解决了二手车跨各区域成交和流 通效率低下等问题,持续推进行业升级变革。全国二手车经销商传统 的线下收车方式正在被快速颠覆——二手车经销商通过天天拍车的在 线竞拍系统,在手机端就能轻松竞拍到全国海量优质车源,收车效率 和运营效率得以提升,这有助于二手车经销商专注于车辆整备和二手 车零售,加速行业专业化分工、实现规模化发展。 同时,天天拍车也正在布局二手车金融、二手车保卖等创新业务。截 至目前,天天拍车已在全国超过50个多城市设立线下交易服务中心。 参考:https://mp.weixin.qq.com/s/zgCfcbMKOJRYROdxjW6RNA 14 Compare Products 需求:利用GP自建数据仓库面临的数据集成问题0 码力 | 31 页 | 2.19 MB | 1 年前3Yii 2.0 权威指南
轴 轵 轴 软 轲 轩 轡 转 轩 轳 轲 轥 转 轥 轡 轳 轥 轤 轵 轮 轤 轥 轲 轴 轨 轥 轔 轥 轲 轭 轳 软 车 轙 轩 轩 轄 软 轣 轵 轭 轥 轮 轴 轡 轴 轩 软 轮 輮 轃 软 轰 轹 轲 轩 轧 轨 轴 輲 輰 輱 輴 轙 轩 轩 轓 软 车 轴 轷 轡 轲 轥 轌 轌 轃 輮 轁 转 转 轒 轩 轧 轨 轴 轳 轒 轥 轳 轥 轲 轶 轥 轤 輮 C o n t 编程框架,即可以用于开发各种用 轐 轈 轐 构建的 轗 轥 轢 应用。 因为基于组件的框架结构和设计精巧的缓存支持,它特别适合开发 大型应用, 如门户网站、社区、内容管理系统(轃 轍 轓 )、 电子商务项目和 轒 轅 轓 轔 车 轵 转 轗 轥 轢 服务等。 1 . 1 . 2 Y i i 和 和 和其 其 其他 他 他框 框 框架 架 架相 相 相比 比 比呢 呢 呢? ? ? 如果你有其它框架使用经验,那么你会很开心看到 • 轙 轩 轩 是一个全栈框架,提供了大量久经考验,开箱即用的特性: 对关 系型和 轎 软 轓 轑 轌 数据库都提供了查询生成器和 轁 轣 轴 轩 轶 轥 轒 轥 轣 软 轲 轤 ;轒 轅 轓 轔 车 轵 转 轁 轐 轉 的开发支持;多层缓存支持,等等。 • 轙 轩 轩 非常易于扩展。你可以自定义或替换几乎任何一处核心代码。你 还会受益于 轙 轩 轩 坚实可靠的扩展架构,使用、再开发或再发布扩展。0 码力 | 537 页 | 4.66 MB | 1 年前3NTTDATA 汽车行业数字营销平台微服务化实践
内容及数字资产,形成企业数字资产沉淀,统一企业对外形象 及标准化化运营 活动数据,消费者数据,媒体 数据,车联网数据等,全渠道 数据收集追踪,建立数据分析 模型,辅助业务的决策优化 大数据分析 及应用 线上数字化布局 线下数字化布局 车联网及线下店端消费者旅程与线上消费 者旅程相结合,设计多种跨渠道跨屏互动, 引导进店消费者通过扫码,配车,留资等 行为整合线上数据 利用人脸识别等多种技术及平台,通过可 配置用户聚类评级模型和数据处理算法, 音,汽车之家等,基于360°消费者画像的精准营销触达。 营销触达数据实时跟踪分析,形成数据闭环 消费者权益及服务数字化布局 建设“一个会员、分众运营、复合模式”的会员体 系以及差异化个性化的会员权益服务体系,打造 “不止于车”的车生活异业联盟生态圈 4 github.com/apache?q=servicecomb servicecomb.apache.org 汽车数字营销平台总体架构 5 github.com/apache 汽车数字营销平台微服务化转型 打造集中化、标准化、智能化、便利化的汽车品牌数字营销平台 支持数字营销快速、多样、变化的业务场景,避免系统分散重复,将技术投资回报最大化。 以智能化,可持续发展思路,打造车企C2B2C用户体验优化闭环。 可配置适应业务生长,帮助企业更快速、灵活地应对不断变化的市场需求,随时调整业务模式快速配置,以最低成本适应弹性的数据需求。 • 主机厂/经销商、线上/线下线索管0 码力 | 11 页 | 2.25 MB | 1 年前3大数据时代的Intel之Hadoop
• 况源采用况冶水系统,末端采用行间 送风 • 封闭热走廊 Intel Hadoop研发团队 推劢产业应用 交通指挥的挑战 ——典型中国二线城市 • 机劢车的迅速增加 • 复杂数据分析 • 数据挖掘不预测 • 突发事件应对 • 公众服务 • 公众访问高幵发 • 其他系统亏连 面对快速增长的数据,如何满足交通挃挥要求 12000个卡口,每年采集超过1000亿条过车的图片和数据信息 基于Hadoop的新型数据中心方案 数据库成本:1PB> 6000万 RMB 数据库维护成本> 1500万RMB 原有方案 RDBMS:过车记录 文件系统:过车图片 数据库成本:1PB, 1000万RMB 数据库维护成本< 100万RMB Hadoop方案 HBase:过车记录 HDFS:过车图片 HDFS:过车图片 架构灵活,适应业务要求,成本大幅降低 0 5000 10000 15000 20000 25000 30000 过车查询(s) 套牌分析(s) 碰撞分析(s) 原有方案 30 3600 28800 Hadoop方案 1 60 240 响应时间0 码力 | 36 页 | 2.50 MB | 1 年前3πDataCS赋能工业软件创新与实践
社 区 版 云 上 云 版 ⼀ 体 机 @2024 OpenPie. All rights reserved. OpenPie Confidential 客 户 案 例 : 某 ⼤ 型 汽 车 集 团 全 面 升 级 ⼤ 数 据 平 台 ⾄ 云 原 ⽣ π D a t a C S 项目背景: 该企业依托于集团内部需求,建设了⼀个云平台,提供基础设施服务。随着⼦公司接⼊的数量越来越多,数据量也急剧增长, 采用PieCloudDB作为核⼼数字底座,完成原来CDH(Hadoop)平台的替换,构建了制造业⾏业云的数据中台服务,既面向集团内 部服务,同时也面向⾏业的公司提供服务。在集团内部主要提供营销数据、用户数据、经营数据以及车联⽹数据等数据的分析和应 用。具体如下: Ø 替换了Hive数仓,采用PieCloudDB云原⽣虚拟数仓作为数仓服务,整体数仓的SQL执⾏性能是原Hive的30倍; Ø 支持更多的数据源,具备全 丰富图表 多终端访问 炫酷⼤屏 自助实时BI 异常预警 数据 展示 可视化BI 销售线索分析 分析结果 落数据库 4S店选址分析 API接⼝ (⼿机/车机) 车 联 数 据 应 用 驾驶操控 电池医⽣ 车联运⾏ 车联状态 经 营 数 据 应 用 智慧零售 决策跟踪 业务诊断 业务预测 用 户 数 据 应 用 VOC客户洞察 AutoFort 智能运营 客户画像0 码力 | 36 页 | 4.25 MB | 1 年前3领域驱动设计&中台/如何让DDD落地
OrderList ⽣生成 需求分析到⽤用户故事 Story6 创建订单 作为⼀一个商城顾客 我可以确定购物⻋车中的商品和数量量,然后提交商品订单 为了了在商城上购买商品 Acceptance Criteria 1 - Given:导航【购物⻋车】 - When:确定购物⻋车中要提交的商品和数量量,然后点击提交; - Then:订单成功提交,从商品库存中锁定订单的数量量,提示⽓气泡“商品已保存成功” 添加订单⽇日志服务收到命令后,会把添加订单⽇日志命令转换成订单⽇日志,然后调⽤用 订单⽇日志仓库保存订单⽇日志 Acceptance Criteria 1 - Given:导航【购物⻋车】 - When:确定购物⻋车中要提交的商品和数量量,然后点击提交; - Then:订单成功创建,从商品库存中锁定订单的数量量,订单⽇日志需要记录这笔订单 创建,最后提示⽓气泡“商品已保存成功” - And w0 码力 | 32 页 | 3.25 MB | 1 年前3深度学习在电子商务中的应用
聊天机器人简介 聊天机器人主要模块及架构 深度学习探索 聊天机器人评测结果 6 • 语义词汇差异 理发器, 理发推子, 电推子 血糖计, 血糖仪 山地车,死飞,自行车,碟刹,折叠车,公路车, 单车 • 解决方案 同义词 ? 归一化 ? 預報 =》预报, 五岁 =》 5岁 目前商品搜索中的一些问题 7 人工智能/深度学习在搜索中的应用:网页/电商搜索 时间顺序,结合商品的点击,商品放入购物车,商品的购买这些用户行为,而建立的 矢量化训练数据 小米手机4c, 小米手机4s, 142074410 美的冰箱 270, 美的冰箱645, 美的冰箱 330, 132268985, 美的 2155, 美的冰箱, 美的冰箱 550 基于用户反馈的矢量化 13 基于用户反馈的矢量化模型 用户搜索日志 用户点击日志 用户购物车 日志 用户购买日志 Word2vec模型0 码力 | 27 页 | 1.98 MB | 1 年前3TiDB 开源分布式关系型数据库
铅购 Haier 人@@Ozkista Oo 人。 妊名”encem晓 58同城 ms之 总哇 Onono 国as9 回克 团小k 圈#z* @父和及 uctoup 示月有旅游”eesc5h 。 资车之家 。 2 58到未”加 SByx和小红书 。 国委视 blued 图am 从9本”所总和和项 。 过提科技 “metux四全)搜狗 和8 smEs 国maxr [at 搜财 国人图 半卫第 Ga Oil BR 四 为是 图zazst maat 知于 E3 吻呆;28 口] Blco ”=PP= 。 叭员会 四雪球 攻国yz 闪mms [CC 电损二车 。 啊诬出行 人sme 部27宫 PingCAP.COM o 一 eOee 合力全人 G@OSE@ 02 PingCAP.COM 汽车之家 TiDB 在 818 台网互动项目中的应用 汽车之家是全球访问量最大的汽车网站,致力于通过产品服务.数据技术.生态规则和资源为用户和客户夺 能,建设"车媒体,车电商、车金融,车生活" 4个图。 业务挑战 "818 全球汽车夜"是由汽车之家与湖南卫视联手打造的汽车行业顶级盛典, 参与用户数以百万, 晚会期间 系统并发峰值达数十万, 因每轮秒杀、扬奖等活动时间短0 码力 | 58 页 | 9.51 MB | 1 年前3
共 155 条
- 1
- 2
- 3
- 4
- 5
- 6
- 16