无匹配社区
博客园
最新
热门
请选择社区
发布
Docker查看日志的三种方式
Docker查看日志的三种方式
Docker
忆往昔
发布于 2024年01月21日
108浏览
5点赞
基于Flink+Doris的动力电池状态分析
对动力电池状态进行精准评估,从而更好地了解电池当前的状态。动力电池实时状态分析的应用场景非常广泛,涉及到电动汽车的研发、生产、使用、维护等各个环节,是电动汽车发展的重要支撑技术之一。
Flink
Doris
车联网
忆往昔
发布于 2024年01月21日
112浏览
3点赞
Apache Paimon:Streaming Lakehouse is Coming
Paimon 是流批一体的湖存储格式,首先它只是一个文件格式,只是一堆代码将数据存储在 OSS 或者 HDFS 上,没有任何的服务。 可以使用 Flink CDC 来一键入湖到 Paimon 中,也可以通过 Flink SQL 或 Spark SQL 来批写、流写到 Paimon 当中。Paimon 也支持主流开源引擎,包括几乎现在所有的开源引擎。最后,Paimon 也可以被 Flink 或 Spark 流读,这也是它作为流式数据湖的特有能力之一。
忆往昔
发布于 2024年01月09日
25浏览
Apache Doris 数仓使用规范(经验版)
Apache Doris 数仓使用规范(经验版)Apache Doris 数仓使用规范(经验版)Apache Doris 数仓使用规范(经验版)
atbigapp.com
发布于 2024年01月04日
1浏览
DolphinScheduler×长安汽车 | 千万级数据接入能力智能网联汽车云平台引进核心调度系统
长安汽车智能车云平台,网联车日活达百万级,车联网平台日均接收信号条数达百亿级。面对海量车联网数据分析的挑战,长安汽车建设了一套具备千万级数据接入能力的智能网联汽车云平台。为保证智能汽车数据类业务的开展,长安汽车从初试到深度使用(1.1.0开始投产),选择DolphinScheduler作为数据平台的核心调度系统,实现数据任务的灵活编排、调度,赋能智能汽车产品研发、故障诊断等业务。
atbigapp.com
发布于 2024年01月04日
Flink CDC 3.0 正式发布,详细解读新一代实时数据集成框架
Flink CDC 是基于数据库日志 CDC(Change Data Capture)技术的实时数据集成框架,支持了全增量一体化、无锁读取、并行读取、表结构变更自动同步、分布式架构等高级特性。配合 Flink 优秀的管道能力和丰富的上下游生态,Flink CDC 可以高效实现海量数据的实时集成。Flink CDC 社区发展迅速,在开源的三年时间里,社区已经吸引了 111 位贡献者,培养了 8 位 Maintainer,社区钉钉用户群超过 9800 人。
atbigapp.com
发布于 2024年01月03日
Dinky 1.0 前瞻体验,全新而来
什么是 Dinky: Dinky 是一个开箱即用 、易扩展 ,以 Apache Flink 为基础,连接 OLAP 和数据湖等众多框架的一站式实时计算平台,致力于流批一体和湖仓一体的探索与实践。 愿景:Dinky 通过提供一站式专业的数据开发、作业监控、资源管理等服务,让FlinkSQL纵享丝滑,以帮助用户在实时计算时代,更好地构建、交付、管理自己的实时计算任务,更专注地分析和挖掘业务数据,更快地交付商业数据的价值。
atbigapp.com
发布于 2024年01月03日
大规模食品图像识别:T-PAMI 2023论文解读
美团基础研发平台视觉智能部与中科院计算所展开科研课题合作,共同构建大规模数据集Food2K,并提出渐进式区域增强网络用于食品图像识别,相关研究成果已发表于T-PAMI 2023。本文主要介绍了数据集特点、方法设计、性能对比,以及基于该数据集的迁移实验等方面的内容,并对Food2K未来的工作进行了展望。希望能为从事相关工作的同学带来一些帮助或者启发。
忆往昔
发布于 2024年01月03日
4浏览
交互式推荐在外卖场景的探索与应用
外卖场景的用户停留时长低于传统电商,对用户实时需求的理解和反馈有更高的要求。针对业务问题,外卖推荐团队从2021年起开始持续投入,最终摸索出了一套适用于外卖场景的交互式推荐架构和策略,并取得了较好的收益。本文详细介绍了外卖首页Feed在搭建交互式推荐时遇到的挑战和解决思路。
忆往昔
发布于 2024年01月03日
美团视觉GPU推理服务部署架构优化实践
面对在线推理服务使用的GPU资源不断增加、GPU利用率普遍较低的挑战,美团视觉研发团队决定通过模型结构拆分和微服务化进行优化,他们提出一种通用高效的部署架构,来解决这种常见的性能瓶颈问题。以“图像检测+分类”服务为例,优化后的服务压测性能指标GPU利用率由40%提升至100%,QPS也提升超过3倍。本文将会重点介绍推理服务部署架构优化的工程实践,希望对大家能有所帮助或启发。
忆往昔
发布于 2024年01月03日
美团开放平台SDK自动生成技术与实践
美团开放平台为整个美团提供了20+业务场景的开放API,为了使开发者能够快速且安全的接入美团开放平台,美团开放平台提供了多种语言的SDK来提高开发者的接入效率。本文介绍了美团开放平台如何自动生成SDK代码的相关技术实现方案,希望对大家能够有所帮助或者启发。
忆往昔
发布于 2024年01月03日
美团外卖推荐情境化智能流量分发的实践与探索
美团外卖推荐团队在推荐算法的长期落地实践中,针对外卖业务情境化特点对排序模型进行深入探索与优化。本文介绍了面向情境化建模的“情境细分+统一模型”建模思路,通过用户行为序列建模以及专家网络两个模块的优化,实现不同场景间对信息独有性的刻画和信息共性的相互传递,进而提升全部流量效率。
忆往昔
发布于 2024年01月03日
23浏览
目标检测开源框架YOLOv6全面升级,更快更准的2.0版本来啦
近日,美团视觉智能部发布了YOLOv6 2.0版本,本次更新对轻量级网络进行了全面升级,量化版模型 YOLOv6-S 达到了 869 FPS,同时,还推出了综合性能优异的中大型网络(YOLOv6-M/L),丰富了 YOLOv6 网络系列。
忆往昔
发布于 2024年01月03日
Replication(上):常见复制模型&分布式系统挑战
分布式系统设计是一项十分复杂且具有挑战性的事情。其中,数据复制与一致性更是其中十分重要的一环。数据复制领域概念庞杂、理论性强,如果对应的算法没有理论验证大概率会出错。如果在设计过程中,不了解对应理论所解决的问题以及不同理论之间的联系,势必无法设计出一个合理的分布式系统。
忆往昔
发布于 2024年01月03日
17浏览
Replication(下):事务,一致性与共识
本文主要介绍事务、一致性以及共识,首先会介绍它们怎么在分布式系统中起作用,然后将尝试描述它们之间的内在联系,让大家了解,在设计分布式系统时也是有一定的“套路”可寻。最后将介绍业界验证分布式算法的一些工具和框架。希望能够对大家有所帮助或者启发。
忆往昔
发布于 2024年01月03日
KDD 2022 | 美团技术团队精选论文解读
今年,美团技术团队有多篇论文被KDD 2022收录,这些论文涵盖了图谱预训练、选择算法、意图自动发现、效果建模、策略学习、概率预测、奖励框架等多个技术领域。本文精选了7篇论文做简要介绍(附下载链接),希望能对从事相关研究方向的同学有所帮助或启发。
忆往昔
发布于 2024年01月03日
5浏览
美团搜索粗排优化的探索与实践
粗排是工业界搜广推系统的重要模块。美团搜索排序团队在优化粗排效果的探索和实践中,基于业务实际场景,从精排联动和效果性能联合优化两方面优化粗排,提升了粗排的效果。本文介绍了美团搜索粗排的迭代路线、基于知识蒸馏和自动神经网络选择的粗排优化工作,希望为从事相关工作的同学带来一些启发或者帮助。
忆往昔
发布于 2024年01月03日
17浏览
ACM SIGIR 2022 | 美团技术团队精选论文解读
今年美团技术团队有多篇论文被ACM SIGIR 2022收录,这些论文涵盖了观点标签生成、跨域情感分类、对话摘要领域迁移、跨域检索、点击率预估、对话主题分割等多个技术领域。本文将精选10篇论文做简要的介绍(附下载链接),希望能对从事相关研究的同学有所帮助或启发。
忆往昔
发布于 2024年01月03日
8浏览
工程效能CI/CD之流水线引擎的建设实践
经过近3年的建设打磨,美团流水线引擎完成了服务端的基建统一,每日支撑近十万次的流水线执行量,系统成功率保持在99.99%以上。本文主要介绍在自研引擎建设层面遇到的挑战以及解决方案。
忆往昔
发布于 2024年01月03日
大众点评搜索相关性技术探索与实践
搜索相关性用于衡量Query和Doc的相关程度,是搜索引擎的重要环节,本文主要讲述大众点评搜索团队在相关性计算上的技术探索和实践,通过多相似矩阵模型结构、多阶段训练等方法提升预训练模型在相关性问题上的效果,同时解决基于交互的模型在线预测的性能问题,希望为从事相关工作的同学能够带来一些启发或者帮助。
忆往昔
发布于 2024年01月03日
1
41
42
43
44
45
72