博客园
最新
热门
发布
【HarmonyOS NEXT】hdc环境变量配置
鸿蒙
发布于2024年12月30日
272浏览
解决Redis缓存数据类型丢失问题
文章讲述在通用数据开放平台中,新接口开启缓存后报错,经排查是 Redis 缓存数据类型丢失所致。分析发现问题源于 Redis 序列化和反序列化,最终通过自定义序列化器解决,即在写入和读取时处理 Date 类型,同时指出当前判断逻辑有待优化。
发布于2024年12月30日
237浏览
1点赞
StarRocks元数据无法合并BUG原理与解决
StarRocks 集群运行几个月后崩溃,元数据很久未合并,恢复时发现 FE 元数据无法 Checkpoint。排查发现是配置 metadata_journal_skip_bad_journal_ids 导致,相关 bugfix 未合并进出问题版本,升级版本后解决,成功生成新 image 文件,BDB 文件数量大幅减少。
发布于2024年12月30日
319浏览
数据同步方式的变迁
本文深入探讨了博主亲身参与并实践的四代数据同步技术方案。文章不仅追溯了每一代方案的诞生背景,还详尽阐述了它们的设计细节和实施过程。从2020年起步的第一代方案,该方案依托于强大的Spark框架,到最新的第四代方案,该方案采用了先进的CDC(Change Data Capture)技术,每一代方案都在实际应用场景中得到了充分的测试和验证。
发布于2024年12月30日
354浏览
paimon-flink-action同步数据到Paimon
湖仓一体之paimon-flink-action同步数据到Paimon
发布于2024年12月30日
917浏览
Flink CDC+Dinky整库同步到paimon
湖仓一体之Flink CDC+Dinky整库同步到paimon
发布于2024年12月30日
483浏览
如何解决Flink广播流滞后于数据流抵达问题
flink专业问题咨询和解决
发布于2024年12月30日
222浏览
htmlContent和markdownContent字段合并
sadsadshtmlContent和markdownContent字段合并htmlContent和markdownContent字段合并htmlContent和markdownContent字段合并
梦想家-test
发布于2024年12月27日
108浏览
dolphinscheduler分布式集群部署指南(小白版)
dolphinscheduler-3.2.2-release版本源码系列之RPC框架专栏,帮助大家深入了解和更好的使用Dolphinscheduler整合现有业务开发。
发布于2024年12月27日
879浏览
dolphinscheduler集群服务一键安装启动实现流程剖析
dolphinscheduler-3.2.2-release版本源码系列,帮助大家深入了解和更好的使用Dolphinscheduler整合现有业务开发。
发布于2024年12月27日
305浏览
dolphinscheduler服务RPC框架源码解析(一)RPC框架整体设计
dolphinscheduler-3.2.2-release版本源码系列之RPC框架专栏,帮助大家深入了解和更好的使用Dolphinscheduler整合现有业务开发。
发布于2024年12月27日
349浏览
ddd
dddd
梦想家-test
发布于2024年12月26日
16浏览
美国陆军统一数据参考架构
美国陆军当前的数据架构过于复杂,严重阻碍了该军种的决策优势。为应对这一挑战,美国陆军于2024年3月22日正式发布了《美国陆军统一数据参考架构》1.0版本,旨在简化数据架构,精简数据产品,促进其与任务伙伴共享数据产品。该文件所定义的统一数据参考架构,为数据网格原则的系统级实施提供了指导,将使美国陆军的数据治理更高效、更有效,同时促进美国陆军采办“以数据为中心”的能力,提高美国陆军作为联盟、联合作战
不菜的鸟
发布于2024年12月24日
298浏览
AI Agent智能体产品的5个级别
OpenAI发布了其根据自身技术研发与产品开发的通往AGI的五级量表。OpenAI 将 AI 开发分为五个阶段,每个阶段代表更高级的能力水平
不菜的鸟
发布于2024年12月24日
777浏览
flink cdc pipeline+Dinky完成多库多表的同步
本公众号面向广大数据科学家、工程师、产品经理以及对大数据感兴趣的各界人士,旨在搭建一个交流学习的平台,共同探索数据驱动的美好未来。 通过关注“大数据启示录”,您将获得: 最新资讯:紧跟大数据领域最新动态和技术进展。 深度文章:深入剖析复杂问题,提供有价值的参考意见。 社区互动:参与线上线下活动,结识志同道合的朋友。 欢迎订阅“大数据启示录”,让我们一起开启数据之旅!
发布于2024年12月24日
820浏览
2点赞
64e66
4444
巨人肩膀小编
发布于2024年12月21日
9浏览
testtest
testtesttest
巨人肩膀小编
发布于2024年12月21日
17浏览
Flink八种分区算子
Flink是一个流处理框架,一个Flink-Job由多个Task/算子构成,逻辑层面构成一个链条,同时Flink支持并行操作,每一个并行度可以理解为一个数据管道称之为SubTask。
忆往昔
发布于2024年12月20日
262浏览
新建文档1ddd
adwd
梦想家-test
发布于2024年12月20日
28浏览
深入解析 StarRocks 物化视图:全方位的查询改写机制
本文将重点介绍如何利用物化视图进行查询改写。文章将全面介绍物化视图的基本原理、关键特性、应用案例、使用场景、代码细节以及主流大数据产品的物化视图改写能力对比。
百度技术
发布于2024年12月19日
256浏览
1
37
38
39
40
41
93