Kafka
-
Presto on Apache Kafka 在 Uber 的大规模应用「建议收藏」
Presto on Apache Kafka 在 Uber 的大规模应用「建议收藏」我们拥有 7000 个每周活跃的用户,他们每天都会进行 50 万次的查询,从 HDFS 中读取 50PB 左右的数据。
-
今天来点猛的!Kafka万亿级消息实战「建议收藏」
今天来点猛的!Kafka万亿级消息实战「建议收藏」本文主要总结当Kafka集群流量达到 万亿级记录/天或者十万亿级记录/天 甚至更高后,我们需要具备哪些能力才能保障集群高可用、高可靠、高性能、高
-
Kafka在美团数据平台的实践[通俗易懂]
Kafka在美团数据平台的实践[通俗易懂]Kafka在美团数据平台承担着统一的数据缓存和分发的角色,随着数据量的增长,集群规模的扩大,Kafka面临的挑战也愈发严峻。前端 | 算法 |
-
大数据采集技术工具及应用场景[通俗易懂]
大数据采集技术工具及应用场景[通俗易懂]大数据采集可以细分为数据抽取、数据清洗、数据集成、数据转换等过程,将分散、零乱、不统一的数据整合到一起,以一种结构化、可分析的形态加载到数据仓库
-
4种Kafka网络中断和网络分区场景分析[通俗易懂]
4种Kafka网络中断和网络分区场景分析[通俗易懂]摘要:本文主要带来4种Kafka网络中断和网络分区场景分析。3个broker分布在3个az,3个zk,单分区3副本。
-
消息中间件架构体系 – Kafka:从“入门”到“进阶”,也不是很难[通俗易懂]
消息中间件架构体系 – Kafka:从“入门”到“进阶”,也不是很难[通俗易懂]它是由 LinkedIn 公司开发,使用 Scala 语言编写,之后成为 Apache 基金会的一个顶级项目。这种数据通常的处理方式是先把各种活
-
kafka概述[通俗易懂]
kafka概述[通俗易懂]1.JMS 规范是什么(1)JMS 的基础 JMS 是什么:JMS 是 Java 提供的是一套技术规范,即 Java 消息服务(Java Mes
-
业务上集成Kafka,你对Kafka在实际场景中有哪些心得[通俗易懂]
业务上集成Kafka,你对Kafka在实际场景中有哪些心得[通俗易懂]本篇打算先给大家入个门,让大家对Kafka有个初步的了解,知道Kafka是做什么的,下面是本篇的目录内容:Kafka背景。
-
Kafka,ActiveMQ,RabbitMQ等消息队列使用的场景介绍「建议收藏」
Kafka,ActiveMQ,RabbitMQ等消息队列使用的场景介绍「建议收藏」与串行的差别是,并行的方式可以提高处理的时间假设三个业务节点每个使用50毫秒钟,不考虑网络等其他开销,则串行方式的时间是150毫秒,并行的时间可
-
消息队列常见的几种使用场景介绍[通俗易懂]
消息队列常见的几种使用场景介绍[通俗易懂]一、简介消息队列中间件是分布式系统中重要的组件,主要解决应用耦合,异步消息,流量削锋等问题。比如ActiveMQ,Rabbit MQ,Rocke
-
5分钟深入了解kafka设计原理「建议收藏」
5分钟深入了解kafka设计原理「建议收藏」kafka的诞生,是为了解决linkedin的数据管道问题,起初linkedin采用了ActiveMQ来进行数据交换,大约是在2010年前后,那
-
一文快速了解Kafka[通俗易懂]
一文快速了解Kafka[通俗易懂]初学Kafka,肯定会被各种概念搞得很头疼,所以整理下Kafka进阶学习必须要了解的概念。这篇博客也作为后续Kafka深入理解的前置信息。
-
Flink Table Store v0.2 应用场景和核心功能「建议收藏」
Flink Table Store v0.2 应用场景和核心功能「建议收藏」我是 Apache Beam / Flink / Iceberg 的 Committer,对底层调度、通信机制、用户模型、SQL 流批计算、存储
-
看这篇就够了!RocketMQ、Kafka、Pulsar事务消息「建议收藏」
看这篇就够了!RocketMQ、Kafka、Pulsar事务消息「建议收藏」消息队列,是指在消息的传输中保存消息的容器或服务,是一种异步的服务间通信方式,适用于无服务器和微服务架构,是分布式系统实现高性能、高可用、可伸缩
-
Apache Kafka:为“无缝系统”提供异步消息支持[通俗易懂]
Apache Kafka:为“无缝系统”提供异步消息支持[通俗易懂]Apache Kafka 是最流行的开源消息代理之一。它已经成为了大数据操作的重要组成部分,你能够在几乎所有的微服务环境中找到它。本文对 Apa
-
Kafka知识点整理[通俗易懂]
Kafka知识点整理[通俗易懂]Kafka的概念Kafka的特点、优缺点Kafka的使用场景Kafka架构Kafka的生产者区域分区策略数据可靠性保证Exactly Onec语
-
2022,大数据Kafka全新学习路线升级
2022,大数据Kafka全新学习路线升级摘要:大海能够带走你的哀愁,就像带走每条河流……周三,一个普通的日子。你孑然一身,但海哥陪你一起过!打怪升级涨姿势,不是节日胜似节日。海哥闭关修