数据库流式处理数据库宕机 了解更多有关数据库流式处理数据库宕机的内容
-
Apache Flink是什么
这篇文章给大家分享的是有关Apache Flink是什么的内容。小编觉得挺实用的,因此分享给大家做个参考,一起跟随小编过来看看吧。Apache Flink是什么?在当代数据量激增的时代,各种业务场景都
2022-05-31 数据 处理 架构 系统 框架 状态 不同 业务 事件 结果 过程 支持 管理 分布式 应用 任务 内存 技术 数据处理 时间 -
Flink数据架构的演变是怎样的
本篇内容主要讲解"Flink数据架构的演变是怎样的",感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习"Flink数据架构的演变是怎样的"吧!01 传统数据基础架
2022-06-01 数据 系统 状态 架构 结果 处理 企业 业务 应用 不同 框架 过程 存储 管理 数据库 时间 事件 实时 技术 用户 -
redis中热key问题的解决方法
这篇文章主要介绍了redis中热key问题的解决方法,具有一定借鉴价值,感兴趣的朋友可以参考下,希望大家阅读完这篇文章之后大有收获,下面让小编带着大家一起了解一下。正文热Key问题上面提到,所谓热ke
2022-05-31 数据 缓存 系统 方法 监控 方案 问题 方式 集群 服务 业务 命令 就是 热点 代码 客户 客户端 篇文章 缺点 处理 -
京东数据库运维自动化体系建设之路
运维自动化来源于工作中的痛点,京东数据库团队面对的是商城成千上万的研发工程师,这种压力推动我们不断变革,然而变革不是一蹴而就,也经历过从手工到脚本化、自动化、平台化、智能化的艰难转变,所以说是需求在驱
2022-06-01 数据 数据库 资源 备份 切换 系统 服务 实例 调度 任务 故障 业务 集群 检测 监控 京东 信息 分析 管理 方式 -
什么是Kafka?
通过Kafka的快速入门 https://www.cnblogs.com/tree1123/p/11150927.html能了解到Kafka的基本部署,使用,但他和其他的消息中间件有什么不同呢?Kaf
2022-06-03 消费 消息 消费者 数据 处理 日志 实时 主题 偏移 应用 多个 版本 系统 顺序 服务器 机制 保证 服务 生产 均衡 -
Hadoop之HDFS读写原理
一、HDFS基本概念HDFS全称是Hadoop Distributed System。HDFS是为以流的方式存取大文件而设计的。适用于几百MB,GB以及TB,并写一次读多次的场合。而对于低延时数据访问
2022-06-03 数据 节点 文件 客户 客户端 副本 错误 时间 存储 大小 模式 机架 过程 时候 系统 检测 移动 一致 代码 信息 -
Hadoop基础概念
一、基本概念与模型1、大数据结构化数据:有严格定义半结构化数据:html、json、xml等,有结构但没有约束的文档非结构化数据:没有元数据,比如说日志类文档搜索引擎:ELK,搜索组件、索引组件组成,
2022-06-03 数据 节点 任务 运行 处理 存储 函数 程序 作业 过程 结构 结果 资源 文件 开发 管理 单词 日志 结构化 搜索 -
hadoop、spark、hive、solr、es与YDB在车辆即席分析上的对比分析
自2012年以来,公安部交通管理局在全国范围内推广了机动车缉查布控系统(简称卡口系统),通过整合共享各地车辆智能监测记录等信息资源,建立了横向联网、纵向贯通的全国机动车缉查布控系统,实现了大范围车辆缉
2022-06-03 数据 系统 车辆 查询 服务 分析 磁盘 索引 支持 性能 存储 时间 机器 排序 检索 统计 方式 方案 多个 规模 -
核心业务“瘦身”进行时!手把手带你搭建海量数据实时处理架构
01 背景在线交易服务平台目的是减轻核心系统计算压力和核心性能负荷压力,通过该平台可以将核心系统的交易数据实时捕获、实时计算加工、计算结果保存于SequoiaDB中。并能实时的为用户提供在线交易查询服
2022-06-01 数据 实时 系统 处理 数据库 节点 服务 日志 架构 分布式 交易 存储 消息 查询 运行 平台 在线 技术 程序 价值 -
日处理数据量超10亿:友信金服基于Flink构建实时用户画像系统的实践
导读:当今生活节奏日益加快,企业面对不断增加的海量信息,其信息筛选和处理效率低下的困扰与日俱增。由于用户营销不够细化,企业 App 中许多不合时宜或不合偏好的消息推送很大程度上影响了用户体验,甚至引发
2022-06-01 数据 用户 处理 存储 实时 画像 方案 标签 流程 算子 系统 节点 业务 生成 方式 服务 状态 数据处理 版本 问题 -
各大主流消息中间件有哪些区别
本篇内容主要讲解"各大主流消息中间件有哪些区别",感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习"各大主流消息中间件有哪些区别"吧!目录前言1. 主流消息中间件
2022-06-03 消息 数据 模式 支持 性能 中间件 架构 节点 主流 集群 特点 系统 分布式 可靠性 队列 服务 消费 方式 存储 选择 -
Kubernetes消息队列的概念有哪些
这篇文章主要介绍"Kubernetes消息队列的概念有哪些"的相关知识,小编通过实际案例向大家展示操作过程,操作方法简单快捷,实用性强,希望这篇"Kubernetes消息队列的概念有哪些"文章能帮助大
2022-06-01 消息 消费 处理 数据 消费者 保证 线程 系统 生产者 支持 生产 时间 问题 顺序 偏移 同步 可靠性 模型 语义 队列 -
java中Kafka如何使用
这篇文章将为大家详细讲解有关java中Kafka如何使用,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。前言官方文档:http://kafka.apache.org/
2022-06-02 消费 消费者 数据 日志 消息 实例 服务 主题 集群 订阅 服务器 保证 生产 内容 多个 生产者 副本 文件 节点 处理 -
kafka的基础原理和作用
这篇文章主要讲解了"kafka的基础原理和作用",文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习"kafka的基础原理和作用"吧!Kafka作为一个分布式的
2022-06-02 消息 消费 消费者 处理 数据 系统 顺序 多个 订阅 服务器 存储 服务 保证 应用 队列 应用程序 程序 集群 传统 偏移 -
携程实时计算平台架构与实践丨DataPipeline
文 | 潘国庆 携程大数据平台实时计算平台负责人本文主要从携程大数据平台概况、架构设计及实现、在实现当中踩坑及填坑的过程、实时计算领域详细的应用场景,以及未来规划五个方面阐述携程实时计算平台架构与实践
2022-06-02 数据 实时 作业 平台 监控 系统 用户 存储 携程 时间 集群 框架 支持 处理 场景 开发 消费 架构 底层 消息 -
HDFS基本概念有哪些
小编给大家分享一下HDFS基本概念有哪些,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!1.1 HDFS的介绍源自于Goog
2022-06-01 数据 文件 存储 信息 处理 节点 移动 服务 系统 电脑 时候 服务器 磁盘 分布式 移动计算 集群 成功 内存 客户 时间 -
Kafka的原理以及分区分配策略
这篇文章主要讲解了"Kafka的原理以及分区分配策略",文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习"Kafka的原理以及分区分配策略"吧!一、简介Apa
2022-06-02 消费 消息 数据 分配 消费者 文件 订阅 生产 主题 保证 副本 多个 生产者 均衡 线程 首领 偏移 策略 情况 片段 -
怎么打造规模大的Kafka集群
这篇文章主要介绍"怎么打造规模大的Kafka集群",在日常操作中,相信很多人在怎么打造规模大的Kafka集群问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答"怎么打造规模大
2022-06-01 区域 集群 偏移 消息 消费 服务 数据 消费者 模式 检查 检查点 故障 两个 架构 生产 规模 复杂 基础 基础设施 灾难 -
数据库中间件详解
导读:本文详细介绍了中间件,主要从数据库拆分过程及挑战、主流数据库中间件设计方案、读写分离核心要点、分库分表核心要点展开说明。1. 数据库拆分过程及挑战互联网当下的数据库拆分过程基本遵循的顺序是:垂直
2022-06-01 数据 数据库 分表 分库 中间件 路由 支持 情况 应用 业务 事务 查询 方案 集群 不同 多个 配置 分布式 节点 信息 -
蚂蚁金服OceanBase挑战TPCC丨TPC-C基准测试之
蚂蚁金服自研数据库 OceanBase 登顶 TPC-C 引起业内广×××楚的展示其中的技术细节,我们特意邀请 OceanBase 核心研发人员对本次测试进行技术解读,共包括六篇:1)TPC-C基准测
2022-06-01 数据 接口 数据库 能力 测试 服务 链路 客户 资源 过程 存储 支持 基准 客户端 性能 类型 路由 线程 结果 代理