基于SSD的Kafka应用层缓存架构设计与实现
Kafka在美团数据平台的现状Kafka出色的I/O优化以及多处异步化设计,相比其他消息队列系统具有更高的吞吐,同时能够保证不错的延迟,十分适合应用在整个大数据生态中。目前在美团数据平台中,Kafka承担着数据缓冲和分发的角色。如下图所示,业务日志、接入层...
聚合国内IT技术精华文章,分享IT技术精华,帮助IT从业人士成长
Kafka在美团数据平台的现状Kafka出色的I/O优化以及多处异步化设计,相比其他消息队列系统具有更高的吞吐,同时能够保证不错的延迟,十分适合应用在整个大数据生态中。目前在美团数据平台中,Kafka承担着数据缓冲和分发的角色。如下图所示,业务日志、接入层...
1.背景1.1 移动端跨平台技术的介绍移动端的跨平台技术不是一个新话题,早在几年前,WebView容器、React Native、Weex、Flutter、小程序等移动端跨平台框架就风起云涌。为什么跨平台这么有吸引力呢?我们设想一下如果可以做到一次开发,多...
KV 存储作为美团一项重要的在线存储服务,承载了在线服务每天万亿级的请求量。在 2019 年 QCon 全球软件开发大会(上海站)上,美团高级技术专家齐泽斌分享了《美团点评万亿级 KV 存储架构与实践》,本文系演讲内容的整理,主要分为四个部分:第一部分讲述...
好久没有更新这个系列了,因为我之前也说过,前段时间实在太忙了,而且早在一个月前就预示着本月将更加忙!事实也确实如此!终于在国庆前夕完成了既定的计划,心里也终于可以长出一口气了。最近在忙什么呢?其实就是OpenVPN!既然OpenVPN-ng已经不在计划内,...
万字长文:以业务为核心的云原生体系建设 https://mp.weixin.qq.com/s?__biz=MzU0NDEyODkzMQ==&mid=2247500999&idx=1&sn=7a78407b3e80a5e900f...
一,设计多活架构思考 1,异地多活高可用架构设计实践与思考 https://blog.csdn.net/jiankunking/article/details/86654181 2,异地多活设计辣么难?其实是你想多了! https://yq.aliyun....
为什么用VSS VSS是Windows系统的卷影像拷贝服务,用于解决如下问题: ◆ 许多备份工具涉及打开文件 ...
这是上周在数据技术嘉年华上分享的内容:POLARDB产品架构与实现。(文件约5MB,下载比较慢,请耐心等待,点击下载) POLARDB产品架构与实现-周振兴_compressed EOF...
部署图 传统的vss备份架构由于备份应用部署在应用服务器内,因此比较耗应用服务器的CPU和IO,特别是拷贝大量的文件,为了降低对应用服务器的干扰,可采用server-free架构,将耗时的拷贝移到另一机器即...
背景 近年来,互联网上安全事件频发,企业信息安全越来越受到重视,而IDC服务器安全又是纵深防御体系中的重要一环。保障IDC安全,常用的是基于主机型入侵检测系统Host-based Intrusion Detection System,即HIDS。在HIDS...
大型的企业级系统是如何设计的呢?想必大家都曾经有过这样的疑惑。大型软件开发前,我们必须选择一种合适的架构,它既要提供我们想要的功能,质量也要过关。因此,在应用不同的架构之前,我们有必要熟悉一下这些架构。 什么是架构模式? 根据维基百科, 针对软件架构中给定...
H2engine的GitHub星星不知不觉已经破百了,也没有特意推广过,但是慢慢的关注的人越来越多。因为事情多,好久没有写东西了,前一段时间有了一些想法,把h2engine又更新了一下,感觉h2engine又向前迈了一大步。本文记录一下最近的心得体会,以及...