京东到家Loki日志系统实践

大卫 发表了文章 • 0 个评论 • 978 次浏览 • 2021-09-17 21:36 • 来自相关话题


背景

随着业务的高速发展,目前基于ELK架构的日志系统无法满足京东到家的日志存储和查询需求。这是因为ELK架构中要用全文索引来支撑搜索服务,需要为日志的原文建立反向索引,这会导致最终存储数据相较原始内容成倍增长,产生较高的存储成本。不管数据将来是否会...
查看更多

雪花算法,什么情况下发生 ID 冲突?

老马 发表了文章 • 0 个评论 • 1003 次浏览 • 2021-09-17 19:23 • 来自相关话题


分布式系统中,有一些需要使用全局唯一 ID 的场景,这种时候为了防止 ID 冲突可以使用 36 位的 UUID,但是 UUID 有一些缺点,首先它相对比较长,另外 UUID 一般是无序的。

有些时候我们希望能使用一种简单些的 ID,并且希望 ID 能够按...
查看更多

topic - top in container, 容器版本的top

silenceshell 发表了文章 • 0 个评论 • 1627 次浏览 • 2021-09-16 10:01 • 来自相关话题


推荐一个容器中查看系统信息的工具topic

容器通过cgroups和namespace实现了资源的轻量级隔离和限制,但容器中的/proc文件实际上是宿主机的,因此在执行top...
查看更多

谷歌工程师是怎么写工程设计文档的?

玻璃樽 发表了文章 • 0 个评论 • 1767 次浏览 • 2021-09-15 21:52 • 来自相关话题


【编者的话】一份好的设计文档需要提供清晰的问题描述、整体的概要设计、涵盖各个细节的详细设计等。这篇有趣的小短文通过一个简单的小例子介绍了谷歌工程师是怎么写设计文档的。原文:https://luanjunyi.medium.com/how-do-i-write-...
查看更多

事务消息大揭秘!RocketMQ、Kafka、Pulsar全方位对比

aoxiang 发表了文章 • 0 个评论 • 1780 次浏览 • 2021-09-15 21:02 • 来自相关话题


事务是一个程序执行单元,里面的所有操作要么全部执行成功,要么全部执行失败。RocketMQ、Kafka和Pulsar都是当今业界应用十分广泛的开源消息队列(MQ)组件,笔者在工作中遇到关于MQ选型相关的内容,了解到关于“事务消息”这个概念在不同的MQ组件里有不...
查看更多

算法技术实践沙龙

李颖杰 发表了文章 • 0 个评论 • 1795 次浏览 • 2021-09-15 18:22 • 来自相关话题


随着智能算法的应用日渐深入,内容推荐、语音助手等形式已融入现代生活方式,不断提升效率,推动我们朝智能时代发展。

9 月 25 日火山引擎开发者社区 Meetup 第五期将联合 OPPO 的资深算法工程师,为大家介绍智能语音、机器翻译、自然语...
查看更多

Envoy 代理开源五周年,创始人 Matt Klein 亲述开源心路历程及经验教训

翔宇 发表了文章 • 0 个评论 • 1834 次浏览 • 2021-09-15 16:24 • 来自相关话题


【编者的话】本文译自 Envoy 代理的创始人 Matt Klein 在个人博客上发布的文章《5 year of Envoy OSS》。他在 T...
查看更多

如何高效掌控 Kubernetes 资源变化?Kubernetes Informer 实现机制浅析

Andy_Lee 发表了文章 • 0 个评论 • 1961 次浏览 • 2021-09-15 11:56 • 来自相关话题


概述

进入 Kubernetes 的世界,会发现有很多的 Controller,它们都是为了完成某类资源(如 Pod 是通过 DeploymentController,ReplicaSetController 进行管理)的调谐,目标是**保持用户...
查看更多

云原生应用发布组件 Triton 开源之旅

阿娇 发表了文章 • 0 个评论 • 2303 次浏览 • 2021-09-14 20:15 • 来自相关话题


Triton 概述

伴随着云原生技术在越来越多的企业落地,如今的 Kubernetes 和容器已经完全进入主流市场,成为云计算的新界面,帮助企业充分享受云原生的优势,加速应用迭代创新效率,降低开发运维成本。但在向着云原生架构转型的过程中,也有许多问题...
查看更多

记一次Kubernetes集群被入侵,服务器变矿机

guoaaaad 发表了文章 • 0 个评论 • 2403 次浏览 • 2021-09-14 14:52 • 来自相关话题


近期遇到了一次我们自建Kubernetes集群中某台机器被入侵挖矿的情况,后续也找到了原因,所幸只是用来挖矿……

网络安全是个严肃的问题,它总是在不经意间出现,等你反应过来却已经迟了。希望各位读者看完后也有所启发,去检查及加固自己的集群。

入侵现...

查看更多