B站基于Elastic Stack的日志系统（Billions） 从2017建设以来， 已经服务了超过5年，目前规模超过500台机器，每日写入日志量超过700TB。 ELK体系是业界最常用的日志技术栈，在传输上以结合规范key的JSON作为传输格式，易于多种语言实现和解析，并支持动态结构化字段。存储上ElasticSearch支持全文检索，能够快速从杂乱的日志信息中搜寻到关键字。展示上Kibana具有美观、易用等特性。 随着业务系统的高速发展，日志系统的规模也随之快速扩展，我们遇到了一系列的问题，同时可观测业界随着OpenTelemetry规范的成熟，推动着我们重新考量，迈入下一代日志系统。

111 技术 lddgo 分享于 2022-09-19

最近业务系统生产环境的IDB在执行事务的过程中出现了ERROR 1205 (HY000): Lock wait timeout exceeded; try restarting transaction 异常。通过相关资料的查询和了解，发现出现这个问题的原因是产生了悬挂事务。整个排查的过程也比较困难，因此和大家分享下排查问题的经过。如果文中有错漏的地方，欢迎大家指正。

150 技术 lddgo 分享于 2022-09-19

Lancer是B站的实时流式传输平台，承载全站服务端、客户端的数据上报/采集、传输、集成工作，秒级延迟，作为数仓入口是B站数据平台的生命线。目前每日峰值 5000w/s rps, 3PB/天, 4K+条流的数据同步能力。

146 技术 lddgo 分享于 2022-09-16

B站每天都会接收数十万的视频投稿，在这大量的视频中，有一些稿件会成为热门视频。这些热门视频吸引了大部分用户的关注和播放，同时也会消耗很大部分的带宽资源。因此当作品热度上升之后，B站会对视频进行重新转码，此时会使用更高复杂度的转码系统方案如（画质可控的场景自适应转码系统），在保持画质不变的前提下，更好的去除数据冗余，以提高压缩比，降低码率，避免带宽资源的浪费。为了进一步提升转码系统性能，我们研发了一套视觉无损的深度学习前处理系统。该系统可以在原有场景自适应转码系统的基础上，带来15%左右的码率节省，与此同时，保持画面质量不变。

283 技术 lddgo 分享于 2022-09-16

UC Berkeley认为Serverless架构的出现过程类似于40多年前从汇编语言转向高级语言的过程，在未来Serverless架构的使用会飙升，或许服务器式云计算并不会消失，但是将促进BaaS发展，以更好地为Serverless架构提供支持。

143 技术 lddgo 分享于 2022-09-16

今天跟大家分享的话题是：作为一名企业的技术核心管理者，我们应该规划和思考哪些问题？

242 管理 lddgo 分享于 2022-09-16

本次发布的 Spring Cloud Alibaba 2.2.9.RELEASE 和 2021.0.4.0 两个新版本，分别基于社区 2.2.x 和 2021.x 两个主干分支进行的构建发布，其中 2.2.9.RELEASE 版本通过首次给 Spring Cloud 生态带来了阿里巴巴内部使用多年的异地多活能力，对规模较大的中大型企业构建高可用应用提供了参考解决方案。另外，我们在 2.2.9.RELEASE 和 2021.0.4.0 版本中提供了服务的 IPv6 地址注册与调用能力，可帮助应用实现 IPv4 向 IPv6 的迁移。

138 技术 lddgo 分享于 2022-09-16

目前在云上的容器化应用场景选择存储方案时，通常会使用块存储（EBS），文件存储（NAS，CPFS，DBFS）和对象存储（OSS）三种，POSIX 语义的文件系统是面向容器存储使用场景最直观和最友好的方式，通常也是容器场景下使用最多的存储访问方式。另一方面，为了实现集群级别的存储编排能力，K8s 在维护容器组（Pod）的生命周期中会将依赖的存储卷以文件系统的形式挂载到容器内，从而从应用角度可以无差别地读写块存储、文件存储和对象存储的外置存储。

116 技术 lddgo 分享于 2022-09-16

「人物志」系列文章持续记录蚂蚁集团终端技术人的成长故事，分享他们在成长道路上的宝贵经验与心路历程，期待能够给大家带来一些思考和启示。 祯逸来自蚂蚁集团支付宝体验技术部，在蚂蚁的这些年，经历了从 B 端到 C 端再回到 B 端，从 PC 到无线再到 PC，从前端到服务端再回到前端，拥抱变化的同时，不断地学习、突破自我、迎接新的挑战。本篇中，祯逸分享了他的成长秘籍，技术如何服务好业务？为什么要多写代码？如何保持竞争力？希望能够对大家有所启迪。

300 生活 lddgo 分享于 2022-09-15

你知道有多少用户没等到页面首屏出现就离开了吗？性能不佳会对业务目标产生负面影响。比如， BBC 发现他们的网站加载时间每增加一秒，他们就会失去 10% 的用户。高性能站点比低性能站点更能吸引和留住用户，而留住用户对于提高用户转化率至关重要。 这篇文章就是以此为背景，介绍字节内部是如何衡量站点性能的，如何依靠性能监控定位线上站点性能问题的。

111 技术 lddgo 分享于 2022-09-15