服务器 频道
  • 万亿级别数据量的秒级实时分析,小红书OLAP引擎的进化和自研之路

    小红书大数据团队逐步引入了多种OLAP分析引擎以及自建引擎来更好的满足需求。当前Flink+Doris和Flink+Clickhouse(自建版)已成为小红书构建统一实时数据服务的核心技术方案,大大降低了数据链路开发复杂性,提升了高并发极速查询能力。

    陶然 · 2022-09-29 16:08
  • 高性能RPC框架CloudWeGo-Kitex内外统一的开源实践

    日前,字节跳动技术社区 ByteTech 举办的第七期字节跳动技术沙龙圆满落幕,本期沙龙以《字节高性能开源微服务框架:CloudWeGo》为主题。在沙龙中,字节跳动字节跳动基础架构服务框架资深研发工程师杨芮,跟大家分享了《高性能 RPC 框架 Kitex 内外统一的开源实践》,本文根据分享整理而成。

    陶然 · 2022-09-29 14:03
  • 如何从0-1搭建一支数据团队?

    最近国家大力倡导数字化转型的声音高涨,毋庸置疑数据会是企业未来经营发展的一个中枢。企业发展数据需要人和团队,试想如果让你在公司从0-1组建一支数据团队,你会怎么做?

    陶然 · 2022-09-29 10:50
  • 多云容器编排 Karmada-Operator 实践

    Karmada作为开源的云原生多云容器编排项目,吸引了众多企业共同参与项目开发,并运行于生产环境中。同时多云也逐步成为数据中心建设的基础架构,多区域容灾与多活、大规模多集群管理、跨云弹性与迁移等场景推动云原生多云相关技术的快速发展。

    陶然 · 2022-09-29 09:53
  • 一文读懂企业究竟需要什么样的数据架构

    在大数据和数据科学的新时代,企业拥有与业务流程一致的集中式数据架构至关重要,该架构随着业务增长而扩展,并随着技术进步而发展。成功的数据架构可以清楚地了解数据的各个方面,从而使数据科学家能够有效地处理可信赖的数据并解决复杂的业务问题。

    陶然 · 2022-09-28 14:22
  • 大量新老项目接入,服务限流如何排除差异快速落地?

    某一天有一个项目服务突然出现异常,我们定位到的原因是有大量的突发流量进来,那么我们会先采取被动的临时手段去处理当前故障,接着上线Nginx的限流功能进行快速止损,防止二次故障。但是Nginx的限流功能是比较粗糙的,所以我们有一个更好的长期措施,即项目接入限流功能,并实现按维度进行精细化的限流,化被动解决为主动防御、主动治理。

    陶然 · 2022-09-28 11:46
  • 研发视角:一个需求应该怎么拆解与实现?

    研发过程中,开发同学在接到一个需求后,必须要回答两个问题:做什么(WHAT)、怎么做(HOW)。本文就开发与测试在拆解需求时面临的共性问题,结合自己过往的经验,总结的一个实用的方法。本文不讨论技术选型,仅从思考逻辑上总结应该如何拆解与实现一个给定的需求。欢迎讨论。

    陶然 · 2022-09-28 10:38
  • 超聚变与河南电信、郑州地铁签订战略合作协议

    9月27日,2022数字经济峰会暨新基建创新发展大会在河南郑州中原龙子湖学术交流中心盛大启幕。本届大会以“数字新基建、中原新动能”为主题,围绕数字经济发展和新型基础设施建设,集中展示最新成果和重大突破。

    陶然 · 2022-09-28 10:14
  • 英特尔On技术创新峰会:助力开发者解决当前和未来的挑战

    第二届英特尔On技术创新峰会于2022年9月27日在美国加利福尼亚州圣何塞市开幕。在本届峰会上,英特尔向齐聚一堂的软硬件开发者们分享了在构建以开放、选择和信任为原则的生态系统方面的最新进展——从推动开放标准以使“芯片系统”(systems of chips)在硅层面成为可能,到实现高效、可移植的多架构人工智能。

    陶然 · 2022-09-28 10:11
  • 58同城Android App启动优化实践

    每个 App 都有自己特有的业务逻辑和代码实现,有必要针对自身 App 的特点,系统地把细碎的优化方法组织起来,形成一套适合本 App 维护的完整的优化方案体系。本文将主要介绍我们团队在 58同城 App 中进行启动优化的实践。

    陶然 · 2022-09-27 17:13
  • 火山引擎:ClickHouse增强计划之“Upsert”

    相信大家都对大名鼎鼎的ClickHouse有一定的了解了,它强大的数据分析性能让人印象深刻。但在字节大量生产使用中,发现了ClickHouse依然存在了一定的局限。本篇将详细介绍我们是如何为ClickHouse补全更新删除能力的。

    陶然 · 2022-09-27 14:42
  • 搜索场景下的智能实体推荐

    导读:本次分享题目为搜索场景下的智能实体推荐,主要分为四部分讲解:场景介绍及概览;实体推荐相关性;稀疏数据下的实体召回;多领域多场景下的实体推荐。

    陶然 · 2022-09-27 10:18
  • Redis 持久化策略浅析

    Redis(Remote Dictionary Server ),即远程字典服务,是一个开源的内存高速缓存数据存储服务。使用 ANSI C 语言编写,支持网络、可基于内存亦可持久化的日志型、Key-Value 数据存储,并提供多种语言的 API。

    陶然 · 2022-09-26 14:16
  • 从0到1000万:哔哩哔哩直播架构演进史

    哔哩哔哩直播成立于 2014 年,经过 8 年时间的发展已经从最初的业务试水成长为公司重要的业务板块之一。技术架构也从一个单体服务演进为由数百个微服务组成的复杂系统。本文将回顾 8 年来哔哩哔哩直播架构演进中一步步的变化,带你了解它是如何从 0 开始逐渐成为能够承载千万在线的微服务系统。

    陶然 · 2022-09-26 10:47
  • 2022 秋季 NVIDIA DPU 中国虚拟黑客松开放报名

    继第一届 DPU 中国虚拟黑客松(Hackathon)竞赛在 2022 年 4 月 16 日至 17 日圆满收官之后,NVIDIA 将于 2022 年 10 月 22 日至 23 日发起并主办 2022 秋季 DPU 中国虚拟黑客松竞赛。本次竞赛旨在帮助开发者通过 NVIDIA DOCA 软件框架构建创新的 RDMA 加速存储与 AI 应用程序,基于 NVIDIA BlueField DPU 与 NVIDIA InfiniBand 网络实现存储、AI 卸载、加速和隔离功能,引领新一代人工智能就绪的基础设施,驱动未来 AI 工厂。

    杜思雨 · 2022-09-23 15:34
  • 亿级异构任务调度框架设计与实践

    日志服务平台作为可观测性平台提供了数据导入、数据加工、聚集加工、告警、智能巡检、导出等功能,这些功能在日志服务被称为任务,并且具有大规模的应用,接下来主要介绍下这些任务的调度框架的设计与实践。

    陶然 · 2022-09-23 14:42
  • NVIDIA Hopper全面投产

    近日,NVIDIA正式宣布NVIDIA H100 Tensor Core GPU全面投产,NVIDIA全球技术合作伙伴计划于10月推出首批基于开创性NVIDIA Hopper架构的产品和服务。NVIDIA H100依靠在工艺、加速引擎、机密计算、互联技术、指令集等方面的创新,为现代化基础设施提供了源源不断的动力。

    陶然 · 2022-09-23 10:45
  • CPU 是如何与内存交互的?

    这篇文章主要整理了一下计算机中的内存结构,以及 CPU 是如何读写内存中的数据的,如何维护 CPU 缓存中的数据一致性。什么是虚拟内存,以及它存在的必要性。如有不对请多多指教。

    陶然 · 2022-09-23 10:11
  • 基于Doris的知乎DMP系统架构与实践

    本次分享题目为基于Doris的知乎DMP系统架构与实践,由知乎用户理解&数据赋能研发Leader 侯容老师带来经验分享,主要围绕四个方面展开介绍:背景:知乎DMP的业务背景、流程、特征及功能介绍;架构与实现:知乎DMP的架构设计和实现;难点及解决方案:知乎DMP平台建设的难点和解决方案;未来展望:知乎DMP平台下一步迭代方向。

    陶然 · 2022-09-22 15:43
  • RTC 弱网对抗之冗余策略

    网络传输链路上存在着许多不稳定的情况,造成所发出去的数据包出现丢包、延时或者抖动。不稳定的原因有很多,两个通讯双方在物理空间上存在距离,传输过程经过很多设备的处理,中途存在线路硬件故障、软件驱动限制、或者链路数据拥塞等情况,都会导致发送出去的数据包在接收端没有办法收到或者延迟收到。

    陶然 · 2022-09-22 10:36