在群雄逐鹿的 OLAP 数据库市场，开源引擎 ClickHouse 凭借其出色的性能成为公认的黑马。官方称其性能超过了市场上同类的列式数据库，每台服务器每秒可处理数亿到超过十亿行、体积达数十 GB 的数据，运行速度比传统数据库快 100-1000 倍。
高效运行速度的另一面，还隐含着成本、性能、容量等诸多问题，比如不支持事务，不能够保证数据的一致性和完整性，不存在隔离级别，不支持高并发等等。这导致 2016 年开源的 ClickHouse 难以应对当下更加复杂，数据规模更加巨大的场景需求。
比如在字节内部，从 2018 年引入 ClickHouse，因为业务的发展，要服务于大量的用户，数据规模变得越来越巨大。由于 ClickHouse 是 Shared-Nothing 的架构，每个节点是独立的，不会共享存储资源等，因而计算资源和存储资源是紧耦合的。这导致扩缩容成本变高，且会涉及到数据迁移，不能实时按需的扩缩容，从而导致资源的浪费。此外，ClickHouse 的紧耦合的架构会导致多租户在共享集群相互影响，另外由于读写在一个节点完成，导致读写受到影响，最后 ClickHouse 在复杂查询上例如多表 join 等的性能支持并不是很好。
字节 ClickHouse 使用情况
为了解决这些痛点，字节在 ClickHouse 架构基础上进行了升级，于 2020 年在内部启动了 ByConity 项目，并于 2023 年 1 月发布 Beta 版本，将于 5 月底正式对外开源。
ByConity 是一个开源的云原生数据仓库，采用存储 - 计算分离的架构。它支持多个关键功能特性，如存储计算分离、弹性扩缩容、租户资源隔离和数据读写的强一致性等。通过利用主流的 OLAP 引擎优化，如列存储、向量化执行、MPP 执行、查询优化等，ByConity 可以提供优异的读写性能。
ByConity 的架构分为三层，如下图所示，服务接入层包含负责客户端数据和服务的接入，也就是 ByConity Server;计算组为 ByConity 的计算资源层，每个 Virtual Warehouse 是一个计算组;数据存储层由分布式文件系统，如 HDFS、S3 等构成。
ByConity 三层技术架构图
除了兼备 ClickHouse 的一些优点外，ByConity 还实现了了诸多新的功能。
ByConity 的一个重要优势是存储-计算分离的架构，它实现了读写分离和弹性扩缩容。它的优势是高弹性和高扩展性。这种架构确保读操作和写操作不会相互影响，使得计算资源和存储资源解耦，两者可以按需的且独立的扩缩容，确保资源高效利用。此外，ByConity 支持多租户资源隔离功能，保证不同租户之间不会互相影响，使 ByConity 适用于多租户环境，如图 2。
ByConity 存储 - 计算分离，实现多租户隔离
ByConity 支持弹性的扩缩容，能够实时、按需的对计算资源进行扩缩容，保证资源的高效利用。并且它能对不同的租户进行资源的隔离，租户之间不会受到相互影响。其另一个重要功能是数据读写的强一致性，确保数据始终是最新的，读写之间没有不一致。此外，ByConity 采用了主流的 OLAP 引擎优化，例如列存、向量化执行、MPP 执行、查询优化等，来保证提供了优异的读写性能。
之所以采用开源的模式，ByConity 项目组是希望能够把项目回馈给社区，同时也希望通过社区的力量加强和完善 ByConity。接下来，ByConity 在 2023 开源社区发展规划中，希望增强 ByConity 的功能、性能和易用性，重点关注开发新的存储引擎、支持更多的数据类型和与其他数据管理工具的集成领域。
5 月 28 日，字节跳动分析型数据库负责人陈星将出席 GOTC 2023 “数据与数据库技术” 分论坛，并担任讲师，带来《ByConity: 分析型数据库技术创新与开放之路》主题演讲，详解 ByConity 中的关键技术选择，分享 ByConity 开源与开放背后的故事。
敬请期待!
全球开源技术峰会(Global Open-source Technology Conference)，简称 GOTC，是由开放原子开源基金会、上海浦东软件园、Linux 基金会亚太区和开源中国联合发起的，面向全球开发者的一场盛大开源技术盛宴。
5 月 27 日至 28 日，GOTC 2023 将于上海举办为期 2 天的开源行业盛会。大会将以行业展览、主题发言、专题论坛、开源市集的形式展现，与会者将一起探讨元宇宙、3D 与游戏、eBPF、Web3.0、区块链等热门技术主题，以及开源社区、AIGC、汽车软件、AI 编程、开源教育培训、云原生等热门话题，探讨开源未来，助力开源发展。
GOTC 2023报名通道现已开启，诚邀全球各技术领域开源爱好者共襄盛举!
（免责声明：本网站内容主要来自原创、合作伙伴供稿和第三方自媒体作者投稿，凡在本网站出现的信息，均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性，但不保证有关资料的准确性及可靠性，读者在使用前请进一步核实，并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏，概不负任何法律责任。
任何单位或个人认为本网站中的网页或链接内容可能涉嫌侵犯其知识产权或存在不实内容时，应及时向本网站提出书面权利通知或不实情况说明，并提供身份证明、权属证明及详细侵权或不实情况证明。本网站在收到上述法律文件后，将会依法尽快联系相关文章源头核实，沟通删除相关内容或断开相关链接。 ）
