近期,火山引擎开发者社区、火山引擎数智平台(VeDI)联合举办《数智化转型背景下的火山引擎大数据技术揭秘》为主题的线下Meeup,活动主要从数据分析、数据治理、研发提效等角度,带领数据领域从业者全面了解数智化转型背景下,火山引擎数据飞轮模式在数据资产建设上的技术与实践。火山引擎ByteHouse产品专家在本次活动中作了《基于ByteHouse引擎的增强型数据导入技术实践》的主题分享,介绍ByteHouse数据导入能力升级情况。
作为企业数字化建设的必备要素,易用的数据引擎能帮助企业提升数据使用效率,更好提升数据应用价值,夯实数字化建设基础。数据导入是衡量OLAP引擎性能及易用性的重要标准之一,高效的数据导入能力能够加速数据实时处理和分析的效率。作为一款OLAP引擎,火山引擎云原生数据仓库ByteHouse源于开源ClickHouse,在字节跳动内部多年打磨下,提供更丰富的能力和更强性能,能为用户带来极速分析体验,支撑实时数据分析和海量离线数据分析,具备便捷的弹性扩缩容能力,极致的分析性能和丰富的企业级特性。
随着ByteHouse内外部用户规模不断扩大, 越来越多用户对数据导入提出更高的要求,这也为ByteHouse的数据导入能力带来了更大的挑战。
从字节跳动内部来看,ByteHouse主要以Kafka为实时导入的主要数据源。对于大部分内部用户而言,其数据体量偏大,用户更看重数据导入的性能、服务的稳定性以及导入能力的可扩展性。在数据延时性方面,用户的需求一般为秒级左右。
网友评论