腾讯开源项目「应龙」成Apache顶级项目：前身长期服务微信支付，能hold住百万亿级数据流处理
一站式大数据集成框架
允中 发自 凹非寺
量子位 | 公众号 QbitAI
最新消息，由腾讯捐献的一站式大数据集成框架Apache InLong，已从Apache孵化器毕业成为社区顶级项目。
这一消息由全球最大开源软件基金会Apache软件基金会宣布。Apache InLong也成为Apache社区首个一站式大数据集成顶级项目。
该项目可以为大数据开发者提供百万亿级数据流高性能处理能力，以及千亿级数据流高可靠服务。
腾讯副总裁蒋杰表示：
我们很高兴看到InLong践行Apache Way，并以顶级项目的身份从Apache孵化器毕业。
腾讯致力于构建开源生态系统，让全球开发者能够平等便捷地利用开源代码。作为腾讯最成功的开源项目之一，InLong广泛应用于腾讯内部海量业务以及外部的金融、政府等关键业务。未来，腾讯将持续为社区贡献我们的力量，携手全球开发者共同构建繁荣的大数据生态系统。
值得一提的是，Apache项目想要“毕业”，都需经过Apache软件基金会的严格筛选，并经由孵化器孵化，满足一系列质量要求。
从孵化器里毕业的顶级项目，表明该项目的社区和产品已根据ASF的精英流程和原则得到良好管理。
何为应龙：前身长期服务于微信支付
InLong的中文名为应龙，是中国神话中引流入海的神兽。
顾名思义，InLong在大数据社区生态负责的便是大数据接入集成。
InLong以腾讯内部使用的TDBank为基础，依托万亿级的数据摄取和处理能力，将数据采集、聚合、存储、排序数据处理的全流程整合在一起。
除了可以提供自动、安全、可靠和高性能的数据传输能力，还支持基于流式的数据分析、建模和应用，帮助企业简化数据处理的过程。
举个例子，InLong作为一个基于SaaS的服务平台，用户可以选择主题的数据发布和订阅，来简单快速地报告、传输和分发数据，使用门槛大大降低。
同时InLong可以为100万亿级数据流提供高性能处理能力，为1000亿级数据流提供高可靠服务，保障用户享受到稳定可靠的在线服务。
InLong还支持多种数据访问方式，包括不同类型的消息队列服务集成和实时数据提取、转换、加载以及基于规则的排序功能。
此外，在服务方面，InLong为用户提供统一的系统监控和告警服务。通过细粒度的指标来促进数据可视化，用户可以在统一的数据度量平台中直接查看队列的运行状态，有利于提高业务的主动性。
实际上，在腾讯内部InLong项目原名TubeMQ，主要专注于高性能、低成本的消息队列服务，并长期服务微信支付、腾讯视频、广点通等产品。
为了进一步释放TubeMQ周边的生态能力，腾讯将项目升级为InLong，专注打造一站式海量数据集成框架。
该项目于2019年11月进入 Apache 孵化器，2022 年6月毕业成为顶级项目。
目前， Apache InLong已经发布第12个版本，腾讯大数据 InLong 团队和社区开发者一起，在孵化期间不断更新和完善其功能，比如重构InLong Sort模块、新增数据节点、优化初始化流程等，为社区和企业提供更多元化的开放解决方案。与此同时，InLong正在广泛应用于广告、支付、社交、游戏、人工智能等各个行业领域，为多领域客户提供高效化便捷化服务。
Apache InLong副总裁Charles Zhang表示：
InLong的毕业，标志着一个开放、多元、成熟的开源社区的成功建立。在未来的征程中，项目将继续践行“Apache Way”，通过社区的共同努力，助力更多企业数字化转型。”
NextArch基金会TOC的Mark Shan也表达了祝贺：
恭喜 Apache InLong 作为 ASF TLP 毕业！InLong降低大数据使用门槛，期待InLong为社区和企业提供更多元化的开放解决方案。
腾讯作为国内最早拥抱开源的科技公司之一，截至目前在 Github 上共发布了超过 160 个开源项目，获得了超过40万名开发者的关注和Star，稳居全球开源企业贡献榜前十。
目前，腾讯已经是 Apache 基金会、Linux 基金会、CNCF、开放原子基金会等国际顶级开源基金会的重要成员，并向开源基金会捐赠了Angel、TubeMQ、TKE Stack、TencentOS Tiny 等项目。
在Apache基金会的大数据项目上，腾讯已经为主流的Hadoop、Spark、Flink等项目贡献了大量的特性和patch。
腾讯方面还表示，在内部开源协同和自研上云战略驱动下，腾讯将会通过腾讯云，开放更多的大数据以及AI领域的产品化能力，为更多开发者提供低成本、高性能的开发工具。
— 完 —
- 从骁龙8至尊版，我看到了AI手机的未来 | 智在终端2024-12-17
- o1被曝“心机深”：逃避监督还会撒谎，骗人能力一骑绝尘2024-12-09
- 低成本机器人“皮肤”登上Nature子刊：实现三维力的自解耦，来自法国国家科学研究中心&香港大学2024-11-23
- OpenAI重夺竞技场第一，但这波靠的是4o2024-11-21
相关阅读
爬网页、洗数据、创建海量数据集一条龙！英伟达工程师开源工具库
英伟达工程师小姐姐Chip Huyen，在GitHub上开源了一个名为“lazynlp”的工具库。爬网页、清洗数据、创建数据集都可以搞定。
