Pulsar 社区周报|2021-03-01~2021-03-07

97 阅读4分钟

Pulsar 周报由 StreamNative 翻译整理。 原文内容来自 StreamNative 官网 Pulsar 周报模块 streamnative.io/weekly。
本期编辑:Tango, StreamNative。

关于 Apache Pulsar

Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具有强一致性、高吞吐、低延时及高可扩展性等流数据存储特性。 GitHub 地址:github.com/apache/puls…

导语

各位小伙伴们,Pulsar 社区周报更新来啦!

本次 Pulsar 社区周报,为大家呈现 Pulsar client、broker、Functions、transactions,、authentication 等内容,帮助社区小伙伴们掌握 Pulsar 项目及社区每周进展,也方便大家更好地参与到 Pulsar 社区中来!

感谢本周以下小伙伴为 Apache Pulsar 添砖加瓦(排名不分先后,看看你有没有上榜):

mauza、xiaotongwang1、eolivelli 、limingnihao 、rdhabalia、linlinnn、 aahmed-se、 murong00、Anonymitaet、315157973、MarvinCai、congbobo184、merlimat、lhotari、codelipenghui、BewareMyPower、fanjeff、patricklucas、golden-yang

接下来,一起看看 3 月 1 ~ 7 日有哪些值得你关注的进展吧!

本周亮点

broker:允许启用或禁用 cursor 指标。
github.com/apache/puls…
贡献者:@linlinnn

Transactions:在待处理的 ack 操作上新增 最低偏移量(low watermark)的处理。
github.com/apache/puls…
贡献者:@congbobo184

重要特性

  • 因为 PR 较多,仅列举较大 PR 进展,不包括当周全部动态
  • 下面 PR 均已合入 Pulsar 主分支

Common:优化 ConcurrentOpenHashMap,缩短读锁死的持续时间。
github.com/apache/puls…
贡献者:@merlimat

Utils:转储 pulsar-perf 的 JVM 信息。
github.com/apache/puls…
贡献者:@eolivelli

Broker:支持获取应用的 BlacklogQuota
github.com/apache/puls…
贡献者:@315157973

Broker:支持获取应用的 SubscriptionDispatchRate
github.com/apache/puls…
贡献者:@315157973

CI:在重试或继续执行下一测试之前,清除测试失败的状态。
github.com/apache/puls…
贡献者:@lhotari

C++ client:从 C++ 库中删除 gtest 文件。
github.com/apache/puls…
贡献者:@zymap

CI:添加 apache-rat check-in CI 测试。
github.com/apache/puls…
贡献者:@zymap

Build:从 Pulsar docker 镜像中删除 .deb包。
github.com/apache/puls…
贡献者:@merlimat

Build:将 pulsar-io-kafka-connect-adaptor 拆分为 JAR 和 NAR 模块。
github.com/apache/puls…
贡献者:@merlimat

Broker:将待处理的读订阅指标添加到 stats-internal。
github.com/apache/puls…
贡献者:@rdhabalia

Broker:为 PulsarService#getAdminClient 添加 NPE 检查。
github.com/apache/puls…
贡献者:@BewareMyPower

Build:启用详细的 Java 编译器告警。
github.com/apache/puls…
贡献者:@lhotari

Build:设置项目版本时,更新 terraform 文件中的 Pulsar 版本。
github.com/apache/puls…
贡献者:@zymap

Deployment:更新 Ansible 的部署配置中 Pulsar 的版本至 2.7.0。
github.com/apache/puls…
贡献者:@codelipenghui

CI:将集成测试命令重构为 run_integration_group.sh 脚本。
github.com/apache/puls…
贡献者:@lhotari

CI:使用 DiagnosticCommand JMX MBean 实现线程转储。
github.com/apache/puls…
贡献者:@lhotari

CI:通过仅涵盖选定的 connectors 来减小集成测试镜像的大小。
github.com/apache/puls…
贡献者:@merlimat

Go client:将 JWT-Go 版本更新为 v4。
github.com/apache/puls…
贡献者:@fanjeff

Broker:防止使用无效的 broker 或 proxy configuration 进行授权。
github.com/apache/puls…
贡献者:@lhotari

Broker:将 getWorkerService 方法更改为抛出 UnsupportedOperationException
github.com/apache/puls…
贡献者:@golden-yang

Broker:如果响应已经提交,则不添加 broker-address 标头。
github.com/apache/puls…
贡献者:@lhotari

Broker:验证 /offload 请求的参数。
github.com/apache/puls…
贡献者:@patricklucas

Transaction:对 End transaction 操作进行重试。
github.com/apache/puls…
贡献者:@congbobo184

重要 Bug 修复

  • 因修复内容较多,仅列举较重要修复内容,不包括本周全部动态
  • 下面修复均已合入 Pulsar 主分支

Broker:修复 2.7 分支上 Topic 为空时 hasMessageAvailable() 导致的错误。
github.com/apache/puls…
贡献者:@zymap

Broker:修复 2.7 分支上获取 topic 应用策略时未检查 topic 所有权的问题。
github.com/apache/puls…
贡献者:@315157973

Broker:修复主分支上获取 topic 应用策略时未检查 topic 所有权的问题。
github.com/apache/puls…
贡献者:@315157973

Broker:修复PersistentReplicator 中的 NPE 和线程安全问题。
github.com/apache/puls…
贡献者:@lhotari

Java client:修复 ClientCnx 中的 NPE。
github.com/apache/puls…
贡献者:@lhotari

Broker:修复如果达到最大订阅限制,consumer 无法使用较旧的订阅来消费消息的问题。
github.com/apache/puls…
贡献者:@315157973

Go client:修复 lookup service 中的 socket 泄漏的问题。
github.com/apache/puls…
贡献者:@freeznet

Transactions:修复 transaction 日志的追加同步问题。
github.com/apache/puls…
贡献者:@congbobo184

活动和新闻

博文阅读


作为全球性开源项目,截至 2021 年 3 月 7 日,Apache Pulsar 已拥有 375 名贡献者、7.4K+ Star 、1.9K+ Fork 。正是由于分布在全球各地的社区开发者的贡献,才使得 Apache Pulsar 项目不断发展与前进。

让我们期待下一周的 Apache Pulsar 周报!

如果你也想为 Apache Pulsar 项目出一份力、成为我们的 Contributor,参考下面链接,来加入我们吧:

Apache Pulsar 官方贡献指南