20240419周会纪要

[luky116]

1 Pika core(master & slave)

• Pika 主从复制一些经验教训 #2408 Pika 主从复制一些经验教训

Item	Priority	Issue/Pr	Owner	Description
redis cache 版本升级	P1	Upgrade: using Redis 7 as redis cache	chengbo & lifengtao
		降低Pika Compact碎片化监控频率，提升compact性能		houxinsheng 还在 coding
进程退出时存在资源释放流程不正确	P1	#2286	cjh
支持 tls	P2	#2380 #2378	kolin	Review 月财
pika 主从同步过程需要使用 term 判断是否需要全量同步	P1	#2365	cjh
codis dashboard call 3 times when got pika pool info, such as keep-alive & memory etc	P1	#2354	kolin	Yuecai
主从复制 bug 汇总	P0	#1835	bx	lcy，可以继续改进的在下面回复下
compact old sst files	P1	#2053	dingxiaoshuai
add cuckoo filter for redis cache	P2	#2261	PR pikiwidb/rediscache#6
增加一个管理员命令处理线程	P1	#2399	cjg	coding
353 测试，geohash 抛出异常	P2	#2392
PFADD 命令抛异常	P2	#2390	hanchuang
pika 添加命中率指标	P0	#2423		chenbt: 提交了1个PR，需要审核才能推进
pika 支持 redis restore 指令	P0	pika 支持 redis restore 指令
pika 参数兼容 sentinel	P0	#2427
support unix domain socket for pika	P2	#2450	kolin
Ability to change hash to xxh3, xxhash, aead or murmur etc	P2	#2442	kolin
Support pub/sub in pika when replicated	P2	#2440	kolin
全量同步过程中，db_repl_state 的状态显示为 WaitDBSync，但是 master_link_status 状态为 down	P2	#2428	cjh
info replication 中的 db_repl_state 输出信息组织方式不够友好，建议优化	P2	#2514	cjh
主从复制老主降备手动 slaveof 的过程中会出现判断 sent_offset == acked_offset 的逻辑，当出现不相等的时候，会导致主从 slaveof ERROR 的情况	P1	#2512	cjh
unstable主干内存泄露	P1	#2537	baitao、shaoyi
Large keys are not stored in cache	P1	#2557		changshunyu
Improve the RTC process of Read/Write model	P1	#2542		chenbt: doing
mget命令支持多个key查询缓存	P1			思无邪
info all keyspace 的数据要展示到info all中	P1		#2603	XiaoLiang2333

todo：

• 1 存算分离 https://mp.weixin.qq.com/s/dV3A1_OFDXkMpDr-Vs71DQ

2 cluster

Item	Priority	Issue/Pr	Owner	Description
		https://github.com/OpenAtomFoundation/pika/issues/1691，https://github.com/OpenAtomFoundation/pika/issues/2228	xuhaoliang, cjg 指导	big key 熔断，借鉴 xcache
在 codis 中添加 auto spliting	P1	#2564	sunjiajun	chejinge

xcache todo

• 1 大 key 检测；
• 2 auto split：小帅了解下相关功能，分析 floyd 的缺陷
• 3 codis 熔断 Add: big key & top key #1691 大 key 熔断
• 4 codis 限流

3 可观测性

Item	Priority	Issue/Pr	Owner	Description
染色日志

4 工具集

Item	Priority	Issue/Pr	Owner	Description
	P3	基于 ldb 命令做一个工具分析 sst 文件	瑞麟
		Pika 大数据同步工具		相关 bug 改进：https://github.com/OpenAtomFoundation/pika/pull/2306/files
		Pika 集群数据同步迁移工具		Bifrost 面向生产环境的 MySQL,MariaDB,kafka 同步到 Redis,MongoDB,ClickHouse,StarRocks,Doris,Kafka 等服务的异构中间件
Pika hot key 分析		#1691 #2169		todo：hot key
pika 同步大数据工具：同步到 kafka		#2606
pika implements the large key fuse function, which can be configured through config		pika implements the large key fuse function, which can be configured through config
Pika mget HMGET supports querying cache and disk when multiple keys are used		#2612

|

5 云原生

Item	Priority	Issue/Pr	Owner	Description
	马鑫外部推进，集群注册成功，rebalance 还没做，和珊珊交流做一做看 ，车金鸽、吴显荣内部推进	pika-operator on kubeblocks 现状总结及后续任务、思路	马鑫	Kubeblocks 0.8 已经发布：官方支持 component 多副本，在这个版本支持 pika 缩容
feat: pika supports kubeblocks component definition api	P0	#2411	马鑫
353镜像打失败	P0	#2578	mx: 在本地打下 353 镜像

todo:

• 1 chengyu 跟马鑫 学习
• 2 原地扩容磁盘可能有问题，chengyu 跟进
• 3 总的 任务 pika-operator on kubeblocks 现状总结及后续任务、思路 #1906

6 high quality(CI/CD) and high usability

Item	Priority	Issue/Pr	Owner	Description
		WIKI 配置信息能否补充大部分场景下的最优配置
tcl 单测跑不过	P0	#1605
test/unit type/hash 单测问题汇总	P0	#1623	｜｜	#2046, #1605
pika automated stress testing script	P1	#2503
A problem occurs during go integration testing	P1	#2492

7 Pika doc

• 文档建设：中文文档少，英文文档没有；
• 网站建设：wiki 搬到了 website；
• readme 建设
• WIKI 配置信息能否补充大部分场景下的最优配置 #2008

Item	Priority	Issue/Pr	Owner	Description
		build a pika website	ningjie