1000 万中文数据去匹配 4000 个关键字的问题

This topic created in 1709 days ago, the information mentioned may be changed or developed.

如果 1000 万里的一条数据命中任意一个关键字则触发一段逻辑

要求性能跟效率足够好，大家有什么经验之谈吗？

3 replies • 2022-02-19 04:12:06 +08:00

flysp

Feb 18, 2022

敏感词屏蔽的方案就够了，4000 个关键字建立一棵搜索树；再用数据去搜索就🆗

hannibalm

Feb 18, 2022 via Android

数据量不大，4000 关键字做 set ，循环读 1000 万去 set 查找

ooh

Feb 19, 2022

分词字典树