go 分布式全文搜索引擎 RiotSearch

riot 分布式全文搜索引擎, 采用 Go 语言开发。功能特性：

• 高效索引和搜索（ 1M 条微博 500M 数据 28 秒索引完，1.65 毫秒搜索响应时间，19K 搜索 QPS ）
• 支持中文分词（使用 gse 分词包并发分词，速度 27MB/秒）
• 支持逻辑搜索
• 支持中文转拼音搜索
• 支持计算关键词在文本中的紧邻距离（ token proximity ）
• 支持计算 BM25 相关度
• 支持自定义评分字段和评分规则
• 支持在线添加、删除索引
• 支持多种持久存储
• 支持 heartbeat
• 支持分布式索引和搜索
• 可实现分布式索引和搜索
• 采用对商业应用友好的 Apache License v2 发布

示例代码：

packagemain import( "log" "github.com/go-ego/riot/engine" "github.com/go-ego/riot/types" ) var( //searcheriscoroutinesafe searcher=engine.Engine{} ) funcmain(){ //Initsearcher searcher.Init(types.EngineInitOptions{ Using: 5, SegmenterDict:"./dict/dictionary.txt"}) defersearcher.Close() //Addthedocumenttotheindex,docIdstartsat1 searcher.IndexDocument(1,types.DocIndexData{Content:"GoogleIsExperimentingWithVirtualRealityAdvertising"},false) searcher.IndexDocument(2,types.DocIndexData{Content:"GoogleaccidentallypushedBluetoothupdateforHomespeakerearly"},false) searcher.IndexDocument(3,types.DocIndexData{Content:"GoogleistestinganotherSearchresultslayoutwithroundedcards,newcolors,andthe4mysteriouscoloreddotsagain"},false) //Waitfortheindextorefresh searcher.FlushIndex() //Thesearchoutputformatisfoundinthetypes.SearchResponsestructure log.Print(searcher.Search(types.SearchRequest{Text:"googletesting"})) } 

主要改进:

• 增加逻辑搜索
• 增加拼音搜索
• 增加分布式和 heartbeat
• 分词等改进
• 增加更多 api
• 修复 bug
• 删除依赖 cgo 的存储引擎, 增加 badger 和 leveldb 持久化引擎

项目详情:

Github 在线源码： https://github.com/go-ego/riot