如何本地搭建 rag 知识库
进行清洗,去除噪声、重复数据和无效信息。然后进行预处理,如分词、词性标注、命名实体识别等,以便后续的索引和检索。2.2 构建向量数据库文本向量化:使用文本嵌入...问题文本转换为向量,使用的嵌入模型(embedding 模型) 要与构建向量数据库时一致。相似度搜索:在向量数据库中进行相似度搜索,找到与用户查询向量最相似的向量
搜索得分:1.292649