LongChainKBQA
所属分类:人工智能/神经网络/深度学习
开发工具:Python
文件大小:7KB
下载次数:1
上传日期:2023-05-09 10:20:23
上 传 者:
sh-1993
说明: kbqa,语言链,大语言模型, Chat
(kbqa,langchain,large langauge model, chatgpt)
文件列表:
__init__.py (0, 2023-05-09)
chainKBQA.py (3019, 2023-05-09)
config.py (297, 2023-05-09)
document.py (1515, 2023-05-09)
llm.py (1466, 2023-05-09)
resource (0, 2023-05-09)
resource\txt (0, 2023-05-09)
resource\txt\dilireba.txt (1170, 2023-05-09)
resource\txt\yami.txt (1380, 2023-05-09)
utils (0, 2023-05-09)
utils\AliTextSplitter.py (1066, 2023-05-09)
utils\__init__.py (0, 2023-05-09)
# LongChainKBQA
#### 项目技术
+ ChatYuan-large-v2 大语言模型进行基于知识库的问答
+ nlp_bert_document-segmentation_chinese-base 语义分割模型对文本进行拆分
+ text2vec-large-chinese 模型 对文本向量化
+ faiss进行向量检索
+ langchain 进行各个模块的组合,并完成基于知识库的问答
#### 项目结构
+ config.py:配置文件,配置llm模型和文本向量化模型
+ document.py:文本拆分和文本向量化
+ llm.py:大语言模型加载
+ chainKBQA.py:利用文本向量化搜索和大语言模型进行知识库问答
#### 项目使用
+ 运行document.py 主函数对文本进行拆分以及向量化
+ 运行chainKBQA.py 加载文本向量和llm模型进行知识问答
#### 结果如下:
> load llm model
> load documents
>
> 大模型自己回答的结果
>
> 迪丽热巴的作品包括:
> 《三生三世十里桃花》、
> 《三生三世枕上书》、《三生三世枕上书之长生诀》、
> 《三生三世枕上书之长生诀之长生诀之长生诀之长生决》、
> 《三生三世枕上书之长生诀》等。
>
> 大模型+知识库后回答的结果
>
> {
> 'query': '迪丽热巴的作品有什么',
> 'result': '迪丽热巴的作品包括:《阿娜尔罕》、《逆光之恋》、《克拉恋人》、《漂亮的李慧珍》、《三生三世十里桃花》、《金鹰女神》等。',
>
>
> 'source_documents': [Document(page_content='2013年,迪丽热巴因主演个人首部电视剧《阿娜尔罕》而出道 [1] 。
> 2014年,主演奇幻剧《逆光之恋》。
> 2015年,凭借爱情剧《克拉恋人》赢得高人气,并获得国剧盛典最受欢迎新人女演员奖 [168] 。
> 2016年,主演现代剧《麻辣变形计》 [2] ;同年,主演都市爱情励志喜剧《漂亮的李慧珍》,还凭借喜剧片《傲娇与偏见》获得中英电影节最佳新人奖 [3] 。
> 2017年,凭借玄幻剧《三生三世十里桃花》获得白玉兰奖最佳女配角提名 [4] 。2018年,迪丽热巴成为了金鹰电视艺术节的第七位“金鹰女神” [5] ,
> 并获得了第29届中国电视金鹰奖观众喜爱的女演员、第12届中国金鹰电视艺术节最具人气女演员两项殊荣 [6] 。', metadata={'source': 'source/txt/dilireba.txt'})]
> }
近期下载者:
相关文件:
收藏者: