transformers模块中的模型推理流式输出 本文将会介绍如何在`transformers`模块中实现模型推理的流式输出。 2024-05-03 深度学习框架 #流式输出 #transformers
NLP(九十五)Text-to-SQL入门 本文将会介绍Text to SQL相关的概念,如何使用大模型SFT实现Text to SQL,最后介绍Text to SQL的应用场景。 2024-05-03 NLP #Text to SQL
NLP(九十四)transformers模块中的DataCollator 本文将会详细介绍HuggingFace开源的`transformers`模块中的DataCollator. 2024-05-03 NLP #transformers
NLP(九十三)使用HuggingFace-TRL微调Qwen1.5-7B模型(SFT) 本文将会介绍如何使用HuggingFace开源的`trl`模块来对阿里的通义千问模型`Qwen1.5-7B`进行微调(SFT),并分享笔者在SFT过程中遇到的坑。 2024-05-03 NLP #大模型 #SFT
使用ElasticSearch实现文本相似性搜索 本文将会介绍如何使用ElastiSearch来部署文本嵌入(Embedding)模型,并实现之前向量数据库中的文本相似性搜索功能。 2024-04-06 数据库 #ElasticSearch #向量数据库 #文本嵌入
使用ElasticSearch进行自然语言处理:以命名实体识别为例 本文将以命名实体识别(NER)任务为例子,来介绍如何在ElasticSearch中进行自然语言处理(NLP)。 2024-04-06 数据库 #NLP #ElasticSearch