自然语言处理
-
人工智能的新篇章：深入了解大型语言模型(LLM)的应用与前景
项目设计集合（人工智能方向）：助力新人快速实战掌握技能、自主完成项目设计升级，提升自身的硬实力（不仅限NLP、知识图谱、计算机视觉等领域）：汇总有意义的项目设计集合，助力新人快速实…
-
自然语言处理与大数据：文本分析与情感分析的实践
1.背景介绍 自然语言处理(NLP)是人工智能的一个分支，它旨在让计算机理解、生成和处理人类语言。随着大数据时代的到来，大量的文本数据在社交媒体、新闻、博客等各种来源中产生，这为自…
-
transformers库中的.from
前言 在跑Faspect代码时，对transformer系列的预训练模型加载方式比较好奇，因此记录 from transformers import AutoConfig, Fla…
-
【AI广延 | GAN】一文带你了解生成对抗网络
目录 1️⃣什么是生成对抗网络 2️⃣基本原理 3️⃣落地场景 4️⃣发展预测 1️⃣什么是生成对抗网络 近年来，深度学习在很多领域的都取得了突破性进展，但大家似乎发现了这样的一个…
-
如何使用 Hive 进行自然语言处理
1.背景介绍 自然语言处理(NLP，Natural Language Processing)是人工智能领域的一个重要分支，其主要目标是让计算机能够理解、生成和翻译人类语言。自然语言…
-
GPT3.5, InstructGPT和ChatGPT的关系
GPT-3.5 GPT-3.5 系列是一系列模型，从 2021 年第四季度开始就使用文本和代一起进行训练。以下模型属于 GPT-3.5 系列： code-davinci-002 是…
-
使用langchain打造自己的大型语言模型(LLMs)
我们知道Openai的聊天机器人可以回答用户提出的绝大多数问题,它几乎无所不知，无所不能，但是由于有机器人所学习到的是截止到2021年9月以前的知识，所以当用户询问机器人关于202…
-
数据分析之jieba分词使用详解
在所有人类语言中，一句话、一段文本、一篇文章都是有一个个的词组成的。词是包含独立意义的最小文本单元，将长文本拆分成单个独立的词汇的过程叫做分词。分词之后，文本原本的语义将被拆分到在…
-
一文读懂“大语言模型”
1、背景 本文基于谷歌云的官方视频：《Introduction to Large Language Models》 ，使用 ChatGPT4 整理而成，希望对大家入门大语言模型有帮…
-
elasticsearch 内网下如何以离线的方式上传任意的huggingFace上的NLP模型（国内避坑指南）
es自2020年的8.x版本以来，就提供了机器学习的能力。我们可以使用es官方提供的工具eland，将hugging face上的NLP模型，上传到es集群中。利用…
-
Word2Vec模型——将文本转换成向量的方法
在美赛的时候，用了一下这个模型，发一下。 Word2Vec是一种用于将文本转换为向量表示的技术。它是Google在2013年开发的一种工具，主要用于…
-
语言模型在人工智能能源领域的应用
1.背景介绍 1. 背景介绍 人工智能(AI)能源领域的应用正在逐渐成为一个热门话题。随着计算能力的不断提高和数据的不断积累，人工智能技术已经开始应用于能源领域，为我们的生活带来了…
-
【Tensorflow+自然语言处理+LSTM】搭建智能聊天客服机器人实战（附源码、数据集和演示 超详细）
需要源码和数据集请点赞关注收藏后评论区留言私信~~~ 一、自然语言处理与智能 自然语言处理技术是智能客服应用的基础，在自然语言处理过程中，首先需要进行分词处理，这个过程通常基于统计…
-
Meta最新模型LLaMA细节与代码详解
Meta最新模型LLaMA细节与代码详解 0. 简介 1. 项目环境依赖 2. 模型细节 2.1 RMS Pre-Norm 2.2 SwiGLU激活函数 2.3 RoPE旋转位置编…
-
BERT详解
什么是BERT BERT是一种预训练语言模型（pre-trained language model, PLM），其全称是Bidirectional Encoder Represen…
