自然语言处理（NLP）入门到实战
4 阅读
预计 3 分钟
NLP是AI最活跃的领域之一。本文从基础到实战全面介绍。
## 文本预处理
```python
import jieba
tokens = jieba.lcut('自然语言处理很有趣')
```
## 文本分类
```python
from sklearn.feature_extraction.text import TfidfVectorizer
from sklearn.linear_model import LogisticRegression
pipeline = Pipeline([
('tfidf', TfidfVectorizer(max_features=10000)),
('clf', LogisticRegression()),
])
```
## HuggingFace Transformers
```python
from transformers import pipeline
classifier = pipeline("sentiment-analysis", model="bert-base-chinese")
result = classifier("这部电影很好看")
```
NLP的发展日新月异，大语言模型正在重新定义这个领域。
0 条评论 欢迎参与讨论