自然语言处理的相关知识有哪些?
2023-08-10 阅读 13
自然语言处理涉及的知识很多,大体包括语言学基础(形态学、句法、语义、语用)、核心任务(分词/标注、句法与依存分析、命名实体识别、共指消解、情感分析、文本分类、摘要、机器翻译、问答与对话系统等)、表示方法(词向量、上下文化表示如BERT/Transformer)、模型与架构(传统统计与机器学习、神经网络、RNN/LSTM、Transformer及其变体)、学习范式(有监督、无监督、半监督、迁移学习、预训练+微调)、评价指标与资源(准确率/F1、BLEU、ROUGE、各类语料库与标注集、预训练模型),以及工程实践(数据清洗与标注、部署、性能优化)和伦理问题(偏见、隐私保护)。这些点可以作为学习或梳理的目录。
更新于 2025年12月23日