基础NLP | 常用工具
编辑器
- Pycharm
- VSCode
- Spyder
- Python 自带 ide
- Vim
机器学习相关python框架
- Pytorch 学术界宠儿,调试方便,目前的主流
- Tensorflow 大名鼎鼎,工程配套完善
- Keras 高级封装,简单好用,现已和Tensorflow合体
- Gensim 训练词向量常用
- Sklearn 大量机器学习算法,如逻辑回归,决策树,支持向量机,随机森林,KMeans等等,同时具有数据集划分和各种评价指标的实现
- Numpy 各种向量矩阵操作
个人环境
- python 3.12.7
- torch 2.6.0 (最好是支持cuda的版本)
- transformers 4.49.0
- peft 0.15.0
- Scikit-learn 1.5.1
- Numpy 1.26.4
- Pandas 2.2.2