- 博客(6)
- 收藏
- 关注
原创 按顺序运行python命令
当我们进行对比实验的时候,需要更换参数跑多个实验,但是我们不能总是等在电脑前面。那么我们就可以选择使用shell命令。创建sh文件写入如下命令,使用`chmod +x name.sh`赋予权限后运行sh文件即可。
2023-10-17 09:09:45
241
原创 HuggingFaceBERT tokenizer.encode笔记
鉴于之前确实没有好好阅读官方文档和论文,对于berttokenizer的截断和填充是用列表进行操作,且是直接补0。其实tokenizer.encode有填补和截断的操作目录encoder参数importencoder参数encode(text: Union[str, List[str], List[int]], text_pair: Union[str, List[str], List[int], NoneType] = None, add_special_tokens: b.
2021-10-22 10:33:05
3043
原创 BERT+textCNN+aclImdb文本情感分析(改)
本次的内容没有大改动,只是可以不用配置torchtext,也不import d2l,那就意味着可以使用任意版本的pyrtoch。相关的环境配置也只需要 pip install transformers就可以了。目录训练网络import相关包导入bert读取数据数据预处理定义网络训练网络模型保存输入文字进行测试模型读取与测试训练网络import相关包import osfrom tqdm import tqdmimport randomi.
2021-10-21 15:36:28
1774
原创 BERT+textCNN+aclImdb文本情感分析
目录环境配置数据集解压huggingfaceBERT下载正式开始import相应的包导入BERT-base读取数据数据预处理网络定义开始训练输入文字进行测试结果代码参考《动手学深度学习》(Pytorch版)10.8节改动词向量部分。文本情感分类:使用卷积神经网络(textCNN)github地址代码中需要用到d2l包中的函数aclImdb数据集地址环境配置对于《动手学深度学习》(Pytorch版)可以使用的环境是,cuda10+pyt.
2021-10-20 15:36:54
1968
原创 关于李沐动手学深度学习(d2l)pytorch环境本地配置
本地安装d2l由于之前试了很多次d2l课本的安装方法失败了,这里提供一种我可以成功安装d2l包的方法。pytorch安装首先安装cuda、cudann、pytroch(gpu版本)。可以参考这篇文章。神经网络学习小记录48——windows下的torch=1.2.0环境配置_Bubbliiiing的学习小课堂-CSDN博客_神经网络学习小记录神经网络学习小记录48——windows下的torch=1.2.0环境配置学习前言环境内容Anaconda安装下载Cudnn和CUDA配置torch环.
2021-09-22 19:27:11
18761
10
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人