概述 本文基于 pytorch-pretrained-BERT(huggingface)版本的复现,探究如下几个问题: pytorch-pretrained-BERT的基本框架和使用 如何利用BERT将句子转为词向量 如…
标签:pytorch
conda install pytorch 安装缓慢的解决办法
2019/08/11更新 根据评论,清华镜像已恢复,请移步至清华 conda 镜像使用方法。 在国内镜像停止支持 conda 后,安装速度巨慢,尤其是安装 pytorch时,简直蛋痛。 在折腾了一晚上后,摸索出一可行的解…
一文弄懂Pytorch的DataLoader, DataSet, Sampler之间的关系
以下内容都是针对Pytorch 1.0-1.1介绍。 很多文章都是从Dataset等对象自下往上进行介绍,但是对于初学者而言,其实这并不好理解,因为有的时候会不自觉地陷入到一些细枝末节中去,而不能把握重点,所以本文将会 …
Pytorch 安装 APEX 疑难杂症解决方案
$ git clone https://github.com/NVIDIA/apex $ cd apex $ pip install -v --no-cache-dir --global-option="--pyprof…
中文文本分类 pytorch实现
前言 使用pytorch实现了TextCNN,TextRNN,FastText,TextRCNN,BiLSTM_Attention,DPCNN,Transformer。github:Chinese-Text-Classi…
❖PyTorch torch.optim
torch.optim torch.optim是一个实施各种优化算法的包。已经支持了大多数常见优化方法,并且这些接口足够通用,以便于以后能够非常容易的集成更复杂的优化算法。 =======================…
pytorch模型部署在生产环境
pytorch框架不像TF那样有tensorflow service 来进行工业环境的部署,相对工业部署比较复杂,但是自己习惯了使用pytorch,最近需要研究一下,pytorch工业环境的部署,这种该如何操作呢? 很多…
PyTorch 学习笔记(七):PyTorch的十个优化器
本文截取自《PyTorch 模型训练实用教程》,获取全文pdf请点击: tensor-yu/PyTorch_Tutorial github.com PyTorch提供了十种优化器,在这里就看看都有哪些优化器。 1 to…
安装TensorFlow、 Pytorch教程
安装TensorFlow、 Pytorch教程:以 Windows系统为例 这是一个简单教程,无需手动配置CUDA,为入门而写,如要使用高级指令集AVX2,SSE…或安装最新版TensorFlow 可以选择源…
Pytorch笔记01-Variable和Function(自动梯度计算)
0. 本章内容 pytorch的自动梯度计算是基于其中的Variable类和Function类构建计算图,在本章中将介绍如何生成计算图,以及pytorch是如何进行反向传播求梯度的,主要内容如下: pytorch如何构建…
GCN的简单实现(pytorch)
import torch import torch.nn as nn import torch.nn.functional as F import networkx as nx def normalize(A , sym…
【pytorch】模型的搭建保存加载
使用pytorch进行网络模型的搭建、保存与加载,是非常快速、方便的、妙不可言的。 搭建ConvNet 所有的网络都要继承torch.nn.Module,然后在构造函数中使用torch.nn中的提供的接口定义layer的…