位置: IT常识 - 正文

Pytorch+PyG实现GCN(图卷积网络)(pytorch go)

编辑:rootadmin
Pytorch+PyG实现GCN(图卷积网络) 文章目录前言一、导入相关库二、加载Cora数据集三、定义GCN网络四、定义模型五、模型训练六、模型验证七、结果完整代码前言

推荐整理分享Pytorch+PyG实现GCN(图卷积网络)(pytorch go),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:python gcc,pytorch no_grad,pytorch no_grad,pytorch的gru,pytorch gym,pytorch gym,pytorch vgg,pytorch vgg,内容如对您有帮助,希望把文章链接给更多的朋友!

大家好,我是阿光。

本专栏整理了《图神经网络代码实战》,内包含了不同图神经网络的相关代码实现(PyG以及自实现),理论与实践相结合,如GCN、GAT、GraphSAGE等经典图网络,每一个代码实例都附带有完整的代码。

正在更新中~ ✨

🚨 我的项目环境:

平台:Windows10语言环境:python3.7编译器:PyCharmPyTorch版本:1.11.0PyG版本:2.1.0

💥 项目专栏:【图神经网络代码实战目录】

Pytorch+PyG实现GCN(图卷积网络)(pytorch go)

本文我们将使用Pytorch + Pytorch Geometric来简易实现一个GCN(图卷积网络),让新手可以理解如何PyG来搭建一个简易的图网络实例demo。

一、导入相关库

本项目我们需要结合两个库,一个是Pytorch,因为还需要按照torch的网络搭建模型进行书写,第二个是PyG,因为在torch中并没有关于图网络层的定义,所以需要torch_geometric这个库来定义一些图层。

import torchimport torch.nn.functional as Fimport torch.nn as nnimport torch_geometric.nn as pyg_nnfrom torch_geometric.datasets import Planetoid二、加载Cora数据集

本文使用的数据集是比较经典的Cora数据集,它是一个根据科学论文之间相互引用关系而构建的Graph数据集合,论文分为7类,共2708篇。

Genetic_AlgorithmsNeural_NetworksProbabilistic_MethodsReinforcement_LearningRule_LearningTheory

这个数据集是一个用于图节点分类的任务,数据集中只有一张图,这张图中含有2708个节点,10556条边,每个节点的特征维度为1433。

# 1.加载Cora数据集dataset = Planetoid(root='./data/Cora', name='Cora')三、定义GCN网络

这里我们就不重点介绍GCN网络了,相信大家能够掌握基本原理,本文我们使用的是PyG定义网络层,在PyG中已经定义好了GCNConv这个层,该层采用的就是GCN机制。

对于GCNConv的常用参数:

in_channels:每个样本的输入维度,就是每个节点的特征维度out_channels:经过注意力机制后映射成的新的维度,就是经过GAT后每个节点的维度长度normalize:是否添加自环,并且是否归一化,默认为Trueadd_self_loops:为图添加自环,是否考虑自身节点的信息bias:训练一个偏置b# 2.定义GCNConv网络class GCN(nn.Module): def __init__(self, num_node_features, num_classes): super(GCN, self).__init__() self.conv1 = pyg_nn.GCNConv(num_node_features, 16) self.conv2 = pyg_nn.GCNConv(16, num_classes) def forward(self, data): x, edge_index = data.x, data.edge_index x = self.conv1(x, edge_index) x = F.relu(x) x = F.dropout(x, training=self.training) x = self.conv2(x, edge_index) return F.log_softmax(x, dim=1)

上面网络我们定义了两个GCNConv层,第一层的参数的输入维度就是初始每个节点的特征维度,输出维度是16。

第二个层的输入维度为16,输出维度为分类个数,因为我们需要对每个节点进行分类,最终加上softmax操作。

四、定义模型

下面就是定义了一些模型需要的参数,像学习率、迭代次数这些超参数,然后是模型的定义以及优化器及损失函数的定义,和pytorch定义网络是一样的。

device = torch.device('cuda' if torch.cuda.is_available() else 'cpu') # 设备epochs = 10 # 学习轮数lr = 0.003 # 学习率num_node_features = dataset.num_node_features # 每个节点的特征数num_classes = dataset.num_classes # 每个节点的类别数data = dataset[0].to(device) # Cora的一张图# 3.定义模型model = GCN(num_node_features, num_classes).to(device)optimizer = torch.optim.Adam(model.parameters(), lr=lr) # 优化器loss_function = nn.NLLLoss() # 损失函数五、模型训练

模型训练部分也是和pytorch定义网络一样,因为都是需要经过前向传播、反向传播这些过程,对于损失、精度这些指标可以自己添加。

# 训练模式model.train()for epoch in range(epochs): optimizer.zero_grad() pred = model(data) loss = loss_function(pred[data.train_mask], data.y[data.train_mask]) # 损失 correct_count_train = pred.argmax(axis=1)[data.train_mask].eq(data.y[data.train_mask]).sum().item() # epoch正确分类数目 acc_train = correct_count_train / data.train_mask.sum().item() # epoch训练精度 loss.backward() optimizer.step() if epoch % 20 == 0: print("【EPOCH: 】%s" % str(epoch + 1)) print('训练损失为:{:.4f}'.format(loss.item()), '训练精度为:{:.4f}'.format(acc_train))print('【Finished Training!】')六、模型验证

下面就是模型验证阶段,在训练时我们是只使用了训练集,测试的时候我们使用的是测试集,注意这和传统网络测试不太一样,在图像分类一些经典任务中,我们是把数据集分成了两份,分别是训练集、测试集,但是在Cora这个数据集中并没有这样,它区分训练集还是测试集使用的是掩码机制,就是定义了一个和节点长度相同纬度的数组,该数组的每个位置为True或者False,标记着是否使用该节点的数据进行训练。

# 模型验证model.eval()pred = model(data)# 训练集(使用了掩码)correct_count_train = pred.argmax(axis=1)[data.train_mask].eq(data.y[data.train_mask]).sum().item()acc_train = correct_count_train / data.train_mask.sum().item()loss_train = loss_function(pred[data.train_mask], data.y[data.train_mask]).item()# 测试集correct_count_test = pred.argmax(axis=1)[data.test_mask].eq(data.y[data.test_mask]).sum().item()acc_test = correct_count_test / data.test_mask.sum().item()loss_test = loss_function(pred[data.test_mask], data.y[data.test_mask]).item()print('Train Accuracy: {:.4f}'.format(acc_train), 'Train Loss: {:.4f}'.format(loss_train))print('Test Accuracy: {:.4f}'.format(acc_test), 'Test Loss: {:.4f}'.format(loss_test))七、结果【EPOCH: 】1训练损失为:1.9594 训练精度为:0.1571【EPOCH: 】21训练损失为:1.8681 训练精度为:0.3286【EPOCH: 】41训练损失为:1.7647 训练精度为:0.5000【EPOCH: 】61训练损失为:1.6587 训练精度为:0.5571【EPOCH: 】81训练损失为:1.5258 训练精度为:0.6714【EPOCH: 】101训练损失为:1.4334 训练精度为:0.7143【EPOCH: 】121训练损失为:1.3361 训练精度为:0.7714【EPOCH: 】141训练损失为:1.2310 训练精度为:0.8357【EPOCH: 】161训练损失为:1.1443 训练精度为:0.8571【EPOCH: 】181训练损失为:1.0962 训练精度为:0.8714【Finished Training!】>>>Train Accuracy: 0.9357 Train Loss: 0.9735>>>Test Accuracy: 0.7200 Test Loss: 1.3561训练集测试集Accuracy0.93570.7200Loss0.97351.3561完整代码import torchimport torch.nn.functional as Fimport torch.nn as nnimport torch_geometric.nn as pyg_nnfrom torch_geometric.datasets import Planetoid# 1.加载Cora数据集dataset = Planetoid(root='./data/Cora', name='Cora')# 2.定义GCNConv网络class GCN(nn.Module): def __init__(self, num_node_features, num_classes): super(GCN, self).__init__() self.conv1 = pyg_nn.GCNConv(num_node_features, 16) self.conv2 = pyg_nn.GCNConv(16, num_classes) def forward(self, data): x, edge_index = data.x, data.edge_index x = self.conv1(x, edge_index) x = F.relu(x) x = F.dropout(x, training=self.training) x = self.conv2(x, edge_index) return F.log_softmax(x, dim=1)device = torch.device('cuda' if torch.cuda.is_available() else 'cpu') # 设备epochs = 200 # 学习轮数lr = 0.0003 # 学习率num_node_features = dataset.num_node_features # 每个节点的特征数num_classes = dataset.num_classes # 每个节点的类别数data = dataset[0].to(device) # Cora的一张图# 3.定义模型model = GCN(num_node_features, num_classes).to(device)optimizer = torch.optim.Adam(model.parameters(), lr=lr) # 优化器loss_function = nn.NLLLoss() # 损失函数# 训练模式model.train()for epoch in range(epochs): optimizer.zero_grad() pred = model(data) loss = loss_function(pred[data.train_mask], data.y[data.train_mask]) # 损失 correct_count_train = pred.argmax(axis=1)[data.train_mask].eq(data.y[data.train_mask]).sum().item() # epoch正确分类数目 acc_train = correct_count_train / data.train_mask.sum().item() # epoch训练精度 loss.backward() optimizer.step() if epoch % 20 == 0: print("【EPOCH: 】%s" % str(epoch + 1)) print('训练损失为:{:.4f}'.format(loss.item()), '训练精度为:{:.4f}'.format(acc_train))print('【Finished Training!】')# 模型验证model.eval()pred = model(data)# 训练集(使用了掩码)correct_count_train = pred.argmax(axis=1)[data.train_mask].eq(data.y[data.train_mask]).sum().item()acc_train = correct_count_train / data.train_mask.sum().item()loss_train = loss_function(pred[data.train_mask], data.y[data.train_mask]).item()# 测试集correct_count_test = pred.argmax(axis=1)[data.test_mask].eq(data.y[data.test_mask]).sum().item()acc_test = correct_count_test / data.test_mask.sum().item()loss_test = loss_function(pred[data.test_mask], data.y[data.test_mask]).item()print('Train Accuracy: {:.4f}'.format(acc_train), 'Train Loss: {:.4f}'.format(loss_train))print('Test Accuracy: {:.4f}'.format(acc_test), 'Test Loss: {:.4f}'.format(loss_test))
本文链接地址:https://www.jiuchutong.com/zhishi/297458.html 转载请保留说明!

上一篇:chrome插件开发时跨域问题解决方案(chrome插件开发语言)

下一篇:Nginx静态资源部署(nginx搭建静态资源服务器)

  • 市政道路工程建筑包括什么
  • 其他应收款怎样做平
  • 低值易耗品包括哪些东西和产品
  • 购车发票需要认购吗
  • 所得税不计提直接缴纳,年末一次性计提
  • 房地产开发票的时间
  • 电商平台返佣金税务怎么走
  • 办理外经证后缴税怎么交
  • 临时设施摊销方案怎么写
  • 累计赡养老人专项扣除6000
  • 缴纳土地增值税
  • 个税中的年金是什么意思
  • 固定资产并账
  • 建筑业预征缴纳税款
  • 机动车类专用发票
  • 去年没有交社保,今年交了有用吗
  • 土地增值税的征税对象,是村集体
  • 房地产企业开发成本计入存货
  • 客户不结款怎么办,出结款通知单
  • 加计抵减10%会计分录用营业外收入还是其他业务收入
  • 收入可以用收据入账吗
  • 建筑业进项税额转出
  • 投资性房地产属于流动资产吗
  • 企业微信收款怎么提现
  • 企业职工集资款的认定标准
  • 简易计税劳务分包发票可以差额抵扣吗
  • 车间的制造费用包括哪些
  • 坏账是什么意思
  • 个体户生产经营费用与家庭生活费用无法划分
  • 固定资产未开发票怎么入账
  • 怎样调整以前年度多计的收入
  • VMware虚拟机中怎么复制粘贴
  • windows11激活密钥多少钱
  • 苹果充电宝怎么验真假
  • win10系统的安装
  • php冒泡法排序
  • 房地产公司收到预售款缴纳印花税吗
  • php文件上传后只显示了路径怎么办啊
  • php实现多语言切换
  • 存货盘点会计分录怎么做
  • 新注册企业实收资本没到账怎么处理
  • 全套工商登记资料都有什么
  • 电梯销售公司利润
  • 准则规定的内容是
  • 法人给对公账户转账
  • 自产的货物用于在建工程增值税
  • 认证已过期请重新登录
  • 承兑汇票私人贴息双方都违法吗
  • 查询不到shsh怎么回事
  • 技术服务费怎么收合理
  • 个贷系统平账专户怎么做分录
  • 汇兑记载事项及内容
  • 计提增值税如何计算
  • 保函保证金怎么入账
  • 处置固定资产取得的净收益属于当期的收入
  • 企业间借款利息最新规定
  • 出口退税登记的内容
  • 预交企业所得税计算
  • 实收资本未到账减资要交税吗
  • win mysql
  • Windows Server 2008下利用Diskpart管理磁盘
  • ubuntu git not found
  • linux git教程
  • win10高对比度设置点了没反应
  • centos发送http请求
  • android环境搭建实训心得
  • javascript访问用户cookie
  • 安卓sdk目录下用来存放各种版本sdk的目录是
  • css中的div怎么运用
  • arp欺骗防护软件
  • Unity3D之Vector3.Dot和Vector3.Cross的使用
  • 3种不同的播种方法
  • android:testonly="true"
  • python项目打包发布
  • 如何查询企业是小规模还是一般
  • 为什么非贸易付不了款呢
  • 服务费交哪个税目的印花税
  • 2015年中国出口退税新政策
  • 个人所得税怎么扣除
  • 宾馆如何申请税务发票
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设