niftyadmin后台模板
pytorch正向传播没问题，loss.backward()使定义的神经网络中权重参数变为nan
记录一个非常坑爹的bug:loss回传导致神经网络中一个linear层的权重参数变为nan 1.首先loss值是正常数值； 2.查了好多网上的解决办法：检查原始输入神经网络数据有没有nan值，初始化权重参数，使用relu激活函数，梯度裁剪&a…
动态规划---完全平方数
题目：
给你一个整数 n ，返回 和为 n 的完全平方数的最少数量 。
完全平方数 是一个整数，其值等于另一个整数的平方；换句话说，其值等于一个整数自乘的积。例如，1、4、9 和 16 都是完全平方数，而…
（javaweb）mysql---DDL
一.数据模型，数据库操作 1.二维表：有行有列 2. 3.客户端连接数据库，发送sql语句给DBMS（数据库管理系统），DBMS创建--以文件夹显示 二.表结构操作--创建 database和schema含义一样。 这样就显示出了之前的内容…
【CTF Web】BUUCTF Upload-Labs-Linux Pass-13 Writeup（文件上传+PHP+文件包含漏洞+JPEG图片马）
Upload-Labs-Linux
1 点击部署靶机。
简介
upload-labs是一个使用php语言编写的，专门收集渗透测试和CTF中遇到的各种上传漏洞的靶场。旨在帮助大家对上传漏洞有一个全面的了解。目前一共20关，每一关都包含着不同上传方式。
注意
1.每一关没有固定的…
从零实现诗词GPT大模型：实现多头自注意力
专栏规划: https://qibin.blog.csdn.net/article/details/137728228
在上一篇文章的最后，我们已经介绍了为什么要使用多头注意力了，本篇文章我们主要来实现多头自注意力，然后综合我们之前实现的FFN和TransformerBlock其实就差不多完成了整个GPT模型的实现了。
在开始实现之…