LoRA内部原理代码解析(52)
如果我们选择的秩为8,那么我们的层会是这个样子:
torch.manual_seed(11)
r = 8
layer_A = nn.Linear(base_layer.in_features, r, bias=False)
layer_B = nn
如果我们选择的秩为8,那么我们的层会是这个样子:
torch.manual_seed(11)
r = 8
layer_A = nn.Linear(base_layer.in_features, r, bias=False)
layer_B = nn