当前位置：首页 > news >正文

git lfs下载大文件限额

news 来源：原创 2025/7/6 2:55:06

起因是用 model.load_state_dict(torch.load())加载pt权重文件时，出现错误：_pickle.UnpicklingError: invalid load key, ‘v’.
GPT告诉我：你的 pt 文件不是权重文件，而是模型整体保存（或根本不是 PyTorch 文件）。

很懵，因为这个后缀就是pt，根据GPT提供的思路检查文件前面的字符：

with open("ckpt/primedp.middle.pt", "rb") as f:head = f.read(64)print(head)

把输出贴到GPT上面告诉我拿到的根本不是模型文件，而是一个 Git LFS（Large File Storage）占位符文本文件，它只记录了文件的元信息（如 hash 值），并不包含模型数据本身。检查才发现下载的文件大小为1kb。

为什么会这样？因为GitHub 上有些大型 .pt 文件（几百 MB 甚至更大）会被托管到 Git LFS，普通 git clone 或右键“另存为”操作不会下载真实文件，只会下载一个占位符。

那么，如何正确下载 Git LFS 文件？（摩拳擦掌）
1、（windows）下载Git LFS
2、打开cmd

git lfs install
git clone git仓库网址
cd 下载目录
git lfs pull

这将确保你下载到的是完整的模型权重文件，而不是占位符。

然而！新的问题来了，git lfs pull报错batch response: This repository is over its data quota. Account responsible for LFS bandwidth should purchase more data packs to restore access.

表明是GitHub LFS 限流问题，意思是：GitHub 仓库的 LFS 文件流量额度已经用完了！
GitHub 对每个账户的 Git LFS（大文件）下载流量有限制（默认每月 1GB 下载额度）。一旦超过，就会显示这个错误，即使你用 git lfs pull，也下载不了模型权重文件。

一开始以为我的下载额度满了，接下来GPT的回复又惊喜了！！情绪价值拉满！
在这里插入图片描述

相关文章：

git lfs下载大文件限额

起因是用 model.load_state_dict(torch.load())加载pt权重文件时，出现错误：_pickle.UnpicklingError: invalid load key, ‘v’. GPT告诉我：你的 pt 文件不是权重文件，而是模型整体保存（或根本不是 PyTorch 文件&#…...

编程日记 2025/7/6 2:55:06

第4天：Linux开发环境搭建

🧰 第4天：Linux开发环境搭建一、GCC 编译器 📌 1. 什么是 GCC？ GCC（GNU Compiler Collection）是 GNU 工程开发的编译器集合，主要支持 C、C、Fortran 等语言的编译，是 Linux 系统中…...

编程日记 2025/7/6 14:08:39

“在中国，为中国” 英飞凌汽车业务正式发布中国本土化战略

3月28日，以“夯实电动化，推进智能化，实现高质量发展”为主题的2025中国电动汽车百人会论坛在北京举办。众多中外机构与行业上下游嘉宾就全球及中国汽车电动化的发展现状、面临的挑战与机遇，以及在技术创新、市场布局、供应链协同等…...

编程日记 2025/7/6 12:16:52

【AI应用】免费代码仓构建定制版本的ComfyUI应用镜像

免费代码仓构建定制版本的ComfyUI应用镜像 1 创建代码仓1.1 注册登陆1.2 创建代码仓1.5 安装中文语言包1.4 拉取ComfyUI官方代码2 配置参数和预装插件2.1 保留插件和模型的版本控制2.2 克隆插件到代码仓2.2.1 下载插件2.2.2 把插件设置本仓库的子模块管理3 定制Docker镜像3.1 创…...

编程日记 2025/7/6 13:25:55

新市场环境下新能源汽车电流传感技术发展前瞻

新能源革命重构产业格局在全球碳中和战略驱动下，新能源汽车产业正经历结构性变革。国际清洁交通委员会（ICCT）最新报告显示，2023年全球新能源汽车渗透率突破18%，中国市场以42%的市占率持续领跑。这种产业变革正沿着&q…...

编程日记 2025/7/6 12:40:11

ctfhub-RCE

关于管道操作符 windows： 1. “|”：直接执行后面的语句。 2. “||”：如果前面的语句执行失败，则执行后面的语句，前面的语句只能为假才行。 3. “&”：两条命令都执行，如果前面的语句为假则直…...

编程日记 2025/7/6 13:16:35

SSE（Server-Sent Events）技术详解：轻量级实时通信的全能方案

一、实时通信技术演进与SSE定位 1.1 主流实时通信技术对比 #mermaid-svg-1VQcZqAOmMoxosiW {font-family:"trebuchet ms",verdana,arial,sans-serif;font-size:16px;fill:#333;}#mermaid-svg-1VQcZqAOmMoxosiW .error-icon{fill:#552222;}#mermaid-svg-1VQcZqAOmMox…...

编程日记 2025/7/6 7:11:25

QT项目----电子相册(4)

文章目录前言一、右侧区域PicShow1.创建PicShow2.创建PicButton3.效果图qss 4.设置动画QGraphicsOpacityEffectQPropertyAnimation 5.双击左侧图片目录右侧显示图片解决缩放时卡顿的问题二、删除相册实现思路代码实现总结前言提示：这里可以添加本文要记录的大…...

编程日记 2025/7/5 23:21:43

Sentinel源码—9.限流算法的实现对比一

大纲 1.漏桶算法的实现对比 (1)普通思路的漏桶算法实现 (2)节省线程的漏桶算法实现 (3)Sentinel中的漏桶算法实现 (4)Sentinel中的漏桶算法与普通漏桶算法的区别 (5)Sentinel中的漏桶算法存在的问题 2.令牌桶算法的实现对比 (1)普通思路的令牌桶算法实现 (2)节省线程的…...

编程日记 2025/7/6 2:27:25

46. 全排列

题目给定一个不含重复数字的数组 nums ，返回其所有可能的全排列。你可以按任意顺序返回答案。示例 1： 输入：nums [1,2,3] 输出：[[1,2,3],[1,3,2],[2,1,3],[2,3,1],[3,1,2],[3,2,1]]示例 2： 输入&#xff1a…...

编程日记 2025/7/6 12:49:38

UML 顺序图：电子图书馆管理系统的交互之道

目录一、初识 UML 顺序图二、电子图书馆管理系统顺序图解析 （一）借阅流程 （二）归还流程三、顺序图绘画四、顺序图的优势与价值五、总结 UML 顺序图是描绘系统组件交互的有力工具。顺序图直观展示消息传递顺序与对象协…...

编程日记 2025/7/6 13:11:23

前端渲染pdf文件解决方案-pdf.js

目录一、前言二、简介 1、pdf.js介绍 2、插件版本参数三、通过viewer.html实现预览（推荐） 1、介绍 2、部署【1】下载插件包【2】客户端方式【3】服务端方式（待验证） 3、使用方法【1】预览PDF文件【2】外部搜索…...

编程日记 2025/7/6 14:15:41

接口测试和功能测试详解

🍅 点击文末小卡片 ，免费获取软件测试全套资料，资料在手，涨薪更快本文主要分为两个部分： 第一部分：主要从问题出发，引入接口测试的相关内容并与前端测试进行简单对比，总结两者…...

编程日记 2025/7/6 11:47:11

LeetCode热题100--283.移动零--简单

1.题目给定一个数组 nums，编写一个函数将所有 0 移动到数组的末尾，同时保持非零元素的相对顺序。请注意 ，必须在不复制数组的情况下原地对数组进行操作。示例 1: 输入: nums [0,1,0,3,12] 输出: [1,3,12,0,0] 示例 2: 输入: nums [0]…...

编程日记 2025/7/6 13:10:36

CoT 数据集如何让大模型学会「一步一步思考」？

目前，大模型的回答路径基本遵循input-output的方式，在面对复杂任务时表现不佳。反之，人类会遵循一套有条理的思维流程，逐步推理得出正确答案。这种差异促使人们深入思考：如何才能让大模型“智能涌现”，学会…...

编程日记 2025/7/6 13:45:49

量子跃迁：Vue组件安全工程的基因重组与生态免疫（完全体）

总章数字免疫系统的解剖学革命在2024年某国家级数字政务平台的安全审计中，传统前端架构暴露出的信任链断裂问题，导致公民隐私数据以每秒23TB的速度在暗网流通。当我们用PET扫描技术观察现代Web应用的微观结构，发现94.7%的安全威胁源自组件间…...

编程日记 2025/7/6 13:46:34

配置 Nginx 的 HTTPS

证书文件文件名作用来源 example.com.key 服务器的私钥，用于加密和解密数据。本地生成 -----BEGIN RSA PRIVATE KEY----- MIIEowIBAAKCAQEAqp5c... -----END RSA PRIVATE KEY----- example.com.csr 证书签名请求文件，包含公钥和申请者信息&…...

编程日记 2025/7/6 13:57:32

FPGA开发流程初识

FPGA 的开发流程可知，在 FPGA 开发的过程中会产生很多不同功能的文件，为了方便随时查找到对应文件，所以在开始开发设计之前，我们第一个需要考虑的问题是工程内部各种文件的管理。如果不进行文件分类，而是将所有文件…...

编程日记 2025/7/6 11:40:53

c++中的enum变量和 constexpr说明符

author: hjjdebug date: 2025年 04月 23日星期三 13:40:21 CST description: c中的enum变量和 constexpr说明符文章目录 1.Q:enum 类型变量可以有,--操作吗？1.1补充: c/c中enum的另一个细微差别. 2.Q: constexpr 修饰的函数,要求传入的参数必需是常量吗&#xff…...

编程日记 2025/7/6 12:59:37

JVM学习笔记

1、jvm概述 1.1、即时编译为什么java没有c和c快多了一层解释，而即时编译就是将热点数放入内存，下次执行的时候不用解释，提高了效率 1.2、常见的jvm jvm不止一个，意不意外？惊不惊喜？ 1.3、hotspot的发展…...

编程日记 2025/7/6 14:09:31

AtCoder Beginner Contest 402题解

A - CBC 思路：仔细看这题其实就发现，我们只需要遍历一遍字符串把大写字母输出即可，很标准的签到题 #include<bits/stdc.h> using namespace std; #define int long longsigned main() {string s;cin>>s;for(char c:s){if(c>A…...

编程日记 2025/7/6 12:22:18

Rust 语言使用场景分析

1. 引言：Rust 语言概述 Rust 是一门专注于性能、内存安全和并发性的现代系统编程语言。自 2010 年由 Mozilla Research 的 Graydon Hoare 发起，并于 2015 年正式发布以来，Rust 凭借其独特的设计理念和强大的功能集，在技术领域迅速…...

编程日记 2025/7/6 13:24:59

HTTP 请求头的 key 不区分大小写。

详细说明 HTTP 协议规范根据 RFC 7230，HTTP 头字段的名称（即 key）在传输时不区分大小写。例如，Content-Type 和 content-type 被视为相同的字段。实际行为客户端行为：大多数 HTTP 客户端（如浏览器、cur…...

编程日记 2025/7/6 11:10:16

4.RabbitMQ - 延迟消息

RabbitMQ延迟消息文章目录 RabbitMQ延迟消息一、延迟消息介绍二、实现2.1 死信交换机2.2 延迟消息插件2.3 取消超时订单一、延迟消息介绍延迟消息：生产者发送消息时指定一个时间，消费者不会立刻收到消息，而是在指定时间后才收到消息用户…...

编程日记 2025/7/6 14:00:33

C++学习：六个月从基础到就业——STL算法（一）基础与查找算法

C学习：六个月从基础到就业——STL算法（一） 基础与查找算法本文是我C学习之旅系列的第二十五篇技术文章，也是第二阶段"C进阶特性"的第三篇，主要介绍C STL算法库的基础知识与查找类算法。查看完整系列目录了解…...

编程日记 2025/7/6 12:23:17

springboot+vue 支付宝支付（沙箱方式，测试环境使用）

准备工作： 1 支付宝沙箱环境的公钥，私钥配置，查询等使用，如果是用自定义的方式，需要下生成公钥，私钥的工具，否则不需要登录 - 支付宝小程序文档 - 支付宝文档中心 2 本地测试时&…...

编程日记 2025/7/6 13:53:32

安装win11自带linux是报错：WslRegisterDistribution failed with error: 0x800701bcErr

确保系统设置中的“打开win11的子系统”已打钩管理员身份运行cmd，并输入如下然后再重启ubantu...

编程日记 2025/7/6 12:09:13

面试经历（一）雪花算法

uid生成方面 1：为什么用雪花算法分布式ID的唯一性需要保证，同时需要做到 1：单调递增 2：确保安全，一个是要能体现出递增的单号，二一个不能轻易的被恶意爬出订单数量 3：含有时间戳 4&#…...

编程日记 2025/7/6 13:11:21

docker底层原理简述

前言平时用docker很多，今天深入了解下docker原理层面的实现，包括docker核心概念，文件系统，资源隔离，网络通信等参考文章： Docker底层原理（图解秒懂史上最全） - 疯狂创客圈 - 博…...

编程日记 2025/7/6 13:22:54

【6D位姿估计】Foundation Pose复现

主要参考项目仓库README站内其他博文注意事项容器化部署不难，主要是部署docker本身会存在一些环境问题，重点关注访问外网的端口需要手动调整至与魔法相同，可以参考： docker部署在启动容器镜像后，需要注意镜像当前…...

编程日记 2025/7/6 12:45:11

TDengine 数据订阅设计

简介数据订阅作为 TDengine 的一个核心功能，为用户提供了灵活获取所需数据的能力。通过深入了解其内部原理，用户可以更加有效地利用这一功能，满足各种实时数据处理和监控需求。基本概念主题与 Kafka 一样，使用 TDengine 数…...

编程日记 2025/7/6 12:51:17

VMware Fusion Pro 13 Mac版虚拟机安装Win11系统教程

Mac分享吧文章目录 Win11安装完成，软件打开效果一、VMware安装Windows11虚拟机1️⃣：准备镜像2️⃣：创建虚拟机3️⃣：虚拟机设置4️⃣：安装虚拟机5️⃣：解决连不上网问题安装完成！&#xff0…...

编程日记 2025/7/6 2:55:41

高并发下单库存扣减异常？飞算 JavaAI 自动化生成分布式事务解决方案

在电商、旅游等行业业务量激增，高并发下单场景中，传统库存扣减方式弊端尽显。超卖问题因缺乏有效并发控制机制频发，多个订单同时访问库存数据，导致同一商品多次售出，订单无法履约引发客户投诉；同时&#xf…...

编程日记 2025/7/6 13:27:39

crictl 遇到报错 /run/containerd/containerd.sock: connect: permission denied

报错内容 crictl --runtime-endpoint unix:///run/containerd/containerd.sock logs CONTAINERID FATA[0000] validate service connection: validate CRI v1 runtime API for endpoint "unix:///run/containerd/containerd.sock": rpc error: code Unavailable de…...

编程日记 2025/7/6 13:12:18

CSS外边距合并现象

外边距合并（Margin Collapsing）是指在文档流中，两个或多个相邻元素的外边距（margin）会合并为一个外边距，其大小会取其中最大的外边距值当两个相邻的兄弟元素之间没有其他内容（如边框、内边距、…...

编程日记 2025/7/6 11:54:05

《深度神经网络之数据增强、模型保存、模型调用、学习率调整》

文章目录前言一、数据增强1、什么是数据增强？2、数据增强的实现方法（1）几何变换翻转:旋转：平移： （2）颜色变换亮度调整：对比度调整：色彩抖动： （3&…...

编程日记 2025/7/6 13:56:43

【Java学习笔记】random的使用

random使用方法使用说明：返回的是(0<n<1)这个范围中的任意带正号的double值代码实例 public class helloworld{public static void main(String[] args){System.out.println(Math.random());} }生成0-100中的任意数代码示例 public class Main {public …...

编程日记 2025/7/6 12:46:13

Redis的string类型使用

第一步：添加缓存以若依岗位代码为例一：首先从redis中查询岗位信息，如果查询到了则直接返回。二：如果redis中没有数据，则直接从数据库中查询。查询后放到redis并返回 package com.ruoyi.system.service.impl;imp…...

编程日记 2025/7/6 12:29:32

AIGC架构与原理

AIGC（AI Generated Content，人工智能生成内容）的架构与原理 AIGC通过整合数据采集、模型训练、推理服务等模块，结合深度学习与生成对抗网络（GAN）等技术，实现从数据到内容的自动化生成。一、AIG…...

编程日记 2025/7/6 12:25:52

安全复健|windows常见取证工具

写在前面： 此博客仅用于记录个人学习内容，学识浅薄，若有错误观点欢迎评论区指出。欢迎各位前来交流。（部分材料来源网络，若有侵权，立即删除） 取证 01系统运行数据使用工具：Live-F…...

编程日记 2025/7/6 12:54:34

Oracle EBS R12.2 汉化

一、前言在使用oracle ebs时，使用中文会更好的理解整个ebs流程，以下介绍oracle r12中文补丁的方式如果你的系统除了支持英语外，还支持其他语言，比如中文，那你在下载补丁的时候除了下载Generic Platform版本外&#…...

编程日记 2025/7/6 12:42:20

【Java面试笔记：基础】12.Java有几种文件拷贝方式？哪一种最高效？

在 Java 中，文件拷贝可以通过多种方式实现，不同方式的性能和适用场景有所差异。 1. Java 文件拷贝方式传统 IO 方式使用 FileInputStream 和 FileOutputStream，通过循环读取和写入数据实现文件拷贝。示例代码： try (InputStream is = new FileInputStream("sou…...

编程日记 2025/7/6 12:44:12

互联网大厂Java面试：RocketMQ、RabbitMQ与Kafka的深度解析

互联网大厂Java面试：RocketMQ、RabbitMQ与Kafka的深度解析面试场景面试官：马架构，您好！欢迎参加我们的面试。今天我们将围绕消息中间件展开讨论，尤其是RocketMQ、RabbitMQ和Kafka。您有十年的Java研发和架构设计经…...

编程日记 2025/7/6 13:56:44

kali安装切换jdk1.8.0_451java8详细教程

kali安装切换jdk1.8.0_451java8详细教程下载链接： jdk-8u451-linux-i586.tar.gz 链接: https://pan.baidu.com/s/1lpgI0JMfHpZ__RxsF8UoBw?pwdx3z2 提取码: x3z2 解压jdk 首先将下载好的压缩包放在kali虚拟机中，一般是直接拖到桌面然后cd到压缩包…...

编程日记 2025/6/29 9:24:45

众趣科技X世界读书日丨数字孪生技术赋能图书馆空间智慧化运营

4月23日，是第30个“世界读书日”，不仅是庆祝阅读的日子，更是思考知识传播未来的契机。图书馆作为主要传播图书的场所，在科技的发展中，图书馆正面临前所未有的挑战，联合国数据显示，全球近30%的…...

编程日记 2025/6/29 9:24:59

Python内置函数-aiter()

Python内置函数 aiter() 用于获取异步可迭代对象的异步迭代器，是异步编程中的核心工具之一。 1. 基本概念异步可迭代对象：实现了 __aiter__() 和 __anext__() 方法的对象，支持 async for 循环。异步迭代器：通过 aiter() 获取的…...

编程日记 2025/7/5 14:04:25

Java 实现单链表翻转（附详细注释）

1. 引言单链表（Singly Linked List）是一种常见的数据结构，在算法和数据结构的学习中占有重要地位。翻转单链表是一道经典的面试题，本文将介绍几种常见的 Java 实现方法，并详细讲解关键步骤的含义。 2. 单链表定义 …...

编程日记 2025/6/29 11:45:05

基于HPC的气候模拟GPU加速实践全流程解析

基于HPC的气候模拟GPU加速实践全流程解析关键词：气候模型、GPU加速、CUDA编程、性能优化、分布式训练摘要： 本文针对全球气候模拟中10^12级网格点实时计算需求，提出基于CUDA的并行计算架构。通过改进WRF模式的分块矩阵乘法算法&#xff0c…...

编程日记 2025/6/29 9:41:23

【初级】前端开发工程师面试100题（一）

本题库共计包含100题，考察html，css，js，以及react，vue，webpack等基础知识掌握情况。 HTML基础篇说说你对HTML语义化的理解？语义化就是用合适的标签表达合适的内容，比如<header>表示页眉，<nav>表示导航。这样不仅代码更清晰，对SEO也友好，屏幕阅读器也能…...

编程日记 2025/6/29 11:13:46

大模型框架技术演进与全栈实践指南

‌一、大模型框架概述 ‌大模型框架‌是支撑大规模语言模型（LLM）训练、推理和应用开发的核心技术体系，涵盖分布式训练、高效推理、应用编排等全流程。从AlphaGo到GPT-4，大模型框架的进化推动AI从实验室走向工业化落地。据IDC预测…...

编程日记 2025/6/29 12:29:20