PEFT 微调 - 代码天地

PEFT 微调

移动开发 2023-09-20 20:09:46 阅读次数: 0

NoSuchKey

猜你喜欢

转载自blog.csdn.net/lovechris00/article/details/132888076

PEFT 微调

使用peft的lora，微调MAE

基于peft 微调 LLaMa模型

参数高效微调（PEFT）综述

[NLP]LLM高效微调(PEFT)--LoRA

大模型高效微调-PEFT框架介绍

大语言模型微调和PEFT高效微调

大模型微调：参数高效微调（PEFT）方法总结

LLMs参数高效微调（PEFT） Parameter efficient fine-tuning (PEFT)

[NLP]理解大型语言模型高效微调(PEFT)

Peft库实战（一）：Lora微调bert（文本情感分类）

PEFT概述：最先进的参数高效微调技术

让天下没有难Tuning的大模型-PEFT（参数效率微调）技术简介

Peft库实战（三）：Lora微调mt0/bloom（GPT生成式）

【自然语言处理】大模型高效微调：PEFT 使用案例

如何使用LoRA和PEFT微调 Mistral 7B 模型

手把手写深度学习(21)：用PEFT LoRA微调Stable Diffusion

PEFT: 在低资源硬件上对十亿规模模型进行参数高效微调

一文彻底搞懂大模型参数高效微调（PEFT）

基于Python的自然语言处理系列（48）：参数高效微调（PEFT）

大模型的实践应用10-大模型领域知识与参数高效微调(PEFT)技术的详解，并利用PEFT训练自己的大模型

大模型-微调技术：DeltaTuning【提出现有PEFT的统一框架；从优化角度解释PEFT的有效性；进行了超大规模的实验】【参数高效微调统一框架】

Peft库实战（二）：Lora微调mt5-xxl【Seq2Seq：翻译、自动摘要、信息抽取】

LLMs 参数高效微调技术2：软提示 Parameter efficient fine-tuning PEFT techniques 2: Soft prompts

如何选择最适合你的LLM优化方法：全面微调、PEFT、提示工程和RAG对比分析

大模型-微调技术：LLM-Adapters库【对 PEFT 库的扩展，是一个简单易用的框架，将各种适配器集成到 LLM 中】

Peft库使用技巧（二）：删除、合并微调参数【从全参数微调后的模型参数中剔除基座模型参数（冻结），然后发布自己训练的这部分参数模块】

微调 Llama-2 7B 模型以生成 Python 代码有关如何使用 PEFT、QLoRa 和 Huggingface 实用程序微调新 Llama-2 的演示

Peft库使用技巧（一）：合并基座模型与Lora模型【使用Peft库微调基座模型（比如LLaMA-7B）后会得到Lora参数模块，将基座模型与Lora参数合并后才能得到完整的微调后的大模型】

LLM-项目详解-Chinese-LLaMA-AIpaca（一）：LLM+LoRa微调加速技术原理及基于PEFT的动手实践：一些思考和mt0-large+lora完整案例

今日推荐

周排行

3.5星|津巴多《时间的悖论》：未来导向的人更有可能取得个人的成功，但帮助他人的可能性更小

k8s无脑系列（二）-DNS服务搭建和访问

leetcode 26 从排序数组中删除重复项

Python Web 框架：Django、Flask 与 Tornado

中科院计算所研究员陈益强：越来越'聪明'的智能硬件

dotNET面试（二）

数据备份恢复

vue 路由知识点梳理及应用场景整理

ajax局部刷新流程

分段、分页&&内存碎片、外存碎片

每日归档

更多

2025-03-22(0)

2025-03-21(0)

2025-03-20(0)

2025-03-19(0)

2025-03-18(0)

2025-03-17(0)

2025-03-16(0)

2025-03-15(0)

2025-03-14(0)

2025-03-13(0)