AIGC

ChatGPT

• chatGPT
• Langchain
• LLM Challenges
• Useful Chatgpt Prompt
• 文本大语言模型的聊天模板入门指南

LLM Pretrain

• T5 模型
• NLP 任务分类
• Transformer 中的位置编码
• 旋转式位置编码(Rotary Position Embedding)

LLM Finetune

• 大型语言模型 (LLM) 微调方法
• Low-Rank Adaptation (LoRA)

LLM Datasets

• LLM Instruction 数据集
• LLM Preference 数据集
• LLM 行业数据集

LLM Agent

• Autonomous AI Agents
• LLM 赋能 Agent
• AutoGPT 与 LLM Agent 解析
• Agent 应用: MarkAgent
• Agent 应用: SightPro
• LLM Playing StarCraftII 1
• LLM Playing StarCraftII 2
• LLM Playing StarCraftII 3

LLM Evaluation

• LLM 评测体系
• LLM 评估工具
• LLM 评估指标

量化压缩

• 8-bit 优化器中文解读
• LLM.int8(): 8-bit Matrix Multiplication for Transformers at Scale
• Transformer 中的 Bitsandbytes 集成
• QLora: Efficient Finetuning of Quantized LLMs
• QLora 源码分析

Tools

• 如何快速下载 Huggingface 模型