随着LLM的发展，ChatGPT能力不断增强，AI不断有新的概念提出，一种衍生类型的应用AIAgent也借着这股春风开启了一波话题热度，各种初创公司，包括OpenAI内部也都在密切关注着AIAg

❝在AI技术飞速发展的今天，我们见证了许多令人惊叹的突破。最近，Qwen2模型的开源引起了广泛的关注，它不仅展示了超越闭源模型的能力，还带来了一个全新的框架——Qwen-Agent。Qwen-Agen

01引言GLM-4-9B是智谱AI推出的最新一代预训练模型GLM-4系列中的开源版本。 在语义、数学、推理、代码和知识等多方面的数据集测评中，GLM-4-9B及其人类偏好对齐的版本GLM

编辑部唯一投稿邮箱：itedu_bj@163com感谢您的关注和支持！欢迎点击下方文字参加活动↓↓↓论文征集！欢迎参加2024年“数字化赋能中小学教学实践”论文征集活动2024年中小学生信息科技创新

【点击】加入AI技术交流群粗略地说，大模型训练有四个主要阶段：预训练、有监督微调、奖励建模、强化学习。预训练消耗的时间占据了整个训练pipeline的99%，其他三个阶段是微调阶段，更多地遵循少量G

PEFT微调方案中，目前LoRA是最受欢迎的，今天简单聊一聊。LoRA是Low-RankAdaptation的缩写，它并不调整深度神经网络的所有参数，而是只更新一小部分low-rank矩阵。在常规微