强化学习

Agent智能体应用 GUI Agent 【2024-1-25】这几天agent操控设备成为热点： 智谱昨天推出 glm-pc 1.1，注重长程推理，与年前的autoglm互补，分别占据pc和mobile设备 智谱agent手机端 AutoGLM GLM-PC openai 的 operator 也涉足pc操控 GUI Agent 介绍 Huawei London 邵坤主题演讲，介绍面向通用型 GUI Agent 的模型和优化。 ...

智能体应用GUI GUI Agent 【2024-1-25】这几天agent操控设备成为热点： 智谱昨天推出 glm-pc 1.1，注重长程推理，与年前的autoglm互补，分别占据pc和mobile设备 智谱agent手机端 AutoGLM GLM-PC openai 的 operator 也涉足pc操控 GUI Agent 介绍 Huawei London 邵坤主题演讲，介绍面向通用型 GUI Agent 的模型和优化。 ...

LLM 发展方向 【2023-6-16】知乎专题：大模型LLM领域，有哪些可以作为学术研究方向？ 模型层： GPT系列，多模态系列，视觉类SAM：原生的工具调用能力； 安全性：加密，可信任，联邦学习； 新模型，新范式：长文本建模，不需要RLHF等； 涌现问题的研究、黑盒的研究； 并行、运算、显存的优化。EL-Attention，ZeRo，剪枝部署，蒸馏压缩。 接口层： 私有化部署； Adapter，prefix，Lora； Fusing。 应用层： Visual ChatGPT，HuggingGPT，AutoGPT，LangChain； Prompt工程，向量库，dense retrieval； 自我纠错，自我迭代，chain of thought 加强； 评测数据集、新时代下的新任务，generatice agents等 假设已经有 GPT-3.5 基础模型，一千张卡，思考能做什么？然后用小模型，比如LLaMa 7B去验证，如果成功，再慢慢加大到13B，30B，画出一条上升的曲线；不一定要scale到最大的模型，只要自己的结论能划出一条上升的曲线，那么这条曲线就可外推到更大。 ...

从CPU到GPU再到TPU 总结 【2020-10-28】CUDA编程入门极简教程 简介 2006年，NVIDIA公司发布了CUDA，CUDA是建立在NVIDIA的CPUs上的一个通用并行计算平台和编程模型，基于CUDA编程可以利用GPUs的并行计算引擎来更加高效地解决比较复杂的计算难题。 ...