大模型时代下做科研的四个思路
【亚马逊李沐】大模型时代下做科研的四个思路
大部人人可能没有100个GPU，没有办法复现ChatGPT，但是用一台联网的笔记本，也可以做一些有意义的工作。
1、提升效率，不仅限于训练效率，推理效率。现在的LLM动辄1一个月千万的训练费用，节省10%就能发顶会，大厂争抢者要。
2、使用已有的预训练模型（如 CLIP ，GPT），新的研究方向；用GPT研究生物医药，股票基金，法律等垂直领域。。。
3、做一些即插即用的模块，例如模型的模块、目标函数、新损失函数、数据增强方法、卷积方法，排列组合的模型架构等等；
4、构建数据集，发表分析、评估为主的文章，或者综述论文。
本文来自互联网用户投稿，文章观点仅代表作者本人，不代表本站立场，不承担相关法律责任。如若转载，请注明出处。 如若内容造成侵权/违法违规/事实不符，请点击【内容举报】进行投诉反馈！