2024年8-9月总结与展望 论文研读这个月只读了一篇关于RAG的综述文章,详细的笔记可以参考RAG for LLM:A survey这篇博客文章。 通过浏览该领域以及拓宽知识面,又找到了如下几个感兴趣的点: RAG Text2SQL 多模态检索 Agent 读文献的能力、论文写作的能力是需要一步步培养、积累、学些的,不能放松对写作能力的培养,写作和表达是这一年在雁栖湖要努力下功夫去打磨的本领。 技术学习【重要】小 2024-09-30 动机 #科研心路
AI大模型时代人才需求与技能培养 AI大模型需要的三类人才核心基础理论与架构、大模型+X、支持大模型的计算机系统 技能与素质需求大模型核心基础理论与架构机器学习基础:熟悉机器学习基础算法,线性回归、决策树、随机向量机等,要理解过拟合、正则化、交叉验证等概念 深度学习理论:神经网络的基本结构和工作原理,熟练使用深度学习框架,如:tensorfllow、pytorch,理解卷积神经网络CNN、循环神经网络RNN、Transformer 2024-09-29 大模型相关 #LLM #人工智能 #职业发展
Pytorch and Deep-learning NoteBook PyTorch与深度学习笔记,持续更新….不要着急,扎扎实实打好基本功! 参考学习资料小土堆-pytorch学习教程:https://www.bilibili.com/video/BV1hE411t7RN/?p=10&spm_id_from=333.1007.top_right_bar_window_history.content.clic 2024-09-28 人工智能与深度学习 #深度学习 #机器学习
李沐交大讲座-大语言模型的实践经验和未来预测 LLM trends && Personal Career Choices——大语言模型的实践经验和未来预测主讲人李沐:上海交大2011届计算机科学与工程系本硕系友。他曾担任亚马逊资深首席科学家,任加州大学伯克利分校和斯坦福大学的访问助理教授,是前Marianas Labs联合创始人。他的研究关注分布式系统和机器学习算法。发表了50余篇人工智能顶级会议论文,在CMU读博期间更是两年 2024-09-23 读书笔记 #科研心路 #职业发展 #深度学习 #机器学习 #前沿讲座
Google File System Google File System原文连接: https://static.googleusercontent.com/media/research.google.com/zh-CN//archive/gfs-sosp2003.pdf 论文翻译: https://blog.mrcroxx.com/posts/paper-reading/gfs-sosp2003/ 2024-09-20 论文研读 #big data #分布式计算 #存储
RAG for LLM - A survey RAG for LLM - A survey论文题目: Retrieval-Augmented Generation for Large Language Models: A Survey 论文链接: https://arxiv.org/abs/2312.10997 翻译: https://baoyu.io/translations/ai-paper/2312.10997-retrieval-a 2024-09-19 大模型相关 #LLM #RAG
《在线》-读书笔记 王坚院士《在线》书摘与读书笔记——互联网、数据和计算我们很幸运,生活在一个创造决定未来的时代。但是创造能否决定未来取决于我们的信念和坚持,坚持相信的,相信坚持的。计算,为了无法计算的价值 榜样-王坚王坚(1962年10月—),中国信息技术专家、心理学家,阿里巴巴集团首席技术官,中国工程院院士,阿里云的创始人。曾主持研发中国唯一自研的云操作系统飞天。 2024-09-18 动机 #笔记
力祥哲学-把程序写成东西 天下大事,必做于细站在设计者的角度去思考问题 把程序写成东西感谢今生遇见杨力祥老师!!!活了20多年了,第一次遇到一位将面向对象思想讲解这么透彻的老师。 老师一上来的课程就非常硬核,告诉我们,面向对象就是把程序写成东西 以麦当劳炸薯条的例子,教会我们区分面向过程和面向对象。面向过程就是流程化,第一步做什么第二部做什么。。。最后一步做什么。规则、 2024-09-10 cs基础 #编程思想 #创新思维
雁栖一年,科研三年 开学开学参加了很多次的入学讲座和培训,听了很多老师的演讲和致辞。 曹亚男老师结合她自己的经历,告诉我们要做有品位的研究。针对科学研究,提出了两大方向:针对开放问题的开创探讨和针对封闭数据的优先探索。问题的价值作为核心,与个人兴趣、资源、能力、知识储备紧密结合。做有意义的课题,要平衡好“我喜欢”和“我的能力”。在雁栖湖的一年,学好专业课程的同时,一定要定好自己的研究点(至少3个),学硕开题前至少要投 2024-08-30 动机 #科研心路
DataWhale AI夏令营-LLM实训 day01-baseline搭建 首先注册魔塔社区帐号,免费领取魔塔GPU算力资源 新建GPU算力环境,下载相关第三方库与拉取镜像资源 1234567## 拉取git镜像git lfs installgit clone https://www.modelscope.cn/datasets/Datawhale/AICamp_yuan_baseline. 2024-08-12 大模型相关 #LLM #RAG #部署 #微调技术