包含"LLM"标签的文章

  • AutoGPT Agent LLM如何实现

      今天我们来聊聊一个超酷的东西——使用AutoGPT创建的智能Agent,想象一下,你有一个庞大的在线商城数据库,里面存储了海量的用户和交易数据,你想知道有多少活跃用户,一个AutoGPTAgent就能帮你秒查出来,而且,它还能写出正确的SQL查询,不会出错的那种,首先,我们需要给AutoGPT准备一...

    2024-11-15 549
  • 利用语义相似度提升标签过滤质量 RAG开发新技术

      本文旨在介绍如何利用语义相似度改进标签过滤以提升RAG应用开发质量,要理解本文中的内容,你需要掌握Jaccard相似性和向量搜索等预备知识,本文算法的实现已在GitHub,https,github.com,atlantis,nova,simtag,上发布,并且是完全开源的,简介多年来,我们已经发现了...

    2024-11-15 274
  • ICML 2024高分论文

      本文共同第一作者简介,张逸骅,密歇根州立大学计算机系博士三年级学生,师从SijiaLiu教授,主要研究方向是大模型的安全、隐私和效率问题,李平治,本科毕业于中国科学技术大学,将于2024Fall博士入学北卡罗来纳大学教堂山分校,师从陈天龙教授,主要研究兴趣集中在高效机器学习和AI4Science领域...

    2024-11-15 644
  • 开发arXiv论文引擎机器人程序 基于RAG+LangChain+Chainlit+ChromaDB

      本文将完整细致地介绍如何使用RAG技术与LangChain、ChainlitCopilot组件以及LiteralAI可观测性特征联合开发一款语义论文搜索引擎程序,简介在本文中,我将演示如何使用检索增强生成,RAG,技术构建语义研究论文引擎,具体地说,我将使用LangChain,https,www.l...

    2024-11-15 624
  • 如何选择适合企业需求的大语言模型

      LLM正在推动各行各业的突破和效率,在选择一种模型时,企业应该考虑预期的应用、速度、安全、成本、语言和易用性,虽然与其他人工智能,AI,技术相比,生成式AI比较新,但它已经被用于支持从审查求职者到诊断和推荐疾病治疗的一系列任务,IDC预测,到2028年,80%的首席信息官将依靠生成式AI工具来加快分...

    2024-11-15 206
  • 预训练大语言模型对时间序列预测真的有用吗 去掉预训练LLM效果反而提升

      今天给大家介绍一篇关于大模型在时间序列应用探讨的工作,这篇文章质疑大语言模型在时间序列预测中是否有效,并对目前最先进的3个基于大语言模型的时间序列预测模型进行实验,发现去掉大语言模型部分,改成一个attention网络,也能取得相同甚至更优的效果,论文标题,AreLanguageModelsActu...

    2024-11-15 272
  • LLM实践系列

      经过了数据收集、筛选、去重,马上就可以开始训练实验了,但是在实验之前,我们还需要先获取一个语言模型的基石,分词器,Tokenizer,Tokenizer的作用是对一条文本数据进行切分、词表映射,得到这条文本的token序列,用开源Tokenizer还是自己训练Tokenizer可以自己训练,也可以从...

    2024-11-15 974
  • 综述

      大家好,我是刘聪NLP,大模型已经展现出了较强的文本生成能力,但随着使用场景变得越加复杂和严格,除了避免生成误导或不当言论内容外,往往还希望可以满足用户的特殊需求,而可控文本生成就是为了在保持文本生成有用性、流畅性和多样性的同时,保证文本符合预定的控制条件,例如安全性、主题一致性、语言风格等,今天给...

    2024-11-15 139
  • AI工程中面临的开放挑战

      我昨天在AI工程师世界博览会上发表了开幕主题演讲,我是临时加入议程的,OpenAI在最后一刻退出了他们的演讲,我受邀在不到24小时的通知时间内准备一个20分钟的演讲!我决定重点讲述自8个月前上次AI工程师峰会以来LLM,大语言模型,领域的亮点,并讨论该领域的一些未解决的挑战——这是我在早些时候的活动...

    2024-11-15 711
  • 使用 评估大型语言模型 反事实任务

      ​LLMs的智能本质是什么,在之前的文章中,我谈到了评估大型语言模型能力的困难,这些模型在许多基准测试中表现出色,但我们通常不知道基准测试中的测试项目,或足够相似的项目,是否出现在训练数据中,这些模型是在进行一般性的理解和推理,还是在进行AI研究员SubbaraoKambhampati所说的,近似检...

    2024-11-15 139
  • 如何改进RAG模型的性能

      本文中将重点介绍如何优化RAG系统,使其尽可能高效,我们从多个角度介绍RAG系统,深入了解其用途以及如何优化,介绍检索增强生成,RAG,模型通常被称为RAG系统,在AI行业得到极大的关注,这种模型背后的概念很简单,我们允许模型根据需要从单独的数据集检索信息,而不是使用海量数据训练模型,将如何改进机器...

    2024-11-15 672
  • 你想要的GraphRAG的内容都在这了

      最近微软终于开源了他的GraphRAG,短短7天就集齐了6.7KStar,那GraphRAG到底是个啥,GraphRAG的论文实际上要比代码开源早很多,论文应是今年4月份在Arxiv上发表的,但是代码是这个月1号才正式上传开源,项目开源地址,https,github.com,microsoft,gr...

    2024-11-15 313
  • 改进RAG管道检索文档质量的五种方法

      RAG可以利用外部信息提升大型语言模型的性能,其性能依赖于检索文档的质量,除了标准检索方法之外,还有4种方法可以提高所检索文档的质量,检索增强生成,RAG,是利用外部信息定制大型语言模型的重要技术之一,但是,RAG的性能取决于检索到的文档的质量,除了在RAG管道中使用的标准检索方法之外,还有这4种技...

    2024-11-14 572
  • 文档概要索引 简单提升检索性能的新选择

      今天介绍了一种全新的LlamaIndex数据结构,文档摘要索引,将描述它如何比传统语义搜索提供更好的检索性能,并通过一个示例进行了演示,背景大型语言模型,LLM,的核心用例之一是针对自己的数据进行问答,为此,我们将LLM与,检索,模型配对,该模型可以对知识语料库执行信息检索,并使用LLM对检索到的文...

    2024-11-14 530
  • LLM集中爆发的一周 Open 卷疯了!

      开源大模型领域热闹非凡的一周,各种开源,PaperAgent进行了概括,端侧、Code、RAG、Agent、Reflection,反思纠正,、MoE,你关注的都在这里了,ReflectionLlama,3.1,70B开源ReflectionLlama,3.170B是世界上顶尖的OpenLLM,通过反...

    2024-11-14 392

联系我们

QQ号:***

微信号:***

工作日:9:30-18:30,节假日休息