一致性推理是人类智能的核心能力之一，指的是处理等价但表述不同的任务的能力，例如，当我们被问到，告诉我现在几点！，和，现在几点钟，时，尽管这两个问题的表述不同，但它们本质上是相同的，人类能够在面对这些等价问题时，提供一致且正确的答案，这种能力不仅在日常生活中至关重要，也是科学讨论、交流和推理的基础，在...

  本文翻译自高盛的最新报告，GenAI，Toomuchtospend，toolittlebenefit?，，高潮过后，更多的人开始审视生成式AI带来的实际收益问题，生成式AI技术将对公司、行业乃至整个社会的带来变革的承诺持续受到推崇，预计在未来数年中，科技巨头、各类企业和公共事业单位将在资本开支上投入...

  1、LLM训练的隐秘危机，1%的合成数据或致模型崩溃在LLM快速发展的今天，一个令人担忧的现象正悄然出现——模型崩溃，研究发现，即便在训练数据中仅包含1%的合成数据，也可能导致LLM模型性能严重下降，无论如何增加训练数据量都无法提升效果，更令人意外的是，增加模型规模这一当前广泛采用的方法，非但不能缓...

  一、结论写在前面论文标题，Smaller，Weaker，YetBetter，TrainingLLMReasonersviaCompute，OptimalSampling论文链接，​​https，arxiv.org，pdf，2408.16737​​利用来自强大语言模型，LMs，的高质量合成数据进行训练...

  ​一、结论写在前面论文标题，MemLong，Memory，AugmentedRetrievalforLongTextModeling论文链接，https，arxiv.org，pdf，2408.16967LLMs在各个领域的最新进展取得了显著的成功，然而，由于注意力机制的二次时间和空间复杂性以及生成过...

  你是否也好奇，在大模型时代，可解释性人工智能技术，XAI，有怎样的使用价值，近日，来自佐治亚大学、新泽西理工学院、弗吉尼亚大学、维克森林大学、和腾讯AILab的研究者联合发布了解释性技术在大语言模型，LLM，上的可用性综述，提出了，UsableXAI，的概念，并探讨了10种在大模型时代提高XAI实际...

  Microsoft于2021年推出的LoRA是一种经济型微调模型参数的方法，现在大模型的参数规模动不动都在10亿级别以上，微调大模型，微调这里代表着SFT，例如读者将某个大模型拿到自身领域，想使用自身领域的知识再次训练和精校大模型，就属于模型微调的领域，的全面微调模式下，需要调整所有的参数，因此所需...

  ​，学会写提示词，就类似于学会使用电脑的鼠标和键盘，这是学习和使用大模型必备的技能之一，而提示词工程就是让你学会怎么和大模型说话，最近断断续续一直有人通过后台留言或加微信的方式，来咨询大模型的应用问题；比如，怎么用大模型优化文本，或者怎么才能从大模型得到更好的回答等问题，这些零零散散的问题，其实归根...

  使用HuggingFaceTransformers对T5模型进行微调以处理问题回答任务很简单，只需为模型提供问题和上下文，它就能学会生成正确的答案，T5是一个功能强大的模型，旨在帮助计算机理解和生成人类语言，T5的全称是，文本到文本转换器，它是一个可以完成许多语言任务的模型，T5将所有任务视为文本到...

  文章链接，https，arxiv.org，pdf，2409.02389项目链接，https，msr3d.github.io，亮点直击总结速览解决的问题现有的场景理解数据集和基准测试在数据模态、多样性、规模和任务范围方面存在局限性，无法充分支持对3D场景中情境理解的研究，提出的方案提出了多模态情境问答...

  Alluxio李浩源博士，用高价值数据编排平台服务用户，为上层应用提供更好的数据服务Alluxio的创新之处在于在整个技术栈中提出了新的一层抽象——相当于一个中间虚拟层，介于计算框架和现有的存储系统之间，Alluxio的工作目的是把在不同存储中的数据进行虚拟化和抽象化之后，利用编排为上层数据应用提供...

  为了获得对人工智能的真正理解，研究人员应该把注意力转移到开发一种基本的、潜在的AGI技术上，这种技术可以复制人类对环境的理解，谷歌、微软和Facebook等行业巨头，ElonMusk的OpenAI等研究实验室，甚至SingularityNET等平台都在押注通用人工智能，AGI，——智能代理理解或学习...

  成为技术领导者是一个令人兴奋和恐惧的时刻，将为快速发展的数字技术所提供的大量机会而感到兴奋，也会由于害怕错过相关技术或措施而感到恐惧，在开发更加广泛的应用程序的愿望驱使下，许多企业将人工智能视为一种灵丹妙药，首席信息官可以采用人工智能技术来满足客户的需求，当然首席信息官更清楚的是，任何一种新技术带来...

  如果要用一句话概括AI的训练和推理的不同之处，我觉得用，台上一分钟，台下十年功，最为贴切，话说小明已经和心目中的女神交往数年，在邀约女神出门这件事上积累了大量的经验数据，但却依然捉摸不透其中的玄机，借助AI技术，能否实现精准预测呢，小明思考再三，总结出了可能影响女神是否接受邀请的变量，是否节假日，天...

  人工智能正在人类活动和市场投资的两个关键领域扩展——健康和语言，2021年AI现状，报告的作者NathanBenaich和IanHogarth讨论了这些领域的AI应用和研究，去年，Benaich和Hogarth证明生物学正在经历人工智能时代，他们解释说，这反映了已发表研究的巨大变化，从根本上摒弃了对...