预训练大语言模型的配方模型架构:介绍了大型语言模型基于Transformer架构的衍生版本,包括仅解码器的Transformer架构,以及如何通过参数和输入数据的交互来定义模型的具体实现训练数据集:强调了训练数据集的重要性,包括自然语言文本、编程语言代码和其他结构化信息,以及数据集的规......    阅读全文

关注点一:RAG (检索增强生成)RAG结合 LLM 和检索机制,提高信息生成的准确性和上下文相关性80%的 LLM 应用开发者利用 RAG 技术,并形成最佳实践向量数据库与 RAG 架构契合,新兴向量数据库产品受到关注挑战包括文档分块策略、嵌入模型选择、向量搜索优化和系统性能评估关注......    阅读全文

人工智能不再是一个抽奖遥远的科技名词,而是真真切切融入到了我们每个人的工作里。如何在新的环境中保持竞争力呢?作者建议尽快将 AI 融入工作流和落地实施中,借助AI全面提升职场力。与其说我们是在跟AI竞争,不如说我们是在彼此竞争谁先掌握AI。拥抱变化:AI领域日新月异,保持开放的心态,随......    阅读全文

毫无疑问,人工智能在 2023 年掀起了波澜,在这里我们重点关注今年最重要的故事,这些故事将塑造这个开创性行业的未来:在今年的人工智能进步领域,取得了显着的进展,改进了现有技术,而不是引入类似于前一年的 ChatGPT 或图像生成器的突破性创新。虽然没有令人惊叹的效果,而且真正的通用人......    阅读全文

今年,我亲眼目睹了人工智能实时改变世界。从所发生的事情来看,我毫不怀疑未来几年将是人类历史上最具变革性的时期。以下是 2023 年人工智能的完整时间表(1 月至 12 月):1月15日:ChatGPT 成为历史上增长最快的消费者应用程序。1月27日:微软向 OpenAI 投资 100 ......    阅读全文

2023年,大模型与生成式人工智能(Gen AI)席卷全球。如果你一直关注大模型,那么你一定会注意到AI Agent已经成为下一个AI前沿领域,也被普遍认为是人工智能走向AGI(通用人工智能)的必经之路。在层出不穷的大模型加持下,AI Agent已经成为众多科技巨擎布局与发力的关键领域......    阅读全文

2023年即将结束,回顾这一年,自然语言处理的研究取得了重大的突破,并进入了大模型(LLM)时代,这一年也被称为“大模型元年”。大模型的崛起标志着人工智能技术迈向了一个新的阶段,众多科技巨头、研究机构、知名高校也纷纷在这一领域展开激烈的竞争。临近年底,带大家盘一盘2023年NLP领域的......    阅读全文

2023年12月,《自然》杂志发布年度“科学十大影响人物”榜单,今年有史以来首次有“非人类”入选了——名单中包括了ChatGPT。《自然》指出:“尽管ChatGPT并非个体,也不完全符合评选标准,但我们决定破例列入,以承认生成式人工智能正在从根本上改变科学的发展轨迹。”在2023年的科......    阅读全文

国外有一个叫做“AI Graveyard(AI坟墓)”(https://dang.ai/ai-graveyard)的网站,记录了近200个目前已经停止运营的AI项目。这些项目夭折的原因是什么?创业者如何避免重蹈覆辙?AI创业的长期价值落点在哪?“头号AI玩家”对其中几个典型项目的功能、......    阅读全文

与第一代基于 CNN、RNN 和 GAN 的 AI 初创公司不同,生成式 AI 浪潮已经看到一批 AI 基础设施提供商获得了巨大的吸引力。它们共同构成了一个“生成式 AI 堆栈”:一套围绕数据管道、模型部署和推理、可观察性和监控以及将 LLM 投入生产所需的安全性的工具。该堆栈具有高度......    阅读全文

虽然GPTs推出后暴露了很多问题,时不时就会有安全组织现身说法,却无法阻挡人们创建专属CahtGPT的热情。因为宫斗,OpenAI不得不将GPT Store的上线推迟到2024年,这就让一些第三方GPT Store的声望更强,GPTs Hunter数据显示目前的GPTs数量已经达到3.......    阅读全文

在企业内部让 agents 成为同事,甚至构建一个团队。近日,一个来自澳大利亚的初创公司 Relevance AI 完成 1000 万美金 A 轮融资,帮助企业低代码构建多 agents AI 团队。值得一提的是,过去三个月内,约有 6000 家公司已经注册使用了 Relevance ......    阅读全文

腾讯研究团队开源了一款基于大语言模型的,用于手机端执行复杂任务的多模态智能代理框架——AppAgent。据悉,AppAgent的功能与AutoGPT等智能代理类似,不依赖于操作系统的后台访问,而是通过UI界面进行点击、滑动等拟人化操作,与App进行交互操作。例如,AppAgent可以帮......    阅读全文

快手联合哈尔滨工业大学研发的「KwaiAgents」,使 7B/13B 的 “小” 大模型也能达到超越 GPT-3.5 的效果,并且这些系统、模型、数据、评测都开源了!从「KwaiAgents」的 Github 主页中可以看到,本次开源内容包含:系统(KAgentSys-Lite):轻......    阅读全文

文/明道云创始人任向晖李彦宏在近期的一个行业会议上抱怨大家都卷在大模型本身上,而忽视了AI原生应用的实现。他说的当然对,但这个状况绝对不能怪AI创业者。至少在企业应用领域,很多应用开发者并不确定企业愿意为什么样的应用买单,更不要说他们背后的模型提供商了。这一年我看到了几十个已经初步产品......    阅读全文

即将告别2023年,回望这一年,创业投资圈呈现“冰火两重天”的景象。相对前几年的创投热潮,2023年算是冷清的一年。由于过去几年的投资退出不算理想,很多投资机构或“子弹”不足,或正在重构投资逻辑,犹豫观望,鲜少出手。而且,最近几年,资本泡沫褪去,创业门槛被提高了很多,加上移动互联网领域......    阅读全文

大家多少可能都知道纳瓦尔,他被称为硅谷的 icon,现代哲学家,将很多本质思考科学视角引入科技与风险投资领域。他创办了知名天使投资机构 AngelList,自己也投资了超过 200 家公司,包括 Twitter, Uber, Yammer 和 Wish。“他是一个真正慷慨分享自己成功经......    阅读全文

2023年是人工智能的大年,消息密集、“大新闻”不断。OpenAI无疑是年度主角。明星产品ChatGPT快速迭代,展现出惊人乃至“惊吓”的强大能力,甚至因此引爆了一场全球围观的公司内乱。国内则是百度的“文心一言”在争议中面世,也算是一石激起千层浪。本以为余波未了的“OpenAI之乱”将......    阅读全文

a16z 邀请了40多位投资人,来总结 2023 并展望 2024,看看各行业和细分领域的发展现状和未来方向。 原始报告包含美国活力、生物+健康、消费科技、加密、金融科技、游戏、成长阶段技术、基础设施+企业等多个方向。中文翻译版挑选了与AI关系最为紧密的几个领域。各方向的判断都有让人「......    阅读全文

「过去 11 年,我们在这 7 个系统的产品设计和研发上一共花了超过 30 亿的费用。」在过去 11 年中,有赞构建了包含 7 大系统、两万个功能的商业运营体系,服务范围覆盖社交电商运营、会员管理、线下门店管理等全链路 SaaS 体系。但随着系统愈发复杂强大,商家却常常无法用好这些功能......    阅读全文