
1 年前
T5:Text-to-Text Transfer Transformer

1 年前
2025 年 3 月 12 日,清华大学 NLP 实验室联手中南大学等提出 APB 序列并行推理框架,可解决长上下文远距离语义依赖问题,在 128K 文本上比 Flash Attention 快约 10 倍。

1 年前
2月10日,清华大学KVCache.AI团队联合趋境科技发布的KTransformers开源项目公布更新:一块24G显存的4090D,就可以在本地运行DeepSeek-R1、V3的671B“满血版”。 预处理速度最高达到286 tokens/s,推理生成速度最高能达到14 tokens/s。 KTransformers通过优化本地机器上的LLM部署,帮助解决资源限制问题。该框架采用了异构计算、先进量化技术、稀疏注意力机制等多种创新手段,提升了模型的计算效率,并具备处理长上下文序列的能力。

2 年前
在 AI 在自然语言处理等任务中,“chunk”可以理解为“组块”。 它指的是将文本或数据分割成较小的、有意义的单元或片段。

2 年前
Transformer是一种基于自注意力机制的深度神经网络架构,它完全基于注意力机制,摒弃了之前广泛使用的循环和卷积网络结构。应用于多个领域,包括自然语言处理(NLP)和计算机视觉(CV)中取得了显著的成果。

2 年前
论坛上提出了AI治理框架、AI发展治理、AI安全治理和AI治理国际合作等议题。

2 年前
OmniParse:一个人工智能平台,可将任何非结构化数据提取/解析为针对 GenAI (LLM) 应用程序优化的结构化、可操作数据。

3 天前
Artium AI 于 2026 年 7 月 29 日正式宣布加入 OpenAI 合作伙伴网络,并升级为 OpenAI 高级合作伙伴(OpenAI Advanced Partner)。 Artium AI 将与 OpenAI 深度合作,基于 OpenAI 的技术栈与 API,为企业客户打造、部署和扩展定制化的智能体 AI(Agentic AI)方案,实现日常任务自动化。 AI产业发展阶段的变化以及咨询公司在其中的新定位,核心要点如下: 事件背景: 美国智能体AI软件咨询公司Artium AI宣布成为OpenAI高级合作伙伴,为企业打造定制化智能体AI方案。 行业现状转变: 过去两年AI领域的竞争集中在“大模型能力”上,但企业发现拥有GPT并不等于具备AI能力,真正缺乏的是如何让AI融入业务流程。 咨询公司角色升级: 未来的AI咨询公司不再仅仅提供战略建议或报告,而是要直接帮企业设计连接系统并执行任务的“AI员工”,交付一支数字化员工团队。 软件行业的重新定义: 传统软件是固定流程,而进入智能体时代后,软件变成了动态能力。企业的需求从“买哪个系统”转变为“能不能让AI帮我完成这件事”。 最终结论: AI产业的竞争正从“大模型战争”转向“企业智能化重构战争”。未来最有价值的公司可能不是卖工具的,而是能帮助企业理解自身流程、将AI转化为真实生产力的公司。