[Paper] Record-Remix-Replay:使用进化搜索的层次化 GPU 内核优化
随着高性能计算和 AI 工作负载日益依赖 GPU,保持在快速演进的硬件代际中的高性能……
4611 posts from this source
随着高性能计算和 AI 工作负载日益依赖 GPU,保持在快速演进的硬件代际中的高性能……
云原生架构是关于构建和运行可扩展的微服务应用,以充分利用云环境。托管的 Kubernetes …
量子计算社区正日益将 quantum processors 定位为经典 HPC 工作流中的加速器,类似于 GPUs 和 TPUs。然而...
Multi-model LLM routing 已成为一种有效的方法,通过将每个 prompt 分配给 …,在保持输出质量的同时降低服务成本和延迟。
Prompt learning 是一种参数高效的视觉语言模型方法,但其在标签噪声下的鲁棒性研究较少。视觉内容包含……
视觉语言模型(VLMs)仍然在视觉感知任务(如空间理解和视点识别)上表现困难。一个可能的促成因素是...
大型视觉语言模型(LVLMs)在多模态推理方面表现出色,但常常出现幻觉并以高度确定性给出错误答案,……
在生产环境中维持 exascale 性能需要在真实部署约束和需求下才会出现的工程选择和运维实践。
近期在大型语言模型(LLMs)方面的进展使得大规模生成高度流畅且具欺骗性的类新闻内容成为可能。虽然之前的研究已经……
Norm,形式理论语言学家,和 Claudette,计算语言科学家,愉快地讨论现代语言模型是否能够……
我们提出了 RecaLLM,这是一套经过后训练的推理语言模型,旨在有效利用长上下文信息。In‑context retrieval(上下文检索),用于识别……
模型投毒攻击对联邦学习(FL)构成了显著的安全威胁。大多数现有的模型投毒攻击依赖于合谋,需要对手...
成功的 machine learning 在 graphs 或 networks 上需要 embeddings,这些 embeddings 不仅将 nodes 和 edges 表示为 low-dimensional vectors,还要保留 …
《易经》King Wen序列(约公元前1000年)将64卦——六维二进制空间的状态——按一种模式排列,这一模式长期困扰着学者……
Von Economo neurons (VENs) 是大型双极投射神经元,仅在具有复杂...的物种的前扣带皮层 (ACC) 和额叶岛叶中发现。
在具有多个异构加速引擎的系统级芯片(SoC)上部署深度神经网络(DNN)具有挑战性,而且大多数部署框架无法完全 …
现代 LLM 强化学习(RL)工作负载需要一个高效的 weight transfer system,以在异构计算资源上扩展训练……
社会主体既内化集体规范,又通过创造性行动重塑这些规范,然而计算模型尚未捕捉到这一双向过程……
人体拟合,将诸如 SMPL 等参数化人体模型与穿衣人类的原始 3D 点云对齐,是下游任务的关键第一步。
自由形态骨骼紧贴表面,能够有效捕捉非刚性变形,但缺乏直观控制所需的运动学结构。
代理式多模态模型的出现使系统能够主动与外部环境交互。然而,当前的代理在…
Text-to-video diffusion models 已经实现了开放式视频合成,但在生成提示中指定的正确对象数量时常常遇到困难。
事件相机在头戴式设备的单目自我视角3D人体姿态估计中提供了多种优势,例如毫秒级时间分辨率,hig...
机器人操作可变形物体代表了具身学习中数据密集的范式,其中形状、接触和拓扑以相互共演的方式……
本文针对从长视频序列进行大规模3D场景重建的任务。近期的前馈重建模型已经展示出有希望的 r...
多模态混合专家(MoE)模型在视觉语言任务上取得了显著的性能。然而,我们发现了一种令人困惑的现象,称为 Seei…
Text-to-Audio-Video (T2AV) 生成正迅速成为媒体创作的核心接口,但其评估仍然碎片化。现有基准在很大程度上…
Group Relative Policy Optimization (GRPO) 已成为推动最近在多模态大型语言模型领域进展的事实上的强化学习 (RL) 目标。
Visual decoding from brain signals 是计算机视觉和神经科学交叉领域的关键挑战,需要能够桥接神经表征……
我们引入 RewardFlow,这是一种无反演框架,在推理时通过多奖励 Langevin 动力学引导预训练的 diffusion 和 flow‑matching 模型。
个人 AI 工具现在可以通过自然语言请求生成,但它们在创建后往往仍然是孤立的。我们提出了 PSI,一种共享状态的架构……
On-policy distillation (OPD) 在学生模型自身产生的分布下进行训练,同时利用更强教师的监督。我们识别出一个失败…
当今的大型语言模型(LLMs)通过强化学习等方法进行训练,以对齐用户偏好。然而,模型正开始被 d...
将 steering vectors 应用于大型语言模型(LLMs)是一种高效且有效的模型对齐技术,但我们缺乏可解释的说明。
AI agents 可能能够自动处理你的 inbox,但它们能否自动化你生活中的其他常规方面?日常在线任务提供了一个现实且尚未解决的测试…
大型语言模型(LLMs)在参数中记忆事实知识时可能会遇到困难,这常常导致幻觉并在知识密集型任务上表现不佳。
大型语言模型(LLMs)能够执行极其复杂的任务,然而这些能力在预训练过程中如何出现的细粒度细节仍然了解不足。
我们在不同性约束下,开启对语言生成极限模型的研究,该模型由 Kleinberg 和 Mullinathan [KM24] 最近提出。
科学目前提供了两种质量保证的选项,但都不够充分。期刊把关声称能够验证完整性和贡献,实际上……
Prompt injection attacks 在广泛的实际应用中构成严重的安全风险。尽管受到越来越多的关注,社区仍面临……
先前的研究已经表明,基于神经网络的节点嵌入在相同数据集上使用相同参数进行训练时会产生不同的结果,ju...
可验证奖励强化学习(RLVR)显著提升了大语言模型(LLM)在数学等形式化领域的推理能力……
联邦学习(FL)实现了跨分布式航空机队的隐私保护预测性维护,但梯度通信开销限制了……
拓扑数据分析(TDA)提供了描述数据形状的工具,但将拓扑特征整合到深度学习流水线中仍然具有挑战性……
尽管在由可验证奖励强化学习(RLVR)驱动的大规模推理模型(LRMs)方面取得了显著进展,但这种范式在根本上是…
GPU 计算吞吐量和内存容量的提升为广泛的工作负载带来了重大机遇。然而,高效利用这些资源……
Kubernetes 控制平面节点的放置对于确保集群的可靠性、可扩展性和性能至关重要,因此代表了一个重要的…
大型语言模型(LLMs)已成为自动化漏洞检测的有前景的方法。然而,大多数先前的研究主要探索了使用LLMs来检测……