[Paper] TexSpot：3D 纹理增强与空间均匀点潜在表示

发布: 3天前 (2026年2月13日 GMT+8 00:37)

7 分钟阅读

原文: arXiv

Source: arXiv - 2602.12157v1

概述

TexSpot 解决了 3‑D 图形中长期存在的痛点：为任意网格生成高质量、视角一致的纹理。通过引入一种新的 “Texlet” 表示，它将基于点的纹理的灵活性与 UV 图的紧凑性相结合，作者构建了一个基于扩散的增强器，能够在保持几何保真度的同时，润色现有多视角流水线生成的纹理。

Texlet 构建
- 在网格表面上均匀采样一组点。
- 对每个点，从初始纹理中提取一个小的 2‑D 纹理块（例如 32×32 像素）。
- 使用轻量级 2‑D CNN 编码器对每个纹理块进行编码 → 本地潜在向量。
- 将所有本地向量输入共享的 3‑D 编码器（例如 PointNet++ 风格），该编码器注入全局形状上下文，生成该点的最终 Texlet 潜在向量。
3‑D‑到‑2‑D 解码
- 一系列解码器首先将全局潜在向量展开为粗糙的 2‑D 特征图，然后将其细化为全分辨率的纹理块。
- 该设计在保持低内存使用的同时，使模型能够重建细粒度细节。
基于扩散的增强
- 一个 Transformer 风格的扩散模型接收噪声 Texlet 潜在向量，并学习在底层几何条件下对其去噪。
- 扩散过程迭代地细化潜在空间，随后将其解码回高质量的纹理块。
- 由于扩散在紧凑的 Texlet 空间上进行，该方法快速且可扩展到高分辨率网格。
训练与集成
- 系统在精心挑选的带有真实纹理的网格数据集上进行端到端训练。
- 在推理阶段，TexSpot 可以在任何多视角扩散生成器（例如 DreamFusion 风格的流水线）之后插入，以提升最终纹理质量。

Game & VR asset pipelines: 艺术家可以将快速原型工具生成的粗糙纹理输入 TexSpot，以获得生产级、视角一致的纹理，无需手动 UV 展开。
3‑D content marketplaces: 自动放大用户提交的网格变得可行，从而减少手动修饰的需求。
AR/VR streaming: 由于 TexSpot 基于紧凑的潜在表示工作，可集成到带宽受限但需要高质量纹理的边缘计算场景中。
Cross‑modal generation: Texlet 空间可以作为文本到 3‑D 流水线的桥梁，实现基于语言的纹理细化，而无需为每个新资产重新训练完整的扩散模型。