[Paper] D2M:去中心化、隐私保护、激励兼容的协作学习数据市场

发布: (2025年12月11日 GMT+8 15:38)
6 min read
原文: arXiv

Source: arXiv - 2512.10372v1

概览

本文介绍了 D2M,一个将联邦学习、基于区块链的仲裁和经济激励融合为单一隐私保护框架的去中心化数据市场。通过让数据所有者出售经过策划的模型更新,并通过博弈论激励确保诚实行为,D2M 旨在在没有可信中心的情况下实现大规模协同学习的可行性。

主要贡献

  • 统一的市场架构 – 将智能合约驱动的拍卖、托管和争议解决与用于重型机器学习训练的链下计算网络(CONE)相结合。
  • 激励兼容协议 – 设计了拍卖和奖励机制(校正的 OSMD),使诚实成为买卖双方的占优策略。
  • 拜占庭容错共识 – 在 YODA 协议基础上加入指数增长的执行集合,提供对高达 30 % 恶意参与者的鲁棒性。
  • 端到端实现 – 在以太坊上部署完整堆栈,使用标准视觉基准(MNIST、Fashion‑MNIST、CIFAR‑10)展示真实可行性。
  • 全面评估 – 展示了在对抗条件下的最小精度损失,并量化了随参与者数量增长的可扩展性。

方法论

  1. 市场层(链上)

    • 数据买家以智能合约形式发布学习请求(模型结构、预算、截止时间)。
    • 卖家提交密封投标;合约执行密封投标拍卖,将资金锁定在托管中,并选出获胜者。
    • 争议解决模块自动惩罚未通过预定义质量检查的卖家。
  2. 计算层(链下 – CONE)

    • 被选中的卖家组成 计算集合,通过联邦更新协同训练模型。
    • 训练以轮次进行;每轮结束后,随机挑选的验证者检查更新。如果验证者检测到偏差,则该轮回滚并对违规节点进行削减(slashing)。
  3. 共识与安全

    • YODA‑风格协议将验证者集合指数扩展(1、2、4、…),快速收敛到可信多数,限制拜占庭节点的影响。
    • 校正的在线随机镜像下降(Corrected Online Stochastic Mirror Descent, OSMD)过滤低质量梯度,确保恶意更新不会削弱全局模型。
  4. 博弈论分析

    • 作者将交互建模为重复博弈,并证明在托管和削减规则下,纳什均衡是所有参与者都诚实行动(即提供准确更新并接受公平支付)。

结果与发现

数据集基准精度*D2M 精度(无攻击)30 % 拜占庭节点下的精度
MNIST99 %99 %96 %
Fashion‑MNIST91 %90 %87 %
CIFAR‑1084 %(中心)56 %53 %

*基准指的是使用可信聚合器的标准联邦学习。

  • 鲁棒性: 即使近三分之一的参与者表现恶意,精度下降也小于 3 %。
  • 可扩展性: 由于链下 CONE 层和指数验证者扩展,训练时间随参与者数量的增长呈亚线性增长。
  • 经济可行性: 拍卖动态仿真表明,卖家收到的付款与其贡献质量成正比,买家在设定预算下获得接近最优的模型性能。

实际意义

  • 数据变现: 组织可以安全地出售 派生的 模型更新而非原始数据,在保护隐私的同时开辟新的收入渠道。
  • 安全协同 AI: 构建联合 AI 模型的公司(例如共享传感器数据的汽车车队)可以依赖 D2M 避免单点信任,并容忍受损节点。
  • 去中心化 AI 服务: 云无关的 AI 市场可以采用 D2M 协议提供“按模型更新付费”服务,降低对重量级中心化基础设施的需求。
  • 合规性对齐: 通过将原始数据保持在链外,仅暴露加密的模型更新,D2M 有助于满足 GDPR 类数据最小化要求。

局限性与未来工作

  • 模型复杂度: CIFAR‑10 的实验表明当前协议在深度、计算密集型模型上仍有困难;优化 CONE 以支持 GPU 加速训练是待解难题。
  • 网络开销: 虽然链下执行降低了链上 gas 成本,但验证轮仍会产生延迟,尤其在高延迟的区块链环境中更为明显。
  • 经济建模: 拍卖机制假设参与者理性且信息完备;真实市场可能需要更丰富的定价模型和声誉系统。
  • 未来方向: 将 D2M 扩展至支持差分隐私保证、集成零知识证明用于验证,并在异构数据领域(如时间序列、NLP)进行测试,都是有前景的后续工作。

作者

  • Yash Srivastava
  • Shalin Jain
  • Sneha Awathare
  • Nitin Awathare

论文信息

  • arXiv ID: 2512.10372v1
  • 分类: cs.CR, cs.AI, cs.DC, cs.LG
  • 发布时间: 2025 年 12 月 11 日
  • PDF: Download PDF
Back to Blog

相关文章

阅读更多 »