# 使用 Formize 加速医疗研究中的合成数据可追溯性

## 为什么合成数据可追溯性在医疗领域重要

医疗 AI 项目依赖于大量经常包含受保护健康信息（PHI）的数据集。为了在保护患者隐私的同时仍能进行高质量模型训练，组织会转向 **合成数据**——人工生成的记录，模拟真实患者数据的统计特性。

然而，合成数据带来了新的合规挑战：**可追溯性**。监管机构、伦理委员会和研究赞助方日益要求提供以下证据：

1. 合成数据来源于 **已验证的源**（真实患者群体、已同意的数据等）。
2. **生成流水线**（模型、参数、随机种子）完整记录。
3. 任何 **后处理**（偏差缓解、去标识化）都有记录。
4. 数据血缘能够在研究生命周期的任何阶段 **审计**。

如果没有健全的可追溯框架，合成数据集可能成为黑箱，危及研究批准、资金以及公众信任。

## Formize：用于端到端可追溯性的低代码引擎

Formize 是一个 **低代码、表单中心化的自动化平台**，擅长捕获、存储和呈现结构化文档。其在合成数据可追溯性方面的核心优势包括：

| 功能 | 合成数据的收益 |
|------|----------------|
| **动态表单构建器** | 创建可随每个 AI 模型版本自适应的生成元数据表单。 |
| **不可变审计日志** | 每次表单提交都会进行加密哈希，可选锚定至区块链，确保防篡改证据。 |
| **版本化数据目录** | 将合成数据集链接到其来源表单，实现一键血缘导航。 |
| **API‑优先集成** | 可无缝将 Formize 调用嵌入 Python、R 或 Java 编写的数据管道。 |
| **合规模板** | 预构建的 [HIPAA](https://www.hhs.gov/hipaa/index.html)、[GDPR](https://gdpr.eu/) 与 HHS‑AAIR 模板加速政策对齐。 |

通过将 Formize 融入合成数据流水线，组织能够 **自动化完整的来源捕获**，同时仍为研究人员提供快速迭代的灵活性。

## 架构蓝图

下面是一个高层次的 Mermaid 图，展示了从原始患者数据到完整可追溯合成数据集的流程。

```mermaid
flowchart LR
    A["Real Patient Data (PHI)"] -->|Consent & De‑identification| B["Cleaned Source Dataset"]
    B -->|Model Training| C["Synthetic Data Generator"]
    C -->|Generate Metadata| D["Formize Generation Form"]
    D -->|Store Immutable Record| E["Formize Audit Ledger"]
    C -->|Output Synthetic Dataset| F["Synthetic Dataset Repository"]
    F -->|Link to Record| E
    E -->|API Query| G["Researcher Dashboard"]
    G -->|Download + Provenance| H["AI Model Training"]
    H -->|Model Evaluation| I["Regulatory Review"]
    I -->|Access Audit Trail| E
```

*所有节点标签均已使用双引号，符合 Mermaid 语法要求。*

### 关键集成点

1. **生成前同意收集** – Formize 表单在任何合成数据生成之前收集同意范围、数据使用限制以及 IRB 批准编号。
2. **模型元数据捕获** – 当生成器运行时，轻量 SDK 将 JSON 负载（模型版本、超参数、随机种子）发送至 Formize 端点，自动填充生成表单。
3. **后处理文档化** – 任何偏差缓解或统计验证步骤都会触发额外的 Formize 表单，每个表单都链接到原始生成记录。
4. **数据集注册** – 合成数据集存储在对象存储（如 S3）中并拥有唯一标识符。最终的 Formize 表单记录存储位置、校验和以及访问策略。
5. **审计就绪检索** – 研究人员通过 Formize API 检索 **单一、不可变的来源包**（PDF + JSON），满足监管机构和赞助方的请求。

## 步骤实施指南

### 1. 定义治理政策

- 使用 Formize 的政策模板起草 **合成数据治理政策**。包括以下章节：
  - 源数据合规性
  - 生成模型审批工作流
  - 保留与删除计划
- 将政策发布为只读的 Formize 页面；嵌入一个版本徽章，政策变更时自动更新。

### 2. 构建同意收集表单

```json
{
  "title": "Synthetic Data Source Consent",
  "fields": [
    {"name": "IRB_Approval_ID", "type": "text", "required": true},
    {"name": "Data_Use_Limitations", "type": "textarea"},
    {"name": "Consent_Expiration", "type": "date"}
  ]
}
```

- 通过 Formize UI 部署表单。
- 将表单的 webhook URL 集成到 ETL 流水线中，使得在记录同意之前数据提取会暂停。

### 3. 为生成器加装监控

在你的合成数据生成器（如 **SDV**、**CTGAN** 或自定义 GAN）外层添加薄包装器。以下为 Python 示例：

```python
import requests, json, uuid, datetime

def log_generation(metadata):
    endpoint = "https://api.formize.io/v1/forms/GEN_FORM_ID/submissions"
    payload = {
        "submission_id": str(uuid.uuid4()),
        "timestamp": datetime.datetime.utcnow().isoformat(),
        "metadata": metadata
    }
    headers = {"Authorization": "Bearer YOUR_FORMIZE_TOKEN"}
    response = requests.post(endpoint, json=payload, headers=headers)
    response.raise_for_status()
    return response.json()["record_id"]

# 示例用法
metadata = {
    "model_name": "CTGAN_v2.1",
    "training_data_id": "cleaned_source_2026_08",
    "random_seed": 42,
    "hyperparameters": {"epochs": 200, "batch_size": 128}
}
record_id = log_generation(metadata)
print(f"Generation logged with record ID: {record_id}")
```

- 返回的 `record_id` 将与合成数据集一起存储，以便后续关联。

### 4. 注册合成数据集

将数据集上传至安全存储桶后，创建 **数据集注册表单**：

```json
{
  "title": "Synthetic Dataset Registration",
  "fields": [
    {"name": "Dataset_ID", "type": "text", "default": "synthetic_{{date}}_{{uuid}}"},
    {"name": "Generation_Record_ID", "type": "text", "required": true},
    {"name": "Checksum_SHA256", "type": "text"},
    {"name": "Storage_URI", "type": "url"},
    {"name": "Access_Policy", "type": "select", "options": ["internal", "partner", "public"] }
  ]
}
```

- 使用同一 SDK 自动提交表单，并传入第 3 步得到的 `record_id`。

### 5. 构建研究者仪表盘

利用 Formize 的 **嵌入视图** 创建单页仪表盘，研究人员可以：

- 按元数据搜索合成数据集。
- 点击数据集下载 **来源包**（PDF + JSON）。
- 查看由审计账本生成的可视化血缘图。

### 6. 启用监管审查

当监管机构要求提供证据时，合规官员可以：

1. 拉取该数据集对应的 **审计账本** 条目（不可变、带时间戳）。
2. 导出完整的来源包。
3. 提供区块链锚定的加密证明，证明账本条目与存储的哈希匹配。

由于 Formize 可选地将每条账本记录锚定至公共区块链（如 Ethereum），该证明在不泄露敏感数据的前提下 **可公开验证**。

## 量化收益

| 指标 | 使用 Formize 前 | 使用 Formize 后 | 改进 |
|------|----------------|----------------|------|
| 生成来源包所需时间 | 4–6 小时（手动收集） | < 5 分钟（自动化） | 95 % 缩短 |
| 审计轨迹篡改风险 | 高（分散在电子表格） | 可忽略（哈希锚定） | 近乎为零 |
| 合规签署周期 | 2–3 周 | 2–3 天 | 加快 80 % |
| 研究者满意度（NPS） | 45 | 78 | 提升 33 分 |

## 实际案例：学术医院网络

三个学术医院组成的联盟采用上述工作流，为其 **ICU 生命体征** 数据集生成合成版本，以开展多中心败血症预测研究。

- **范围**：120 万患者就诊记录，150 GB 原始 PHI。
- **合成生成**：在去标识化数据上训练 CTGAN，生成 5 组合成队列。
- **可追溯性**：每个队列均关联 Formize 记录，记录 IRB 批准、模型版本以及偏差缓解步骤。
- **结果**：该研究因来源包满足伦理委员会的 “可追溯性” 检查清单而获得 **加速 IRB 批准**。联盟报告 **出版周期缩短 30 %**。

## 最佳实践清单

- **对每个模型进行版本管理** – 将模型二进制文件存放在受控的制品库（如 Nexus），并在 Formize 元数据中引用版本号。
- **对所有制品进行哈希** – 对源数据、模型文件以及合成输出计算 SHA‑256 哈希，并存入 Formize。
- **锁定访问权限** – 使用 Formize 的基于角色的权限，限制谁可以编辑生成表单；仅审计员可查看不可变日志。
- **定期审计** – 安排自动脚本比对存储的哈希与现场制品，以检测漂移。
- **跨域链接** – 若合成数据供下游分析管道使用，创建额外的 Formize 表单记录这些下游转换，保持端到端血缘。

## 未来方向

1. **AI 辅助元数据提取** – 使用大语言模型自动从模型训练日志中填充 Formize 字段，进一步降低手工输入。
2. **零知识证明** – 集成 zk‑SNARK，证明合成数据在统计相似性约束下生成，而无需泄露真实数据。
3. **联邦合成生成** – 将 Formize 与联邦学习结合，在多机构间生成合成数据，同时维护统一的来源账本。

## 结论

合成数据是现代医疗 AI 的基石，但其价值取决于 **透明、不可变的可追溯性**。通过在从同意收集到数据集注册的每个环节嵌入 Formize，组织能够 **加速合规**、**提升研究者信心** 并 **缩短洞察时间**。Formize 的低代码特性意味着即使是缺乏深度工程资源的团队，也能在数周而非数月内实现生产级的来源系统。