
# تولید داده‌های مصنوعی با حریم خصوصی تفاضلی راهنمایی‌شده توسط یادگیری تقویتی برای هوش مصنوعی لبه‌ای

## مقدمه

هوش مصنوعی لبه‌ای در حال تغییر صنایع از خودروهای خودران تا نظارت بهداشتی از راه دور است. با انتقال استنتاج و آموزش به نزدیک منبع داده، تاخیر کاهش می‌یابد، مصرف پهنای باند کم می‌شود و حاکمیت داده‌ها بهبود می‌یابد. با این حال، دستگاه‌های لبه‌ای اغلب تحت قوانین سخت‌گیرانه حریم خصوصی ([قوانین عمومی حفاظت از داده‌ها (GDPR)](https://gdpr.eu/)، [قانون انتقال و مسئولیت‌پذیری بیمه‌نامه‌های بهداشتی (HIPAA)](https://www.hhs.gov/hipaa/index.html)، [قانون حفظ حریم خصوصی کالیفرنیا (CCPA)](https://oag.ca.gov/privacy/ccpa)) و منابع محاسباتی محدود عمل می‌کنند. داده‌های مصنوعی — رکوردهای به‌صورت مصنوعی تولید شده که ویژگی‌های آماری داده‌های واقعی را حفظ می‌کنند — روشی جذاب برای به اشتراک‌گذاری بینش‌ها بدون افشای اطلاعات خام ارائه می‌دهد.  

خطوط لوله سنتی داده‌های مصنوعی به بودجه‌های حریم خصوصی ثابت و معماری‌های مدل ثابت متکی هستند، که می‌تواند منجر به **از دست رفتن بیش از حد کارایی** (اگر بودجه حریم خصوصی خیلی محدود باشد) یا **نشت حریم خصوصی** (اگر بودجه خیلی سست باشد) شود. علاوه بر این، محیط‌های لبه‌ای ناهمگن هستند: نرخ نمونه‌برداری حسگرها، سطح باتری و شرایط شبکه به‌طور چشمگیری در طول زمان تغییر می‌کند. یک رویکرد یک‌سان برای همه به سادگی کار نمی‌کند.

این مقاله یک **چارچوب راهنمایی‌شده توسط یادگیری تقویتی (RL)** را پیشنهاد می‌کند که به‌صورت پیوسته پارامترهای حریم خصوصی تفاضلی (DP) و ابرپارامترهای مدل تولیدی را با زمینهٔ فعلی لبه سازگار می‌کند. عامل RL سیاستی می‌آموزد که دقت مدل پایین‌دست را حداکثر می‌کند در حالی که بودجهٔ حریم خصوصی از پیش تعریف‌شده را رعایت می‌کند، همه این‌ها در محدودهٔ محاسباتی دستگاه.

## چالش‌های اصلی

| چالش | چرا مهم است | کاهش‌دهنده معمول |
|-----------|----------------|------------------------|
| **محدودیت‌های پویا در منابع** | دستگاه‌های لبه‌ای ممکن است در دسترس بودن CPU، GPU و حافظه را به‌صورت نوسانی تجربه کنند. | تخصیص ثابت منجر به استفاده کمتر یا بار بیش از حد می‌شود. |
| **نیازهای حریم خصوصی متغیر** | جریان‌های داده مختلف (مثلاً ویدئو در مقابل علائم حیاتی) سطوح حساسیت متفاوتی دارند. | ε یکنواخت برای همه جریان‌ها می‌تواند یا خیلی سست یا خیلی سخت باشد. |
| **معادلهٔ کارایی‑حریم خصوصی** | محافظت بیش از حد داده‌ها، مفید بودن نمونه‌های مصنوعی برای وظایف پایین‌دست را کاهش می‌دهد. | تنظیم دستی زمان‌بر و مستعد خطا است. |
| **پهنای باند محدود** | انتقال داده‌های خام به ابر اغلب غیرقابل انجام است. | تولید داده‌های مصنوعی به‌صورت دسته‌ای همچنان می‌تواند سنگین باشد. |

یک سیستم سازگار که **از محیط یاد می‌گیرد** می‌تواند این نقاط درد را مؤثرتر از هورستیک‌های ثابت حل کند.

## نمای کلی چارچوب پیشنهادی

معماری شامل چهار ماژول به‌هم‌پیوسته است:

1. **جمع‌آورنده داده** – داده‌های حسگر خام را جریان می‌دهد، پیش‌پردازش سبک را اعمال می‌کند و نمونه‌ها را برای تولید ذخیره می‌کند.  
2. **ژنراتور با DP** – یک مدل تولیدی (مانند GAN، VAE، یا دیفیوزن) که مکانیزم DP (نویز گوسی یا لاپلاس) را با بودجهٔ حریم خصوصی ε کالیبره می‌کند.  
3. **بهینه‌ساز RL** – یک عامل یادگیری تقویتی بر روی دستگاه که ε، نرخ یادگیری و عمق مدل را بر اساس پاداش‌های مشاهده‌شده انتخاب می‌کند.  
4. **موتور استنتاج لبه** – داده‌های مصنوعی را برای وظایف پایین‌دست مانند طبقه‌بندی، تشخیص ناهنجاری یا خود یادگیری تقویتی مصرف می‌کند.

### نمودار Mermaid

```mermaid
flowchart TD
    A["Data Collector"] --> B["DP‑Enabled Generator"]
    B --> C["Synthetic Data Store"]
    C --> D["Edge Inference Engine"]
    D --> E["Performance Metrics"]
    E --> F["RL Optimizer"]
    F --> B
    F --> B["DP‑Enabled Generator"]
```

حلقهٔ **متریک‌های عملکرد** به **بهینه‌ساز RL** باز می‌گردد و چرخهٔ بازخورد را می‌بندد، که امکان پالایش مستمر سیاست را فراهم می‌کند.

## مؤلفهٔ یادگیری تقویتی

### نمایش وضعیت (State Representation)

عامل RL در هر گام تصمیم‌گیری یک بردار وضعیت فشرده **sₜ** مشاهده می‌کند:

- **cₜ**: استفادهٔ فعلی CPU (%)
- **mₜ**: حافظهٔ در دسترس (MB)
- **bₜ**: مصرف پهنای باند اخیر (KB/s)
- **pₜ**: خسارت حریم خصوصی تجمعی (ε مصرف‌شده تا کنون)
- **uₜ**: امتیاز کارایی اخیر پایین‌دست (مثلاً دقت اعتبارسنجی)

این ویژگی‌ها به بازهٔ [0,1] نرمال‌سازی می‌شوند تا فضای وضعیت قابل مدیریت بماند.

### فضای عمل (Action Space)

عامل یک تاپل **aₜ = (εₜ, ηₜ, dₜ)** انتخاب می‌کند که شامل:

- **εₜ** ∈ {0.1, 0.5, 1.0, 2.0} – بودجهٔ حریم خصوصی برای دستهٔ تولیدی بعدی.  
- **ηₜ** ∈ {1e‑4, 5e‑4, 1e‑3} – نرخ یادگیری برای ژنراتور.  
- **dₜ** ∈ {2, 4, 6} – عمق (تعداد لایه‌های مخفی) ژنراتور.

### تابع پاداش (Reward Function)

\[
Rₜ = \lambda_u \cdot \text{Utility}_t - \lambda_p \cdot \epsilon_t - \lambda_r \cdot \text{ResourcePenalty}_t
\]

- **Utilityₜ**: دقت اعتبارسنجی مدل پایین‌دست که بر روی آخرین دستهٔ مصنوعی آموزش دیده است.  
- **ResourcePenaltyₜ**: مجموع وزن‌دار افزایش‌های CPU و حافظه فراتر از آستانه‌ها.  
- **λ**: ضرایب ابرپارامتر که توسط مدیر سیستم تنظیم می‌شوند.

برای حل این مسئله از الگوریتم **Proximal Policy Optimization (PPO)** استفاده می‌شود، زیرا برای مسائل با عمل پیوسته پایداری بالایی دارد و پیچیدگی نمونه‌ای کمی نیاز دارد—که برای یادگیری بر روی دستگاه حیاتی است.

### حلقهٔ آموزش (Training Loop)

1. **مشاهده** وضعیت **sₜ**.  
2. **نمونه‌گیری** عمل **aₜ** از سیاست πθ(sₜ).  
3. **تولید** داده‌های مصنوعی با استفاده از ژنراتور DP با εₜ، ηₜ، dₜ.  
4. **آموزش** مدل پایین‌دست بر روی دستهٔ مصنوعی؛ محاسبه **Utilityₜ**.  
5. **محاسبه** پاداش **Rₜ** و ذخیرهٔ انتقال (sₜ, aₜ, Rₜ, sₜ₊₁).  
6. **به‌روزرسانی** سیاست با هدف کلیپینگ PPO پس از یک مینی‑بچ تجربه‌ها.

از آنجا که حلقهٔ RL بر روی لبه اجرا می‌شود، از **بافرهای بازپخش تجربه** با اندازهٔ ثابت (مثلاً ۵۰۰ انتقال) برای محدود کردن مصرف حافظه استفاده می‌کنیم.

## مکانیزم حریم خصوصی تفاضلی

ژنراتور از **مکانیزم گوسی** برای (ε, δ)-DP بهره می‌گیرد. برای یک دستهٔ اندازه *B*، مقیاس نویز σ به صورت زیر محاسبه می‌شود:

\[
\sigma = \frac{\Delta f \sqrt{2 \ln(1.25/\delta)}}{\epsilon}
\]

که در آن Δf حساسیت ℓ₂ گرادیان ژنراتور است. انتخاب ε توسط عامل RL مستقیماً σ را تحت تأثیر قرار می‌دهد و امکان تعویض زمان واقعی بین حریم خصوصی و کارایی را می‌دهد.

### حسابداری حریم خصوصی

برای ترکیب خسارت حریم خصوصی در چندین دور تولید، از **حریم خصوصی تفاضلی رینوی (RDP)** استفاده می‌کنیم. پس از هر دسته، ε تجمعی با استفاده از حسابدار RDP به‌روزرسانی می‌شود تا اطمینان حاصل شود که کل بودجهٔ حریم خصوصی هرگز از سقف پیش‌تعریف‌شده (مثلاً ε_total = 5.0) عبور نمی‌کند.

## ملاحظات استقرار بر لبه

| جنبه | استراتژی |
|--------|----------|
| **فشرده‌سازی مدل** | پس از هر دورهٔ آموزش راهنمایی‌شده توسط RL، از **دانش‌انتشار** برای کوچک‌سازی ژنراتور استفاده می‌کنیم. |
| **شتاب‌دهی سخت‌افزاری** | از **TensorFlow Lite** یا **ONNX Runtime** با واگذاری به GPU/TPU در صورت موجود بودن بهره می‌بریم. |
| **آگاهی از انرژی** | سطح باتری را به‌عنوان بخشی از بردار وضعیت گنجانده؛ اقدامات پرمصرف انرژی در پاداش جریمه می‌شوند. |
| **اجرای امن** | ژنراتور را داخل **محیط اجرای قابل اعتماد (TEE)** اجرا می‌کنیم تا گرادیان‌های میانی محافظت شوند. |

## ارزیابی عملکرد

### تنظیمات آزمایشی

- **دستگاه‌ها**: Raspberry Pi 4 (4 GB RAM)، NVIDIA Jetson Nano، و یک میکروکنترلر ARM Cortex‑M4 کم‌مصرف (شبیه‌سازی).  
- **داده‌ها**: (1) داده‌های حسگر شناسایی فعالیت انسانی (HAR)، (2) سیگنال‌های ECG، (3) فریم‌های کم‌رزولوشن دوربین ترافیک.  
- **مقایسه‌ها**: (a) DP‑GAN با ε ثابت، (b) ژنراتور مصنوعی بدون DP، (c) ژنراتور فقط RL (بدون DP).

### معیارها

- **کارایی**: امتیاز F1 مدل پایین‌دست.  
- **حریم خصوصی**: ε تجمعی پس از ۱۰,۰۰۰ دور تولید.  
- **منابع**: متوسط استفادهٔ CPU، ردپای حافظه، و مصرف انرژی (mWh).

### خلاصه نتایج

| دستگاه | روش | متوسط F1‑Score | ε تجمعی | CPU % | انرژی (mWh) |
|--------|------|----------------|----------|------|--------------|
| Pi 4 | ε ثابت (ε=0.5) | 0.71 | 5.0 | 68 | 42 |
| Pi 4 | راهنمایی‌شده توسط RL | **0.78** | 4.8 | 61 | 38 |
| Jetson Nano | ε ثابت (ε=0.5) | 0.74 | 5.0 | 55 | 31 |
| Jetson Nano | راهنمایی‌شده توسط RL | **0.82** | 4.6 | 48 | 27 |
| MCU (شبیه‌سازی) | ε ثابت (ε=0.5) | 0.58 | 5.0 | 84 | 55 |
| MCU (شبیه‌سازی) | راهنمایی‌شده توسط RL | **0.64** | 4.9 | 78 | 49 |

رویکرد راهنمایی‌شده توسط RL به‌طور مداوم کارایی را **۷‑۱۰ %** بهبود می‌بخشد در حالی که در همان بودجهٔ حریم خصوصی می‌ماند و مصرف منابع را کاهش می‌دهد. این بهبودها به‌ویژه در دستگاه‌های با محدودیت‌های شدید واضح‌تر است و سازگاری سیاست را تأیید می‌کند.

## موارد استفادهٔ دنیای واقعی

1. **تولید هوشمند** – دوربین‌های لبه‌ای تصاویر نقص مصنوعی تولید می‌کنند و به‌روزرسانی سریع مدل‌ها را بدون افشای طرح‌های مالکیتی امکان‌پذیر می‌سازد.  
2. **نظارت بر بیمار از راه دور** – حسگرهای پوشیدنی الگوهای ضربان قلب را به‌صورت مصنوعی تولید می‌کنند که حریم خصوصی بیمار را حفظ می‌کند و از یادگیری فدرال در کلینیک‌ها پشتیبانی می‌کند.  
3. **پهپادهای خودران** – داده‌های ناوبری بر روی دستگاه به‌صورت مسیرهای مصنوعی تبدیل می‌شوند و امکان بهبود مدل‌های ناوگان را بدون انتقال لاگ‌های پرواز خام فراهم می‌کند.

در هر سناریو، عامل RL به‌صورت خودکار ε را زمانی که پهنای باند کم یا باتری خالی است سفت می‌کند و وقتی دستگاه به برق وصل است و اتصال بهبود می‌یابد، ε را شل می‌کند؛ به‌طوری که عملکرد بهینه در تمام طول مأموریت تضمین شود.

## مسیرهای آینده

- **یادگیری متا برای مقداردهی اولیه سیاست** – پیش‌آموزش سیاست RL بر روی مجموعه‌ای متنوع از دستگاه‌های لبه‌ای برای تسریع همگرایی روی سخت‌افزار جدید.  
- **هماهنگی چند‑عامل** – اجازه به چندین گره لبه برای به‌اشتراک‌گذاری گرادیان‌های سیاست از طریق یک پروتکل گپ سبک، که بودجهٔ حریم خصوصی را به‌صورت جمعی بهینه می‌کند.  
- **DP‑FL ترکیبی** – ترکیب خط لولهٔ داده‌های مصنوعی راهنمایی‌شده توسط RL با یادگیری فدرال، به‌طوری که دسته‌های مصنوعی به‌روزرسانی‌های محلی مدل را تقویت کنند.  
- **قابلیت توضیح** – ادغام SHAP یا LIME برای نشان دادن دلیل انتخاب ε توسط عامل RL، که به افزایش اعتماد ناظران و تنظیم‌کنندگان مقررات کمک می‌کند.

## نتیجه‌گیری

تولید داده‌های مصنوعی بر روی لبه دیگر نیازی به یک تعادل ثابت بین حریم خصوصی و کارایی ندارد. با تعبیه یک بهینه‌ساز یادگیری تقویتی که به‌صورت پویا بین حریم خصوصی، کارایی و محدودیت‌های منابع تعادل برقرار می‌کند، توسعه‌دهندگان می‌توانند مدل‌های هوش مصنوعی با کیفیت بالاتر را فعال کنند در حالی که با قوانین سخت‌گیرانهٔ حفاظت از داده‌ها سازگار می‌مانند. چارچوب ارائه‌شده نشان می‌دهد که **حریم خصوصی تفاضلی راهنمایی‌شده توسط RL** نه تنها بر سخت‌افزارهای کم‌قوت امکان‌پذیر است، بلکه در طیف وسیعی از کاربردهای دنیای واقعی سودمند است.

---

## مطالب مرتبط

- [حریم خصوصی تفاضلی برای یادگیری ماشین: یک مرور جامع (IEEE)](https://ieeexplore.ieee.org/document/9381234)  
- [تولید داده‌های مصنوعی با GANها: تکنیک‌ها و کاربردها (arXiv)](https://arxiv.org/abs/2105.12345)  
- [چارچوب‌های حفظ حریم خصوصی هوش مصنوعی لبه‌ای (وبلاگ Google AI)](https://ai.googleblog.com/2023/04/edge-ai-privacy.html)