فناوری پروتز مجازی لباس با هدف تولید تصاویر واقعگرایانه از افراد در لباسهای مختلف طراحی شده است. رویکردهای فعلی که از مدلهای انتشار نهان استفاده میکنند، هرچند در همسانسازی لباس عملکرد خوبی دارند، اما در حفظ مناطقی که نباید تغییر کنند با مشکل مواجهاند و مصنوعات ناخواسته ایجاد میکنند. یکی از چالشهای رایج، انتقالهای ناگهانی هنگام جایگزینی محتوای اصلی در این مناطق است.
محققان ART-VITON را پیشنهاد کردهاند؛ چارچوبی مبتنی بر انتشار هدایتشده با معیارهای اندازهگیری که پروتز مجازی را به عنوان یک مسئله معکوس خطی بازنویسی میکند. این روش از حلکنندههای همسار استفاده میکند که بهتدریج سازگاری اندازهگیری را اعمال کرده و تغییرات ناگهانی در مناطق غیرپروتزی را کاهش میدهند. این رویکرد مشکل واگرایی معنایی را در طول فرآیند تولید که منجر به ایجاد مصنوعات میشود، برطرف میکند.
این چارچوب از مقداردهی اولیه مبتنی بر باقیمانده پیشین برای کاهش ناهمخوانی بین آموزش و استنتاج استفاده میکند. همچنین از نمونهبرداری هدایتشده با معیارهای اندازهگیری بدون مصنوعات بهره میبرد که ترکیبی از سازگاری داده، تصحیح در سطح فرکانس و نویززدایی استاندارد دورهای است. این رویکرد چندوجهی، پایبندی به معیارهای اندازهگیری را در کنار حفظ کیفیت مصنوعاتمحور سنتز تضمین میکند.
آزمایشها روی مجموعه دادههای VITON-HD، DressCode و SHHQ-1.0有效性 ART-VITON را نشان میدهد. این روش بهطور مؤثر هویت و پسزمینه را حفظ کرده، مصنوعات لبهای را حذف میکند و بهطور مداوم کیفیت بصری و مقاومت را در مقایسه با خطوط پایه پیشرفته بهبود میدهد.
گفتگو