هوش مصنوعی جدید ادوبی که با یک کلیک پس‌زمینه را حذف می‌کند

حذف پس‌زمینه از عکس یک فرایند وقت‌گیر است – اما محققانی از MIT، ادوبی و مایکروسافت تکنولوژی جدیدی را ایجاد نموده‌اند که امکان حذف پس‌زمینه ، حتی در اطراف لبه‌های مانند مو و خز را با تنها یک کلیک فراهم می‌کند. این فرآیند، به نام semantic soft segmentation شناخته می‌شود که با استفاده از رنگ و بافت به طور خودکار تصویر را لایه‌بندی می‌کند. این تکنولوژی در حال حاضر به اندازه کافی برای استفاده در وظایفی مانند ایجاد عکس‌های اینستاگرامی‌ بهتر و فیلترهای اسنپ‌چت خوب عمل می‌کند، اما محققان انتظار بازنگری‌هایی را در آینده برای این تکنولوژی دارند که امکان حذف پس‌زمینه با یک کلیک را برای برنامه‌های ویرایش عکس غیرحرفه ای و حتی ویدئو فراهم می‌کند.

انتخاب یک شی در عکس یک عمل مشترک برای ویرایشگران عکس است. با تصویری که به لایه‌ها تقسیم شده است، می‌توان یک پس‌زمینه شفاف ایجاد کرد و موضوع را در یک پس‌زمینه کاملا متفاوت قرار داد و یا تغییراتی را به موضوع و یا فقط پس‌زمینه، مانند تار شدن، اعمال کرد.

semantic soft segmentation از یادگیری ماشینی برای خودکارسازی انجام کارهای خسته کننده در ویرایش عکس استفاده می‌کند. شبکه عصبی تصویر را با استفاده از بافت و رنگ و همچنین عواملی مانند تشخیص ابعاد تحلیل می‌کند. با استفاده از این اطلاعات، نرم‌افزار به صورت خودکار تصویر را به لایه‌های مختلفی تقسیم می‌کند. هنگامی‌ که تصویر تقسیم شود، افکت‌هایی مانند تاری پس‌زمینه را حذف می‌کند و یا پس‌زمینه‌ی جدید را به راحتی بر روی تصویر اعمال می‌کند.

این روند در حال حاضر برای تصاویر ساکن کارایی دارد، اما تیم می‌گوید امیدوار است تحقیقات بیشتر به این روند برای استفاده در فیلم‌ها کمک کند. این تکنولوژی همچنین چندین دقیقه طول می‌کشد و تحقیقات بیشتر می‌تواند سرعت سیستم را بهبود بخشد. حتی در حالت ابتدایی ، تیم می‌گوید که این تکنولوژی می‌تواند برای ایجاد فیلتر‌های عکس در شبکه‌های اجتماعی که تنها پس‌زمینه را تنظیم می‌کنند یا به تصویر را از نوع دیگری از دوربین تقلید می‌کند – که بسیار شبیه یک حالت پرتره در گوشی‌های بدون دوربین دوگانه است- به کار گرفته شود.

Yagiz Aksoy محقق آزمایشگاه علوم کامپیوتر و هوش مصنوعی MIT می‌گوید:

به جای نیاز به ویرایشگر متخصصی که چندین دقیقه را به صورت فریم به فریم و پیکسل به پیکسل صرف تغییر در عکس کند، ما می‌خواهیم روند را ساده تر و سریع‌تر کنیم تا ویرایش تصویر به صورت حرفه‌ای برای  کاربران معمولی امکان‌پذیر باشد.  چشم انداز این است که به نقطه‌ای برسیم که در آن فقط به یک کلیک برای ترکیب این تصاویر و ایجاد دنیای فانتزی واقع‌گرایانه نیاز باشد.

این پژوهش اولین پروژه‌ای نیست که سعی در جداسازی خودکار موضوع و پس‌زمینه دارد. فتوشاپ یک ابزار انتخاب موضوع دارد که به شروع یک فرآیند مشابه کمک می‌کند و اینستاگرام  یک فیلتر برای افکت‌های پرتره مانند،در گوشی‌های بدون دوربین دوگانه دارد. فرایند جدید، با این حال، از آنچه محققان “انتقال نرمال” می‌نامند، برای تمام لایه‌ها استفاده می‌کند. این تکنولوژی لبه‌های واقع گرایانه‌تری را در تصویر نهایی ایجاد می‌کند، مخصوصا هنگام کار با لبه‌هایی که به طور سنتی انتخاب آن (مانند مو و خز) دشوار است.

این تحقیق در کنفرانس هفته گذشته  SIGGRAPH  در ونکوور به عنوان یک مقاله منتشر شد.