IC-Light: helyezzük a fotóinkat más megvilágításba/új környezetbe teljesen ingyenesen a böngészőben
11Az IC-Light egy olyan projekt, amely a képek megvilágítását manipulálja.
Az "IC-Light" név az "Imposing Consistent Light" (következetes fényt előidéző) kifejezés rövid leírása.
Jelenleg kétféle modellt adunk ki: szövegfüggő átvilágítási modellt és háttérfüggő modellt. Mindkét típus bemenetként előtér képeket fogad el.
Ebben a videóban bemutatom, hogy tudjuk a fotóink megvilágítását átalakítani az IC-Light segítségével. Több módszert is bemutatok, hogy mindezt a lehető legjobban és/vagy legegyszerűbben meg tudjuk tenni.
* Legyél Te is Tagja az Mp3Pintyo csatornának *
https://www.youtube.com/channel/UC-3YkVvPQbZiApqrRXEOaPg/join
*** DISCORD***
Mp3Pintyo szerver: https://discord.gg/NBgUuVDURG
*** Támogatás ***
Patreon: https://www.patreon.com/mp3pintyo
*** Linkek ***
GitHub IC-Light: https://github.com/lllyasviel/IC-Light
Hugging Face modellek: https://huggingface.co/lllyasviel/ic-light/tree/main
Hugging Face demo: https://huggingface.co/spaces/lllyasviel/IC-Light
Kutatási anyag Total Relighting: https://augmentedperception.github.io/total_relighting/total_relighting_paper.pdf
Kutatási anyag Relightful Harmonization: https://arxiv.org/pdf/2312.06886
Kutatási anyag SwitchLight: https://arxiv.org/pdf/2402.18848
Anaconda: https://www.anaconda.com/
Python: https://www.python.org/downloads/windows/
Git: https://git-scm.com/downloads
GitHub kijai ComfyUI-IC-Light: https://github.com/kijai/ComfyUI-IC-Light
GitHub huchenlei ComfyUI-IC-Light-Native: https://github.com/huchenlei/ComfyUI-IC-Light-Native
GitHub huchenlei sd-forge-ic-light: https://github.com/huchenlei/sd-forge-ic-light
Camenduru Twitter: https://twitter.com/camenduru/status/1788393502289596557
GitHub camenduru: https://github.com/camenduru/IC-Light-jupyter?tab=readme-ov-file
ComfyUI-Manager: https://github.com/ltdrdata/ComfyUI-Manager
ComfyUI telepítés: https://www.youtube.com/watch?v=XOooCXcAOU4
*** Telepítés kiegészítő ***
pip install timm==0.6.13
pip install dill==0.3.8
*** Kutatási anyagok összefoglalója ***
Total Relighting
Egy rendszer, amely képes egyetlen RGB képből és egy cél HDR világítási környezetből kiindulva realisztikusan újrafényezni a portrékat.
Mélytanulás: Több mélytanulási modult használnak a háttér előkészítésére, a világítás becslésére és a kompozit képek előállítására.
Fénytérképek: Egy új, pixelenkénti világítási reprezentációt alkalmaznak, amely külön kezeli a diffúz és a spekuláris fényvisszaverődést.
Gyakorlati alkalmazások: Az eljárás alkalmazható mobiltelefonos fényképezésre és videokonferenciákra, valamint a vizuális effektusok területén.
Relightful Harmonization
Világításra érzékeny portré háttér-cserélő módszer.
Világítási Információk Kódolása: A módszer egy világítási reprezentációs modult használ, amely a háttérképből kódolja a világítási információkat, és ezt az információt használja a generatív folyamat irányítására.
Világítási Jellemzők Igazítása: A háttérképből származó világítási jellemzőket összehangolják a teljes környezeti világítást reprezentáló panorámakörnyezeti térképekkel.
Fotorealizmus Finomhangolása: A módszer egy új adatszimulációs folyamatot használ, amely természetes képekből generál szintetikus képpárokat a modell finomhangolásához, hogy növelje a végeredmény fotorealizmusát.
Az eredmények jobb világítási koherenciát és vizuális hitelességet mutatnak a meglévő módszerekhez képest, és valós világú teszthelyzetekben is jól alkalmazhatók. Az összefoglaló célja, hogy a módszer lényegét könnyen érthetően közvetítse.
SwitchLight
Emberi portrék újrafényképezésére szolgáló keretrendszer.
A rendszer két fő elemből áll: egy fizikai alapú architektúrából és egy önellenőrzéses előképzési keretből. Az architektúra a Cook-Torrance visszaverődési modellt használja, amely pontosabban szimulálja a fény és a felületek közötti kölcsönhatásokat. Az előképzési keret lehetővé teszi a modell számára, hogy nagyobb adathalmazokból tanuljon, javítva a valós világban való teljesítményt.
Fizikai Alapú Architektúra: A Cook-Torrance modell segítségével pontosabban modellezi a fény és a felületek kölcsönhatásait.
Önellenőrzéses Előképzés: A modell képes nagyobb adathalmazokból tanulni, ami javítja a valós világban való teljesítményt.
Portré Újrafényképezés: A rendszer célja az emberi portrék megvilágításának módosítása, hogy azok természetesen illeszkedjenek az új környezetbe.
Alkalmazások: A keretrendszer alkalmazható virtuális valóságban (VR) és kiterjesztett valóságban (AR), valamint digitális tartalomkészítésben.
*** BUYING MY ARTS ***
► https://www.etsy.com/shop/mp3pintyo
► https://stock.adobe.com/contributor/211260791/zsolt
*** STAY ACTIVE FOR A FOLLOW ***
►TWITTER: https://twitter.com/Mp3Pintyo
►INSTAGRAM: https://www.instagram.com/mp3pintyo/
►PINTEREST: https://www.pinterest.com/mp3pintyo/
►SOUNDCLOUD: https://soundcloud.com/mp3pintyo