FlashTex: LightControlNet மூலம் வேகமான, மீண்டும் ஒளிரூட்டக்கூடிய வலைப்பின்னல் மெருகூட்டல்
Author
Venue
ECCV 2024
Abstract
3D மெஷ்களுக்குக் கைமுறையாக டெக்ஸ்ச்சர்களை உருவாக்குவது, நிபுணத்துவம் வாய்ந்த காட்சி உள்ளடக்க உருவாக்குநர்களுக்குக் கூட, அதிக நேரம் எடுத்துக்கொள்ளும் ஒரு பணியாகும். பயனர் வழங்கும் உரைப் பிரம்பை அடிப்படையாகக் கொண்டு, ஒரு உள்ளீட்டு 3D மெஷிற்கு தானாகவே டெக்ஸ்ச்சர் செய்வதற்கான ஒரு வேகமான அணுகுமுறையை நாங்கள் முன்மொழிகிறோம். முக்கியமாக, எங்கள் அணுகுமுறை, உருவாகும் டெக்ஸ்ச்சரில் ஒளியூட்டலை, மேற்பரப்புப் பொருள்/பிரதிபலிப்புத்தன்மையிலிருந்து பிரித்துக்காட்டுகிறது. இதன் மூலம், அந்த மெஷ் எந்தவொரு ஒளிச்சூழலிலும் சரியாக மீண்டும் ஒளியூட்டப்பட்டு ரெண்டர் செய்யப்பட முடியும். கண்ட்ரோல்நெட் கட்டமைப்பை அடிப்படையாகக் கொண்ட, லைட்கன்ட்ரோல்நெட் என்ற ஒரு புதிய உரை-படம் மாடலை நாங்கள் அறிமுகப்படுத்துகிறோம். இது விரும்பிய ஒளியை ஒரு நிபந்தனைப் படமாக மாடலுக்குக் குறிப்பிட அனுமதிக்கிறது. எங்கள் உரை-கோடு குழாய் பின்னர் இரண்டு கட்டங்களில் கோட்டை உருவாக்குகிறது. முதல் கட்டம், LightControlNet-ஐப் பயன்படுத்தி மெஷின் பார்வைக்கு இணக்கமான குறிப்பீட்டு காட்சிகளின் ஒரு செறிவற்ற தொகுப்பை உருவாக்குகிறது. இரண்டாம் கட்டம், மேற்பரப்புப் பொருளை ஒளியிலிருந்து பிரித்தெடுக்கும் அதே வேளையில், டெக்ஸ்சர் தரத்தை அதிகரிக்க LightControlNet உடன் செயல்படும் ஸ்கோர் டிஸ்டில்லேஷன் சாம்பிளிங் (SDS) அடிப்படையிலான டெக்ஸ்சர் மேம்பாட்டைப் பயன்படுத்துகிறது. எங்கள் வழிமுறை, உயர்-தரமான மற்றும் மீண்டும் ஒளிரூட்டக்கூடிய டெக்ஸ்சர்களை உருவாக்கும் அதே வேளையில், முந்தைய உரை-முதல்-டெக்ஸ்சர் முறைகளை விட குறிப்பிடத்தக்க அளவு வேகமானது.
