빠르고 정확하며 상세한 라인 감지 전처리기
Anyline은 대부분의 이미지에서 개체 가장자리, 이미지 세부 정보 및 텍스트 콘텐츠를 정확하게 추출하는 ControlNet 라인 전처리기입니다. 사용자는 모든 유형의 이미지를 입력하여 선명한 가장자리, 충분한 세부 묘사 보존 및 충실도가 높은 텍스트를 갖춘 선 그림을 빠르게 얻을 수 있으며, 이는 Stable Diffusion에서 조건부 생성을 위한 입력으로 사용됩니다.
Anyline에 사용되는 모델과 알고리즘은 "TEED(Tiny and Efficient Model for the EdgeDetection Generalization)" 논문(arXiv:2308.06468)에서 비롯된 혁신적인 노력을 기반으로 합니다. ComfyUI의 TEED 사전 설정도 이 작업에서 유래하여 강력한 시각적 알고리즘으로 표시됩니다(TEED는 현재 최첨단입니다). 자세한 내용은 논문을 참고해주세요.
Anyline은 1280px의 처리 해상도를 사용하므로 이 해상도에서 비교가 이루어집니다. 일반적으로 사용되는 다른 라인 전처리기와 비교할 때 Anyline은 윤곽 정확도, 개체 세부 정보, 재료 질감 및 글꼴 인식(특히 대규모 장면)에서 상당한 이점을 제공합니다. 또한 대부분의 장면에서 노이즈를 줄이는 성능이 향상되어 생성 중 부정확성이 줄어들고 이미지 처리가 더 깔끔해집니다.
Anyline은 Mistoline ControlNet 모델과 결합하여 완전한 SDXL 워크플로우를 형성하여 정밀한 제어를 극대화하고 SDXL 모델의 생성 기능을 활용합니다. Anyline은 SD1.5의 ControlNet과 함께 SD1.5 워크플로우에서도 사용할 수 있지만 일반적으로 SDXL 워크플로우 내의 Anyline+MistoLine 설정에서 더 나은 성능을 발휘합니다.
참고: 최종 결과는 사용된 기본 모델에 따라 크게 달라집니다. 귀하의 필요에 따라 적절한 기본 모델을 선택하십시오.
곧 출시됩니다!
Anyline을 ComfyUI 플러그인으로 사용하려면 먼저 comfyui_controlnet_aux를 설치해야 합니다! 여기 지침을 따를 수 있습니다: https://github.com/Fannovel16/comfyui_controlnet_aux?tab=readme-ov-file#installation
comfyui_controlnet_aux를 설치한 후 다음 단계를 따르세요.
cd custom_nodes
git clone https://github.com/TheMistoAI/ComfyUI-Anyline.git
cd ComfyUI-Anyline
pip install -r requirements.txt
.pth
파일을 지정된 디렉터리에 배치합니다. 설치 시 ComfyUI에서 검색이나 마우스 오른쪽 버튼 클릭을 통해 Anyline 전처리기에 액세스할 수 있습니다. SDXL에서 Anyline+Mistoline을 사용하는 표준 작업 흐름은 다음과 같습니다.
여기에서 이 워크플로 JSON을 다운로드할 수 있습니다: ComfyUI 워크플로
Mikubill/sd-webui-controlnet#2907의 지침을 따르세요.
链接:https://pan.baidu.com/s/1ik11P_u1vK8mI4q33v0MTQ?pwd=v8f1
提取码:v8f1
@InProceedings { Soria_2023teed ,
author = { Soria, Xavier and Li, Yachuan and Rouhani, Mohammad and Sappa, Angel D. } ,
title = { Tiny and Efficient Model for the Edge Detection Generalization } ,
booktitle = { Proceedings of the IEEE/CVF International Conference on Computer Vision (ICCV) Workshops } ,
month = { October } ,
year = { 2023 } ,
pages = { 1364-1373 }
}