학과소식학생프로젝트

학생프로젝트


스토리 CMF의 분석을 통한 연속적 시각화 기술 (김*민)

조회 166

소프트웨어융합대학 2024-08-13 16:34

스토리 CMF의 분석을 통한 연속적 시각화 기술 (김*민)

내용

추진 배경

현재 TEXT TO IMAGE 변환 기술의 활용 가능성에 의문을 품고서 이미지 생성시

일관성과 연속성을 유지시키는 기술을 생각해보았습니다.

목표 및 내용

text to image에 대해서 일관성과 연속성을 유지하기 위해서 CMF 데이터 셋을 활용하여서 이미지의 연속성을 유지하고 , 이미지의 SEED 값을 활용하여서 캐릭터의 일관성을 유지하는 기술을 목표로합니다.

  • 수행결과
  • NER 알고리즘을 활용하여서 입려된 텍스트에서 인물로 판단되는 텍스트를 분류한 후 인물의 이미지를 생성한다. 이 후 CLIPPING MAGIC 으로 배경을 제거하고 이미지에 SEED 값을 부여 함으로서 이미지 내의 캐릭터에 대한 일관성을 유지하도록 한다,

    BERT 모델을 이용하여서 텍스트에서 감정을 분석 후 CMF 모델과 접합하여서 적합한 이미지의 필터를 적용시킨다.