본문 바로가기

Project5

Instruct Pix2Pix 모델을 활용한 포켓몬 채색 Raw DatasetKaggle에서 공개된 포켓몬 이미지 데이터셋을 사용.이후에 전처리 편의성을 위해 png 형식에서 jpg 형식으로 변환.구분형식비고이미지 파일[이미지 파일명(Index)].png · 총 819장의 rgb 이미지 · (256,256,3) 크기의 이미지Create CaptionRGB 이미지에 대해서 CLIP Interrogator를 사용하여 caption을 생성. CLIP Interrogator는 CLIP과 BLIP을 결합하여 이미지의 시각적 특징을 프롬프트로 변환.BLIP으로 이미지에 대한 caption을 생성.위 caption을 기반으로 CLIP Interrogator는 프롬프트 라이브러리를 통해 다양한 후보 생성.CLIP으로 이미지와 해당 텍스트들의 유사도를 계산하고, 가장 높은 유.. 2025. 7. 7.
무단횡단 보행자 Detection 성능 향상 1. Raw DatasetSegmentation DatasetImages: 396개, Labels: 396개 (mask images)구분형식비고라벨 파일[이미지 파일명].png이미지 파일명(확장자 제외)과 동일한 이름의 png파일클래스 IDInteger0: 배경(인도, 건물 등), 1: 도로, 2: 횡단보도, 3: 캡션Detection Dataset1차 데이터셋2차 데이터셋Images: 794개, Labels: 794개Images: 3130개, Labels: 3130개 구분형식비고라벨 파일[이미지 파일명].txt이미지 파일명(확장자 제외)과 동일한 이름의 txt 파일Bbox 표기[클래스 ID] [중심 X] [중심 Y] [너비 W] [높이 H]빈칸으로 구분하며 클래스 ID는 정수이다. 바운딩 박스의 중심 .. 2024. 11. 19.
이미지 분류를 이용한 국내 여행지 추천 PPT해외 여행지 Top5 선정기사: https://www.dnews.co.kr/uhtml/view.jsp?idxno=202301101336396370499 [코로나 빗장 풀린 해외여행] 한국인 인기 해외여행지 TOP5는? www.dnews.co.kr 위의 기사를 보면 인기있는 해외 여행지 top5는 일본, 베트남, 태국, 필리핀, 대만 순인 것으로 나타났다.한국 여행지 Top25 선정블로그: https://leejh0624.tistory.com/188 국내 여행지 베스트 50 (1위~25위) - CNN 추천이어서 국내 관광지 25위부터 1위입니다. 25위 광한루 전남 남원을 대표하는 관광지로 춘향전의 배경이 되는 곳입니다. 1963년 보물로 지정되어 있으며 소설에서는 이 정자안에서 춘향이와 몽룡이lee.. 2024. 6. 13.
움직이는 배경에서 작은 객체 분류 Paper & PosterKCC(한국정보과학회)에서 개최한 논문 경진대회에 제출하기 위한 프로젝트이다.작은 객체를 인식하기 위해 단순한 object detection task가 아닌 시간 정보를 이용한 video classification 모델의 구조를 이용하였다. 기본 base가 되는 모델로는 X3D 모델을 사용하였다. 이 모델은 원본 영상을 프레임 단위로 나눈 이후에 새롭게 여러 개의 클립을 생성하여 시간정보를 포함하여 학습을 진행한다. 작은 객체의 존재 여부를 파악하기 위해 프레임 단위로 객체가 존재하면 라벨을 1, 부재인 경우에는 0으로 라벨링하였다.그러나, 실험을 진행하기에 앞서 데이터셋 자체가 라벨이 0인 영상은 객체가 없는 단순히 배경만 존재하는 클립이기에 절대적인 양이 부족하였다. 그렇기에.. 2024. 5. 29.
ChatGPT, DALLE2 API를 활용하여 인공지능 카카오톡 챗봇 만들기 카카오 챗봇에서 ChatGPT와 DALLE2를 API를 통해 사용할 수 있도록 했다.1. 카카오채널 세팅(1) 카카오 비즈니스 홈페이지로 이동- https://business.kakao.com/ (2) 오른쪽 상단의 '내 비즈니스' 클릭 (3) 왼쪽 상단의 '채널' 클릭 (4) '새 채널 만들기' 클릭- 일반 채널로 개설 - 생성한 채널로 들어간 후, 오른쪽 하단의 '채널 공개'와 '검색 허용'을 on으로 변경- 왼쪽 상단의 채널의 '챗봇'을 클릭- '봇 만들기' 클릭- '카카오 챗봇' 클릭- 챗봇 생성2. 기능 구현(1) Import Moduleimport jsonimport openaiimport threadingimport timeimport queue as qimport osfrom transla.. 2024. 5. 27.