1. 배경 CLIP과 같은 VLP (Vision-Language Pretrained Model) 은 대규모 이미지-텍스트 쌍을 학습하여 강력한 Zero-Shot 분류 성능을 보여준다. 하지만 여전히 Downstream Task에서 Fine-Tuning 없이 바로 활용하기에는 한계가 존재한다. 이를 해결하기 위해 다양한 접근법들이 제안되었다. ...
Cursor AI를 사용할 때 항상 insert 모드로 진입하는 문제가 발생하기도 합니다. 이 경우 매번 [insert] 키를 눌러서 Normal 모드로 진입을 해야하는 귀찮은 일이 생기기도 합니다. 이런 경우 아래의 간단한 기능을 통해 이런 문제를 해결할 수 있습니다.
Node.js는 브라우저 밖에서 자바스크립트를 실행할 수 있도록 해주는 런타임 환경입니다. 원래 자바스크립트는 웹 브라우저 안에서만 동작했는데, Node.js가 등장하면서 서버, 데스크탑, IoT 기기 등 어디서든 실행이 가능하게 되었습니다. 주요 활용분야는 웹 서버, 실시간 애플리케이션, 데스크탑 엡, CLI 도구 등 입니다. Winodws 환...
최근 VLM(Vision-Language Model) 모델을 단순히 사용하는 것 뿐만 아니라 다양한 학습 방법들에 대해서 연구되고 있다. 오늘은 그 중 소량의 데이터셋으로 CLIP 모델을 학습할 수 있는 방법을 소개한 CLIP-Adapter 논문에 대해서 소개하겠다. 1. 개요 CLIP 은 대규모 이미지-텍스트 쌍으로 학습되어 우수한 zero-...
최근 VLM(Vision-Language Model)에 대한 연구가 늘어나고, 실제 활용도가 높아지고 있다. 대표적으로 유명한 논문인 CLIP과 BLIP이 있는데 오늘은 BLIP에 대해서 알아보도록 하겠다. 1. 개요 BLIP은 Vision-Language-Pre-training에서 “이해(Understanding)” 과제와 “생성(Genera...
프로젝트나 업무를 수행하며 파이썬을 사용할 때 라이브러리나 파이썬 버전에 충돌을 방지하기 위해 Anaconda3나 도커 등을 통한 가상환경을 생성합니다. 이번 포스트에서는 파이썬 3.5부터 자체적으로 제공하는 venv를 통해 가상환경을 생성하고 활성화시키고, 비활성화시키고 삭제하는 방법에 대해 설명하도록 하겠습니다. 가상환경 생성 아래 명령어를 ...
최근 AI모델의 추론 속도와 자원사용률에 대한 경량화 이슈로 인해 tenssort 도입 및 변환에 시행착오를 겪고 있다. 그럼 tensorrt가 무엇이고, 어떤 효과가 있으며 설치 및 변환 방법에 대해 알아보겠다. 1. TensorRT는 무엇인가? TensorRT는 NVIDIA가 개발한 딥러닝 모델 추론 가속화 라이브러리이다. NVIDIA의 G...
최근 onnx-runtime 및 tensorrt 관련 작업을 하면서 최신 cuda 버전에 맞는 버전을 설치하다 보니 직접 빌드를 해야할 일이 생겼고, 여기에서 의존성 관련하여 cuda 및 cudnn 경로 관련 이슈가 있었다. 하지만 지금까지 pytorch를 gpu에서 이상없이 사용을 하였기에 의문이 생겨 알아보게 되었다. 1. CUDA Driver ...
이번 게시물에는 파이썬의 logging 라이브러리를 이용해 코드 진행상황을 기록하여 활용하는 방법을 알아보겠습니다. 1. 로그(log)란? 로그는 시스템이나 어플리케이션에서 발생하는 다양한 이벤트와 활동을 기록한 데이터를 의미합니다. 로그에는 주로 아래와 같은 내용들을 기록합니다. 타임 스탬프 : 시스템상 로그를 기록한 시간 정보를 의미합니다...
pip를 통해 라이브러리를 설치할 때 가끔 다음과 같은 오류가 발생합니다. ERROR: pip's dependency resolver does not currently take into account all the packages that are installed. This behaviour is the source of the following d...