본문 바로가기

전체 글122

CLIP: Learning Transferable Visual Models From Natural Language Supervision 출처: https://arxiv.org/pdf/2103.00020History: CLIP -> BLIP -> BLIP2지난 20년간, 텍스트와 이미지쌍을 이용하여 모델을 학습시킴으로써 콘텐츠 기반의 이미지 retrieval을 계산하는 것에 대해 많은 연구가 있어왔다.  Abstract이제까지의 SOTA의 Computer vision 시스템들은 미리 정의된 카테고리의 데이터셋에 대해서 예측하도록 훈련되어 왔다. 이런 supervision방식은 generality와 usability를 한정짓게 된다. 다른 visual concept을 특정화지으려면 추가적인 라벨링된 데이터가 필요하기 때문이다. 이를 해결하기 위해, 이 논문에서는 어떠한 캡션이 어떠한 이미지에 붙여지는 지를 예측하는 간단한 사전 학습 task.. 2025. 3. 30.
DP (Dynamic Programming) 1. When to Use DPWhen it comes to solving an algorithm problem, especially in a high-pressure scenario such as an interview, half the battle is figuring out how to even approach the problem. In the first section, we defined what makes a problem a good candidate for dynamic programming. Recall:The problem can be broken down into "overlapping subproblems" - smaller versions of the original problem.. 2024. 12. 30.
ImageBind: One Embedding Space To Bind Them All 딥러닝 모델은 어떤 잠재공간에 데이터를 임베딩하는 함수로 볼 수 있다.- ImageBind는 6가지의 서로 다른 modality를 하나의 Joint Embedding space로 임베딩하는 모델이다.- Image, Video, Audio, Text, Thermal image, IMU, Depth를 Joint Embedding space에 임베딩하고 이를 활용해서 다양한 task를 수행한다.Cross-Modal RetrievalImageBind- Image-Paired 데이터들을 이용해 하나의 공통된 Representation Space를 학습한다.- 모델이 학습과정에서 보지 못한 모달리티 쌍들 간의 관계를 추론하는 emergent zero-shot task를 수행할 수 있다. 2024. 11. 21.
F1비자 학생들을 위한 CPT application 정복하기 참고: https://isss.oie.gatech.edu/content/curricular-practical-training-cpt-georgia-tech Curricular Practical Training | Office of International Education Curricular Practical Training isss.oie.gatech.edu 2024. 3. 24.
[인턴십 합격] Amazon 인턴십 합격수기 Amazon Software Development Engineer 인턴에 합격했다는 메일을 받았다! 면접이 끝난지 6일만이었다. 이번 아마존 인턴은 정말 되고 싶었던 이유가, 찐 "software development"를 할 수 있는 기회이기 때문이다. 대학교 주전공도, 회사도, 대학원 전공도 약간씩 Computer Science랑은 조금씩 거리가 있어서 정말 소프트웨어를 공부할 수 있는 기회는 그리 많지 않았던 것 같아 항상 아쉬웠었다. 그래서 이번 인턴 면접은 준비하는 과정 자체가 즐거웠다. 중간고사 시즌에, 과제, TA, 논문도 준비해야해서 정신없이 바빴는데 그래도 짬을 내서 leetcode 한문제씩 푸는 그 시간이 정말 귀했다. 대학원은 내가 원하는 것을 배우러 오는 곳인데, 만 26살이 되어서야.. 2024. 3. 16.
how to deal with: "Missing or invalid credentials. fatal: Authentication failed for 'https://github.com/username/repo.git'" Issue: when either "git push" or "git pull" Missing or invalid credentials. fatal: Authentication failed for 'https://github.com/username/repo.git' The problem occurred because of vscode error. I tried below and it went well. 1. Reloading the VSCode window (shift-control-P to open the Command Palette) 2. type in 'Developer: Reload Window' 3. press Enter. 2024. 3. 6.