헤매어도 한 걸음씩

최근 4개월간 이직을 준비하며 여러 기업의 면접을 진행했습니다. 이번 글에서는 그 과정에서 경험했던 면접 질문들과 느낀 점들을 정리해보려고 합니다. 이직은 여전히 진행 중이며, 각 기업에서 공통적으로 받았던 질문들과 면접을 통해 느낀 점 위주로 작성했습니다. 목차는 아래와 같습니다.Table of Contents1. 면접 진행 회사 리스트2. 면접 질문   - 데이터 분석 및 모델 해석 관련   - LLM 관련    - 인성 및 기타 앞서 제 소개를 간단히 하자면, 저는 중견기업 AI/ML팀에서 데이터 사이언티스트로 약 3년간 근무한 경험이 있습니다. 이 기간 동안 AWS 클라우드 환경을 기반으로 데이터 분석, 머신러닝 모델 개발(예측 모델링 및 이상 탐지), LLM 챗봇 개발 PoC, RAG 시스템 구..

평소 추천 알고리즘에 관심이 있어 대표적인 추천 모델 중 하나인 NCF(Neural Collaborative Filtering)와 LightFM을 테스트해 봤습니다. 추천 시스템은 사용자의 선호도를 기반으로 적절한 아이템을 추천하는 시스템입니다. 본 포스팅에서는 상품 조회 이력 데이터를 활용하여 사용자 맞춤형 추천을 제공하기까지의 과정과, 각 모델의 특징 및 성능 비교, 그리고 과정별 고민과 해결 방법을 공유하고자 합니다.  일부 코드만 포함되어 있으며, 중요하다고 생각한 부분 및 고민했던 부분을 위주로 작성했습니다.  1. EDA 및 기본 전처리사용한 데이터는 각 유저의 상품 조회 이력 및 상품 정보가 담긴 parquet 파일입니다. 약 160만개 행*10개의 컬럼으로 구성되어 있으며, 주요 컬럼으로는..

지원 동기  지인분께서 글또라는 커뮤니티를 추천해 주셨는데, 마침 10기 모집을 하고 있어서 바로 지원했다. 이번이 마지막 기수라 더 망설임이 없었던 것 같다. 지원서를 작성하며 삶의 지도를 주제로 글을 쓰게 되었고, 나라는 사람을 이루는 것들에 대해서 생각해 볼 수 있었다.사회생활을 하고부터, 특히 회사를 다니면서부터 '사람이 전부' 라는 생각이 강해지는 것 같다. 인간은 사회적 동물이라 혼자서 살아갈 수 없는 존재다 라는 말을 차치하고도 사람과의 관계에서 얻는 배움과 경험이 내 삶에 많은 영향을 미치고 있다는 것을 매 순간 느낀다. 물론 혼자 있는 시간을 통해 내 생각을 정리하는 것도 중요하지만, 결국 사람과의 관계 속에서 나라는 존재가 더 풍성해지고 있다고 생각한다. 아마도 내가 속한 사회적 역할이..

AWS에서 VPC와 Subnet을 생성하여 다음과 같은 인프라를 구축했다. 이때 NAT Gateway 관련 헷갈렸던 부분을 정리한다. NAT Gateway에 대한 AWS의 설명은 다음과 같다. NAT Gateway는 NAT(Network Address Translation; 네트워크 주소 변환) 서비스입니다. 프라이빗 서브넷의 인스턴스가 VPC 외부의 서비스에 연결할 수 있지만 외부 서비스에서 이러한 인스턴스와의 연결을 시작할 수 없도록 NAT Gateway를 사용할 수 있습니다. 잘 이해가 안 되어 추가로 정리한 바는 다음과 같다. NAT Gateway는 Private Subnet이 인터넷과 통 신하기 위한 아웃바운드 인스턴스. Private Network가 외부에서 요청되는 인바운드는 필요없더라도 인..

원문 : https://www.cs.umd.edu/~samir/498/Amazon-Recommendations.pdf 사용자가 선호할만한 아이템을 추천함으로써 여러 가지 항목 중 사용자에게 적합한 특정 항목을 추천하여 제공하는 알고리즘매출과 직결되는 system이기 때문에 많은 연구가 있음 ex. 넷플릭스, 구글, 아마존Item-to-Item Collaborative Filtering : 1998년 Amazon에서 처음 사용 Problems: E-commerce recommendation algorithms often operate in a challenging environment.대용량 데이터의 처리half of second 안으로 처리해야하는 real time 추천새로운 USER가 왔을때 어떻게 추..