직장인자기계발 10 패스트캠퍼스 환급챌린지 10일차 : RAG 본 포스팅은 패스트캠퍼스 환급 챌린지 참여를 위해 작성하였습니다.*_1. 학습 인증샷 4장 이상 포함*_① 오늘자 날짜, 공부 시작 시각 포함 사진 1장② 오늘자 날짜, 공부 종료 시각 포함 사진 1장③ 1개 클립 수강 인증 사진 (강의장 목록 캡쳐, 강의 내용이 담긴 수강화면이 보이지 않도록) 1장④ 학습 인증샷 1장 이상 (ex. 필기 촬영, 작업물, 등)2. 학습 후기 700자 이상 (공백 제외)임베딩텍스트를 AI를 이용해 숫자, 특히 벡터(Vector)로 변환하는 것텍스트를 ‘임베딩 모델’이라는 AI를 활용하여 벡터로 변환함임베딩 모델다운로드를 하여 사용하는 것보안이슈나 파인튜닝을 해야하는 경우 이점이 있음API로 유료로 사용하는 것임베딩을 하는 이유텍스트를 임베딩하고 나면 텍스트끼리의 유사도를 .. 2025. 4. 10. 패스트캠퍼스 환급챌린지 9일차 : 파인튜닝 본 포스팅은 패스트캠퍼스 환급 챌린지 참여를 위해 작성하였습니다.*_1. 학습 인증샷 4장 이상 포함*_① 오늘자 날짜, 공부 시작 시각 포함 사진 1장② 오늘자 날짜, 공부 종료 시각 포함 사진 1장③ 1개 클립 수강 인증 사진 (강의장 목록 캡쳐, 강의 내용이 담긴 수강화면이 보이지 않도록) 1장④ 학습 인증샷 1장 이상 (ex. 필기 촬영, 작업물, 등)2. 학습 후기 700자 이상 (공백 제외)딥러닝 모델의 학습 두 단계Pre-training (사전학습) : 기본 지식 학습마치 학교에서 기초 교육을 받는 것과 같음대규모 데이터 (인터넷의 텍스트, 이미지 등)을 사용해 모델에게 기본적인 이해력을 가르침엄청난 양의 데이터가 필요 (수백~수천 GB)매우 비싼 컴퓨팅 자원 필요 (수천만~수억 원의 비용).. 2025. 4. 9. 패스트캠퍼스 환급챌린지 8일차 : 허깅페이스, 토크나이저와 템플릿 본 포스팅은 패스트캠퍼스 환급 챌린지 참여를 위해 작성하였습니다.*_1. 학습 인증샷 4장 이상 포함*_① 오늘자 날짜, 공부 시작 시각 포함 사진 1장② 오늘자 날짜, 공부 종료 시각 포함 사진 1장③ 1개 클립 수강 인증 사진 (강의장 목록 캡쳐, 강의 내용이 담긴 수강화면이 보이지 않도록) 1장④ 학습 인증샷 1장 이상 (ex. 필기 촬영, 작업물, 등)2. 학습 후기 700자 이상 (공백 제외)허깅페이스데이터 로드urllib.request.urlretrieve("[https://raw.githubusercontent.com/ukairia777/tensorflow-nlp-tutorial/main/10.%20RNN%20Text%20Classification/dataset/naver\_shopping... 2025. 4. 8. 패스트캠퍼스 환급챌린지 7일차 : ChatGPT API를 이용한 데이터 생성 본 포스팅은 패스트캠퍼스 환급 챌린지 참여를 위해 작성하였습니다.*_1. 학습 인증샷 4장 이상 포함*_① 오늘자 날짜, 공부 시작 시각 포함 사진 1장② 오늘자 날짜, 공부 종료 시각 포함 사진 1장③ 1개 클립 수강 인증 사진 (강의장 목록 캡쳐, 강의 내용이 담긴 수강화면이 보이지 않도록) 1장④ 학습 인증샷 1장 이상 (ex. 필기 촬영, 작업물, 등)2. 학습 후기 700자 이상 (공백 제외)ChatGPT API를 이용한 데이터 생성Colab으로 실습 가능답변얻기completion = client.chat.completions.create( model="", messages=\[ {"role": "system", "content": ""}, {"role": "user", "content".. 2025. 4. 7. 패스트캠퍼스 환급챌린지 6일차 : 프롬프트 엔지니어링 본 포스팅은 패스트캠퍼스 환급 챌린지 참여를 위해 작성하였습니다.*_1. 학습 인증샷 4장 이상 포함*_① 오늘자 날짜, 공부 시작 시각 포함 사진 1장② 오늘자 날짜, 공부 종료 시각 포함 사진 1장③ 1개 클립 수강 인증 사진 (강의장 목록 캡쳐, 강의 내용이 담긴 수강화면이 보이지 않도록) 1장④ 학습 인증샷 1장 이상 (ex. 필기 촬영, 작업물, 등)2. 학습 후기 700자 이상 (공백 제외)프롬프트 엔지니어링프롬프트 엔지니어링은 AI 언어모델에게 원하는 결과를 얻기위해 입력을 설계하는 기술프롬프트 엔지니어링이 중요한 이유 (LLM 엔지니어 관점)같은 요청이라도 물어보는 방식에 따라 답변 품질이 크게 달라짐GPT-4 API로 LLM학습데이터를 만들 때 중요LLaMA나 Qwen으로 파인튜닝할때 조.. 2025. 4. 6. 패스트캠퍼스 환급챌린지 5일차 : 인코더와 디코더가 문제를 푸는 방식 본 포스팅은 패스트캠퍼스 환급 챌린지 참여를 위해 작성하였습니다.*_1. 학습 인증샷 4장 이상 포함*_① 오늘자 날짜, 공부 시작 시각 포함 사진 1장② 오늘자 날짜, 공부 종료 시각 포함 사진 1장③ 1개 클립 수강 인증 사진 (강의장 목록 캡쳐, 강의 내용이 담긴 수강화면이 보이지 않도록) 1장④ 학습 인증샷 1장 이상 (ex. 필기 촬영, 작업물, 등)2. 학습 후기 700자 이상 (공백 제외)인코더와 디코더의 문제 풀이 방식 : 분류 (Classification)BERT레이블을 숫자로 바꿔서 풀어낸다 (긍정 =1, 부정 =0)[CLS] 토큰을 사용해서 문장 전체 정보를 담는다이 [CLS] 토큰 위에 간단한 분류기를 얹어서 정답을 맞춤e.g. “이 영화는 훌륭하다” -> [CLS] 처리 -> 1 .. 2025. 4. 5. 패스트캠퍼스 환급챌린지 4일차 : BART & T5 본 포스팅은 패스트캠퍼스 환급 챌린지 참여를 위해 작성하였습니다.*_1. 학습 인증샷 4장 이상 포함*_① 오늘자 날짜, 공부 시작 시각 포함 사진 1장② 오늘자 날짜, 공부 종료 시각 포함 사진 1장③ 1개 클립 수강 인증 사진 (강의장 목록 캡쳐, 강의 내용이 담긴 수강화면이 보이지 않도록) 1장④ 학습 인증샷 1장 이상 (ex. 필기 촬영, 작업물, 등)2. 학습 후기 700자 이상 (공백 제외)인코더-디코더 구조 모델인코더, 디코더 이점을 모두 살려서 pre-training한 BART와 T5BART (Bidirectional Auto-Regressive Transformer)인코더 -> 양쪽 문맥으로부터 중간단어 예측 -> BERT -> Natural Language Understanding에 강.. 2025. 4. 4. 패스트캠퍼스 환급챌린지 3일차 : BERT & GPT 본 포스팅은 패스트캠퍼스 환급 챌린지 참여를 위해 작성하였습니다.*_1. 학습 인증샷 4장 이상 포함*_① 오늘자 날짜, 공부 시작 시각 포함 사진 1장② 오늘자 날짜, 공부 종료 시각 포함 사진 1장③ 1개 클립 수강 인증 사진 (강의장 목록 캡쳐, 강의 내용이 담긴 수강화면이 보이지 않도록) 1장④ 학습 인증샷 1장 이상 (ex. 필기 촬영, 작업물, 등)2. 학습 후기 700자 이상 (공백 제외)BERT는 생성에 맞지 않음자연어 ‘이해’에 강한 트랜스포머 인코더로 만들어짐‘생성’은 디코더에 어울림. 따라서, 글쓰기와 같은 ‘생성’ 문제를 푸는 것에는 적합하지 않음BERT로 풀 수 있는 문제 #1 - 분류텍스트를 이해하는 능력에서는 GPT보다 뛰어남생성을 하지 않아도 풀 수 있는 문제로 텍스트 ‘분류.. 2025. 4. 3. 패스트캠퍼스 환급챌린지 2일차 : BERT 본 포스팅은 패스트캠퍼스 환급 챌린지 참여를 위해 작성하였습니다.*_1. 학습 인증샷 4장 이상 포함*_① 오늘자 날짜, 공부 시작 시각 포함 사진 1장② 오늘자 날짜, 공부 종료 시각 포함 사진 1장③ 1개 클립 수강 인증 사진 (강의장 목록 캡쳐, 강의 내용이 담긴 수강화면이 보이지 않도록) 1장④ 학습 인증샷 1장 이상 (ex. 필기 촬영, 작업물, 등)2. 학습 후기 700자 이상 (공백 제외)트랜스포머의 셀프 어텐션 (Self-attention)입력문장을 트랜스포머에 넣으면, 입력문장에 있는 모든 단어는 자기자신과 주변에 있는 모든 단어와 유사도를 계산함실제로 연관이 있는 단어들은 유사도가 높게 나오게 최적화를 하면서, 결국에 각 단어와의 연관관계를 찾을 수 있는 메커니즘e.g. 구글의 ‘The.. 2025. 4. 2. 이전 1 2 다음
