공대생 도전 일지

ESC task 설명목적데이터셋기존 kullm v3 학습에 사용한 데이터셋 + esconv 번역한 데이터기존 데이터셋 달라진 점우리 데이터셋 예시실험 결과분석 결과최종 모델 설명 + 데모? ESC task 설명ESC - Emotional Support Conversation감정적 지지를 제공하는 대화 시스템을 정의하는 작업 도움을 요청하는 사용자의 감정적 상태를 파악하고, 그들의 문제를 탐색한 뒤 위로하거나 적절한 조언을 제공, 사용자가 감정적 안정감을 찾도록 돕는 대화 형태 탐색 : 문제를 파악하기 위해 대화하는 단계위로 : 공감을 표현하고 그들의 감정에 대한 이해를 제공하는 단계행동 : 문제를 해결할 수 있는 행동을 제안하는 단계ESConv - Emotional Supprot Conversation ..

2024.09.27 - [인공지능/자연어 처리] - LLama3 학습 데이터 변환하여 LLama3.2 Sparse Autoencoder 학습하기 LLama3 학습 데이터 변환하여 LLama3.2 Sparse Autoencoder 학습하기기존에 공개된 학습 데이터를 통해 3.2에 사용할 수 있는 학습 데이터를 만들어 보겠습니다.import csvfrom datasets import load_datasetfrom transformers import AutoTokenizerfrom tqdm import tqdm # 진행 상태 표시를 위한yoonschallenge.tistory.com학습 하는 방법은 위의 글을 확인하면 볼 수 있습니다. 그리고 아래 글에서 학습 도중에 나타났던 문제점을 확인할 수 있습니다.20..