2024 NLP 구현 스터디

1. 스터디 소개

스터디 기본사항

  • 스터디 시간: 매주 화요일 15:00~16:00 (팀원 사정에 따라 시간 변경)
  • 스터디 장소: 인하대학교 하이테크관 스터디룸 / 오프라인(ZOOM)
  • 스터디 교재: 트랜스포머를 활용한 자연어 처리

스터디 방식

  • 공부 내용에 대해 발표자 1인 발표
  • 스터디원 (발표자 포함): 질문 2개 이상 답변과 함께 준비합니다.
  • 발표자 발표 이후, 사전에 준비해둔 질문들을 통해 토론식으로 공부합니다.
    • 질문 준비 관련
      • 질문 조건:
        • 본인이 생각하기에 중요해보이는 것에 대해 질문을 준비해주세요 🙂
        • 간단해보이거나 어렵거나 minor해보이거나 상관없습니다
        • 다른 사람들 답변 들어보면서, 답변에 대해 지속적으로 물어보는 식으로 다른 사람들의 답변을 계속 보강하고자 합니다.
      • 질문 example:
        • BERT는 트랜스포머의 Decoder 부분을 제외하고 사용하였는데, 그 이유는 무엇일까요?
        • self-attention을 설명해주세요.
    • 발표 준비 관련
      • 발표 형식은, 노션 형식, PPT 형식 등 제약이 없습니다.
      • 10분~30분 분량으로 발표를 준비합니다.
      • 이론 설명 위주로 준비합니다.
      • 중요한 코드에 대해서는 발표에 포함합니다.

스터디 활동 기록

  • 매주 일요일까지 공부한 내용을 정리해서 Github에 올립니다.
    • Github 관련
      • 발표자: Github에 발표 자료를 올립니다.
      • 전원: Github에 각자 정리한 내용을 올립니다.

스터디 규칙

  • 스터디에 참여하기 어려운 경우에는 최소 1일 전에 단톡방에 이야기합니다.
  • 출석 및 발표 준비에 한해서 벌점 부여합니다.
    • 벌점 내역
      • 스터디 불참(무통보): 벌점 2점
      • 공부 내용 정리 미수행: 벌점 1점
      • 발표 준비 미수행: 벌점 2점
  • 벌점 1점당 2000원의 벌금을 걷겠습니다. (벌금으로 맛있는 거 사먹어요 🙂)

BOAZ 스터디 규칙

  • 방학 중 스터디 7회 이상 진행
  • 스터디 당일 인증샷을 찍어서 네이버 카페에 글을 게시합니다.
  • BOAZ 출석부 관리합니다. (출석, 지각, 결석 체크용)

2. 스터디 계획표

1주차: 트랜스포머 소개 (1.1절~2.2절)

2024년 1월 23일 김도환

2주차: 텍스트 분류 (2.3절~3.5절)

2024년 1월 30일 권준혁

3주차: 텍스트 생성 (5.1절~5.7절)

2024년 2월 6일 김도환

4주차: 질문 답변 (6.2절 + 7.1절)

2024년 2월 13일 최선호

5주차: 질문 답변 (7.2절~7.4절)

2024년 2월 20일 권준혁

6주차: 효율적인 트랜스포머 구축 (8.1절~8.3절)

2024년 2월 27일 최선호

7주차: 효율적인 트랜스포머 구축 (8.4절~8.8절)

2024년 3월 5일 김도환