Skip to content

Releases: yoon-gu/neuqes-101

Phase 5 원고 PDF v0.6.2 (한글 출력 조판 + 사실관계 보정)

Choose a tag to compare

@yoon-gu yoon-gu released this 21 Jun 08:31

Ch 1-34 (1024쪽).

이번 버전 변경:

  • 한글 print 출력 조판 개선 — listings의 CJK 줄바꿈 한계를 fvextra(bookoutputbox, breakanywhere)로 해결. 한글 생성 출력이 페이지 폭 안에서 깨끗하게 줄바꿈됩니다.
  • 원고 사실관계 보정 (WikiDocs 검토 기준 12종) — 챕터 교차참조 off-by-one, 파라미터 합계, 기대치↔실측, 학습 step/시간, Yelp 도메인, Ch 32 토크나이저(BPE 2048), DPO/GRPO beta 등.

Phase 5 원고 PDF v0.6.1 (Ch 1-34, 색인 정리)

Choose a tag to compare

@yoon-gu yoon-gu released this 20 Jun 13:13

변경 내용

  • Ch 32-34 Diffusion LM 원고를 Ch 1-34 통합 PDF에 반영했습니다.
  • 책 뒤 색인을 전반적으로 정리하고, 한글 용어가 영어/API 용어보다 먼저 보이도록 정렬했습니다.
  • 손실 함수, 출력 헤드, 토크나이저, 태스크, 학습 단계, 평가, 하드웨어, Hugging Face API 축의 공통 색인을 보강했습니다.
  • GRPO와 Diffusion LM 관련 핵심 용어 색인을 추가했습니다.
  • 표지, 서문, README의 원고 범위 표기를 Ch 1-34 기준으로 맞췄습니다.

파일

  • neuqes-101-ch01-34-manuscript.pdf

Phase 5 원고 PDF v0.6.0 (Ch 1-34)

Choose a tag to compare

@yoon-gu yoon-gu released this 20 Jun 12:50

요약

  • 출판용 LaTeX 원고 PDF를 Ch 1-34 범위로 업데이트했습니다.
  • Phase 5 초안으로 Ch 32-34 Diffusion LM 흐름을 포함합니다.
  • 산출물: neuqes-101-ch01-34-manuscript.pdf

포함 범위

  • Ch 1-31: 기존 ML/BERT/GPT/LLM 정렬 원고
  • Ch 32: Diffusion LM 입문
  • Ch 33: Diffusion LM 샘플러 실험
  • Ch 34: 한국어 Diffusion LM 안정화

빌드 확인

  • XeLaTeX / latexmk 기준 PDF 빌드 완료
  • 최신 PDF 크기: 약 8.4MB

Phase 4 원고 PDF v0.5.7 (원고-실행본 일치 교정)

Choose a tag to compare

@yoon-gu yoon-gu released this 19 Jun 03:26

Ch 1-31 원고 PDF. 원고 출력값을 실행본(executed/) 기준으로 전수 교정한 판본입니다.

  • Ch 01-06: bookoutput 출력 수치를 최신 executed/(Colab T4) 기준 재동기화
  • Ch 08: 정적/동적 padding 본문 서술을 실제 결과(절감 0%)에 맞게 정정
  • Ch 26: 모델 파라미터 약 3M → 4.22M, 수렴 가이드 실측 보정
  • Ch 14: 코드 렌더 정리

원고·WikiDocs·실행본 세 산출물 수치 일치 확인.

Phase 4 원고 PDF v0.5.6

Choose a tag to compare

@yoon-gu yoon-gu released this 06 Jun 22:39

변경 내용

  • 31장 GRPO 검증 보상 정렬 원고 초안을 추가했습니다.
  • Phase 4 GPT/LLM autoregressive 흐름을 24-31장까지 완결했습니다.
  • 24장에 Phase 3에서 Phase 4로 넘어가는 다리 섹션을 보강했습니다.
    • encoder-only / decoder-only / encoder-decoder 구조 비교
    • BERT에서 GPT로 전환하는 이유
    • 생성형 AI 등장 타임라인과 SFT/DPO/GRPO 흐름 정리
  • Ch 1-31 통합 원고 PDF를 최신 빌드본으로 교체했습니다.

검증

  • latexmk -xelatex -interaction=nonstopmode -halt-on-error book/main.tex
  • fatal error, undefined reference, missing character 없음
  • Phase 5 / 32장 원고화는 이번 릴리즈 범위에서 제외했습니다.

산출물

  • neuqes-101-ch01-31-manuscript.pdf

기준 커밋

  • 13da1a2 Update Ch24 manuscript bridge section

Phase 4 원고 PDF v0.5.5

Choose a tag to compare

@yoon-gu yoon-gu released this 06 Jun 11:09

변경 내용

  • 28장 KoGPT2 SFT 원고 초안을 추가했습니다.
  • 29장 분야별 벤치마크 평가 원고 초안을 추가했습니다.
  • 30장 DPO 선호 정렬 원고 초안을 추가했습니다.
  • Ch 1-30 통합 원고 PDF를 XeLaTeX로 빌드해 첨부했습니다.

검증

  • latexmk -xelatex -interaction=nonstopmode -halt-on-error book/main.tex
  • fatal error, undefined reference, missing character 없음

산출물

  • neuqes-101-ch01-30-manuscript.pdf

Phase 4 원고 PDF v0.5.2

Choose a tag to compare

@yoon-gu yoon-gu released this 05 Jun 16:38

포함 범위

  • 출판용 원고 PDF: 1--27장
  • Ch 27: KoGPT2 계속 사전학습 (Korean Continual Pretraining)
  • Ch 26 한국어 scratch GPT와 Ch 27 KoGPT2 continual pretraining 비교
  • Ch 27 부록: 한국어 토크나이저 품질 분석 그림 포함

검증

  • XeLaTeX 기반 PDF 빌드 확인
  • PDF: neuqes-101-ch01-27-manuscript.pdf

Phase 4 원고 PDF v0.5.1

Choose a tag to compare

@yoon-gu yoon-gu released this 04 Jun 16:18

포함 범위

  • 출판용 원고 PDF: 1--26장
  • Phase 4 시작부 반영: GPT/LLM autoregressive 흐름
  • Ch 24: 작은 GPT + TinyStories from-scratch Causal LM
  • Ch 25: GPT-2 continual pretraining
  • Ch 26: 한국어 작은 GPT + TinyStories-Korean from-scratch Causal LM

검증

  • XeLaTeX 빌드 확인 완료
  • PDF: neuqes-101-ch01-26-manuscript.pdf

Phase 3 원고 PDF v0.4.5

Choose a tag to compare

@yoon-gu yoon-gu released this 31 May 03:59

1-23장 출판용 LaTeX 원고 PDF입니다.

  • 22장: 한국어 작은 BERT MLM 사전학습 초안 추가
  • 23장: 한국어 작은 BERT NSMC 파인튜닝 초안 추가
  • Phase 3을 19-23장 구조로 정리
  • 17-23장 원고와 대응 그림 자산을 포함
  • 색인, 그림 목록, 표 목록을 포함한 XeLaTeX 빌드 확인

PDF 파일명: neuqes-101-ch01-23-manuscript.pdf

Phase 2 원고 PDF v0.4.0

Choose a tag to compare

@yoon-gu yoon-gu released this 25 May 15:23

변경 사항

  • Ch 15 한국어 BERT 이진 분류(NSMC) 출판 원고 초안을 추가했습니다.
  • Ch 16 한국어 BERT 다중 클래스 분류(KLUE-YNAT) 출판 원고 초안을 추가했습니다.
  • Phase 2 속지와 표지 범위/버전 표기를 1-16장, v0.4.0으로 갱신했습니다.
  • Ch 15/16의 핵심 시각화 그림 4종을 원고에 추가하고 본문에서 참조했습니다.
  • XeLaTeX로 Ch 1-16 원고 PDF 빌드를 검증했습니다.

PDF: neuqes-101-ch01-16-manuscript-v0.4.0.pdf