Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

Sign up for GitHub

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

Jump to bottom

Document corpus format and process for training #30

Closed
cynthia opened this issue Dec 13, 2018 · 1 comment
Closed

Document corpus format and process for training #30

cynthia opened this issue Dec 13, 2018 · 1 comment
Assignees
@krikit
Milestone
0.3

Comments

@cynthia
Copy link
Contributor

cynthia commented Dec 13, 2018

For users who would like to retrain the network on a different corpus, there is mo documentation; it would be neat to have documentation on the corpus format and training pipeline.
@krikit
Copy link
Member

krikit commented Dec 14, 2018

학습 코드는 정리 중에 있습니다. 정리 후 문서와 함께 공개할 예정입니다. v0.3으로 일단 마일스톤을 잡아놓겠습니다.

@krikit krikit added this to the 0.3 milestone Dec 14, 2018
@krikit krikit self-assigned this Jan 27, 2019
krikit added a commit that referenced this issue Jan 31, 2019
@krikit
학습 스크립트를 추가하기 위해 rsc/lib 아래의 python 모듈들을 src/main/python/khaiii 아래로 정…
3d537dc 
…리. type hint 관련 코드 리팩토링 #30
krikit added a commit that referenced this issue Jan 31, 2019
@krikit
세종 코퍼스로부터 음절단위 정렬을 수행하는 스크립트 추가 #30
4c04053
krikit added a commit that referenced this issue Jan 31, 2019
@krikit
학습 코퍼스를 dev/test/train으로 분할하는 스크립트 추가 #30
fac247d
krikit added a commit that referenced this issue Jan 31, 2019
@krikit
입, 출력 vocab을 생성하는 스크립트 추가 #30
420cbc7
krikit added a commit that referenced this issue Jan 31, 2019
@krikit
모델 학습을 위한 모듈과 스크립트 추가 #30
8eed3eb
krikit added a commit that referenced this issue Jan 31, 2019
@krikit
batch grow 파라미터, epoch 개념을 없애고 학습과정을 단순화함 #30
f9d97d3
krikit added a commit that referenced this issue Jan 31, 2019
@krikit
학습이 완료된 모델 파일을 pickle 형태로 저장하는 스크립트 추가 #30
cf8269b
krikit added a commit that referenced this issue Jan 31, 2019
@krikit
학습된 모델을 명령창에서 실행해볼 수 있는 데모 스크립트 추가 #30
4f33102
krikit added a commit that referenced this issue Jan 31, 2019
@krikit
기분석 사전을 자동으로 추출하는 스크립트 추가 #30
817d670
krikit added a commit that referenced this issue Jan 31, 2019
@krikit
오분석 패치 후보를 추출하는 스크립트 추가 #30
259ad5b
krikit added a commit that referenced this issue Jan 31, 2019
@krikit
오분석 패치 후보를 검증하는 스크립트 추가 #30
19f3083
krikit added a commit that referenced this issue Jan 31, 2019
@krikit
train/bin 아래 스크립트를 train으로 이동 #30
0d6a398
krikit added a commit that referenced this issue Jan 31, 2019
@krikit
학습 코드를 기존 방식으로 회귀 #30
586fc01
krikit added a commit that referenced this issue Jan 31, 2019
@krikit
오픈소스 고지문 업데이트 #30
d673ca9
krikit added a commit that referenced this issue Feb 3, 2019
@krikit
성능저하의 원인을 해결하고 epoch 단위로 단순화한 코드 다시 적용 #30
adef433
krikit added a commit that referenced this issue Feb 5, 2019
@krikit
--check-step, --batch-grow 옵션 삭제 #30
28df3f2
krikit added a commit that referenced this issue Feb 10, 2019
@krikit
학습 스크립트를 추가하기 위해 rsc/lib 아래의 python 모듈들을 src/main/python/khaiii 아래로 정…
918955f 
…리. type hint 관련 코드 리팩토링 #30
krikit added a commit that referenced this issue Feb 10, 2019
@krikit
세종 코퍼스로부터 음절단위 정렬을 수행하는 스크립트 추가 #30
eb69cf3
krikit added a commit that referenced this issue Feb 10, 2019
@krikit
학습 코퍼스를 dev/test/train으로 분할하는 스크립트 추가 #30
2405585
krikit added a commit that referenced this issue Feb 10, 2019
@krikit
입, 출력 vocab을 생성하는 스크립트 추가 #30
281f0d4
krikit added a commit that referenced this issue Feb 10, 2019
@krikit
모델 학습을 위한 모듈과 스크립트 추가 #30
ad99b4f
krikit added a commit that referenced this issue Feb 10, 2019
@krikit
batch grow 파라미터, epoch 개념을 없애고 학습과정을 단순화함 #30
d995b52
krikit added a commit that referenced this issue Feb 10, 2019
@krikit
학습이 완료된 모델 파일을 pickle 형태로 저장하는 스크립트 추가 #30
3097e6e
krikit added a commit that referenced this issue Feb 10, 2019
@krikit
학습된 모델을 명령창에서 실행해볼 수 있는 데모 스크립트 추가 #30
5753e17
krikit added a commit that referenced this issue Feb 10, 2019
@krikit
기분석 사전을 자동으로 추출하는 스크립트 추가 #30
9f72716
krikit added a commit that referenced this issue Feb 10, 2019
@krikit
오분석 패치 후보를 추출하는 스크립트 추가 #30
a2df224
krikit added a commit that referenced this issue Feb 10, 2019
@krikit
오분석 패치 후보를 검증하는 스크립트 추가 #30
4d6fc45
krikit added a commit that referenced this issue Feb 10, 2019
@krikit
train/bin 아래 스크립트를 train으로 이동 #30
7626005
krikit added a commit that referenced this issue Feb 10, 2019
@krikit
학습 코드를 기존 방식으로 회귀 #30
b9f0001
krikit added a commit that referenced this issue Feb 10, 2019
@krikit
오픈소스 고지문 업데이트 #30
ef8dba1
krikit added a commit that referenced this issue Feb 10, 2019
@krikit
성능저하의 원인을 해결하고 epoch 단위로 단순화한 코드 다시 적용 #30
2b24c89
krikit added a commit that referenced this issue Feb 10, 2019
@krikit
--check-step, --batch-grow 옵션 삭제 #30
90bd910
krikit added a commit that referenced this issue Feb 10, 2019
@krikit
수정한 패딩 관련 오류를 이미지에 반영 #30
ec1ef73
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Assignees

@krikit krikit

Labels
None yet
Projects
None yet
Milestone
0.3
Development

No branches or pull requests
3 participants
@cynthia @krikit @hubert-lee