Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

Sign up for GitHub

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

Jump to bottom

공백 음절의 임베딩을 더하는 모델 실험 #49

Closed
krikit opened this issue Feb 7, 2019 · 1 comment
Closed

공백 음절의 임베딩을 더하는 모델 실험 #49

krikit opened this issue Feb 7, 2019 · 1 comment
Assignees
@krikit
Milestone
0.4

Comments

@krikit
Copy link
Member

krikit commented Feb 7, 2019

현재 모델은 공백 음절도 다른 음절과 동일하게 문맥에서 하나의 음절로 위치를 차지하고 있는데, 이렇게 하지 않고 어절의 좌/우 경계에 해당하는 음절에 각각 ""와 "" 가상 음절의 임베딩을 elementwise로 더하는 것으로 실험을 해보려 합니다. 이 모델의 성능이 기존 모델과 비슷한 성능을 나타낸다면, 이때 공백 음절을 더할 때 dropout을 적용해 보려고 합니다. 그러면 기존에 dropout에 따라 공백이 들어가거나 빠지면서 위치도 들쑥날쑥해지는 문제도 해결할 수 있지 않을까 생각합니다.
@krikit krikit self-assigned this Feb 7, 2019
@krikit krikit added this to the 0.4 milestone Feb 11, 2019
krikit added a commit that referenced this issue Feb 11, 2019
@krikit
좌/우 공백 가상 음절의 임베딩을 elementwise로 더하는 모델의 학습 코드 완료 #49
78930c2
@krikit
Copy link
Member Author

krikit commented Feb 11, 2019 •
edited
Loading

실험 결과

2019-02-11 1 22 06

분석 내용은 이곳에

@krikit krikit mentioned this issue May 16, 2019
Closed
@krikit krikit closed this as completed May 16, 2019
@krikit krikit mentioned this issue Jun 2, 2019
Merged
4 tasks
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Assignees

@krikit krikit

Labels
None yet
Projects
None yet
Milestone
0.4
Development

No branches or pull requests
1 participant
@krikit