Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

형태소 오분석 케이스 신고 #88

Open
shin285 opened this issue Feb 4, 2020 · 8 comments · Fixed by #91
Open

형태소 오분석 케이스 신고 #88

shin285 opened this issue Feb 4, 2020 · 8 comments · Fixed by #91
Assignees

Comments

@shin285
Copy link
Member

shin285 commented Feb 4, 2020

Original issue : https://github.com/shineware/KOMORANAdmin/issues/51#issue-558897734

안녕하세요, 일괄 처리가 가능해 보이는 오분석 유형을 발견하게 되어 신고합니다.

  • 문제 유형
  1. 잘못된 체언(NN류)과 조사결합: 유종성 체언 + 무종성 체언과 결합되는 조사
    예시) 대학로 - 대학/NNG 로/JKB
    예시) 보문로 - 보문/NNG 로/JKB

  2. 잘못된 동사(VV)와 전성어미 결합: 무종성 동사 + 유종성 동사와 결합되는 조사
    예시) 가을 - 가/VV 을/ETM

  • 바른 결합
  1. 체언+조사 결합 형태
무종성 체언 유종성 체언 발견된 오분석유형
주격조사 가/JKS 이/JKS
보격조사 가/JKC 이/JKC
목적격조사 ㄹ/JKO, 를/JKO 을/JKO
호격조사 야/JKV 아/JKV
접속조사 와/JC,나/JC,랑/JC 과/JC,이나/JC,이랑/JC
부사격조사 와/JKB,로/JKB 과/JKB,으로/JKB 미남로 - 미남/NNG 로/JKB, 대학로 - 대학/NNG 로/JKB, 구남로 - 구남/NNG 로/JKB, 보문로 - 보문/NNG 로/JKB
보조사 는/JX, 란/JX 은/JX, 이란/JX
  1. 동사+관형형 전성어미 결합형태
무종성 동사 유종성 동사 발견된 오분석유형
관형형 전성어미 ㄹ/ETM, ㄴ/ETM 을/ETM, 은/ETM 가을 - 가/VV 을/ETM, 그리은 - 그리/VV 은/ETM
명사형 전성어미 ㅁ/ETN 음/ETN 그리음 - 그리/VV 음/ETN
@songyonge
Copy link

songyonge commented Feb 5, 2020

  • 황토/NNG 은/JX - 아래의 규칙에 위배되는 분석입니다.
무종성 체언 유종성 체언
보조사 는/JX, 란/JX 은/JX, 이란/JX
  • 황토/NNG 은/ETM - 이러한 분석도 한국어문법에 어긋납니다.
    체언류(NN류)에 바로 어미(EP,EC,EF,ETN,ETM)은 결합될 수 없습니다.

@shin285
Copy link
Member Author

shin285 commented Feb 5, 2020

@songyonge 확인감사드립니다. 해당 내용 정리해서 적용하도록 하겠습니다. 혹시 위 내용 외에 추가적으로 결합할 수 없는 규칙들이 많이 있을 것 같은데 괜찮으시다면 contribution 가능하실까요?

@songyonge
Copy link

@shin285 넵! 환경(재택, 윈도우OS 등)과 프로세스(작업 영역, 작업 로깅 등)를 간략하게 구두로 설명 부탁드립니다.

@shin285
Copy link
Member Author

shin285 commented Feb 9, 2020

@songyonge 따로 정해진 환경과 프로세스는 없습니다만, 어떻게 하면 쉽게 contribution 하실 수 있는지 고민해보겠습니다.
그리고 현재 테스트 케이스 작성 중인데 마늘는을 입력 하였을 때 마늘/NNG 이/VCP 는/ETM의 결과로 나오고 가위은을 입력하였을 때 가위/MAG 은/JX의 결과로 나옵니다. 이것도 이상해보이는데 확인 부탁드려도 될까요?

shin285 added a commit that referenced this issue Feb 9, 2020
shin285 added a commit that referenced this issue Feb 9, 2020
* add combination rule checker

* add TODO comment

* Add test case for issue #88 and #90
@songyonge
Copy link

문법은 맞지만, 역시 적합하지 않은 경우에 문법이 적용되고 있습니다.

  1. 서술격조사 "이/VCP", "아니/VCN"의 경우,
    "음/ETN", "는/ETM"과는 결합할 수 없고, "ㅁ/ETN", "ㄴ/ETM" 형태의 전성어미와 어울립니다.

  2. "가위/MAG 은/JX"의 경우,
    무종성 부사와 결합가능한 보조사는 "는/JX"입니다.
    (이 주제와는 별개로 "가위/MAG"는 고어로 현대어 형태소분석에는 불필요한 어휘라고 생각됩니다;)

이러한 오류케이스를 찾아낼 수 있는 방법을 고민해봐야겠네요.

@9bow 9bow reopened this Feb 11, 2020
@shin285
Copy link
Member Author

shin285 commented Feb 11, 2020

@songyonge 확인 감사드립니다. 해당 내용으로 이슈 하나 생성하겠습니다. 감사합니다.

@dyanos
Copy link

dyanos commented Jun 27, 2020

안녕하세요 만들어주신 형태소 분석기 잘 쓰고 있습니다.
다름이 아니오라 다음과 같은 경우 화살표 오른쪽처럼 분석이 되어야 할 것 같은데 아닌 것 같아서 문의드립니다^^
여기에 글을 다는게 맞는지 모르겠어서 ㅠㅠ

딸기마카롱도 -> 딸기+마카롱+도
소셜커머스에서 -> 소셜+커머스+에서
키플링처럼 -> 키플링+처럼
스왈로브스키처럼->스왈로브스키+처럼
브랜이예요->브랜+이예요

@shin285
Copy link
Member Author

shin285 commented Jun 29, 2020

@dyanos 리포팅 감사드립니다. 해당 내용 확인하여서 수정하고 다시 말씀드리겠습니다. :)

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Projects
None yet
Development

Successfully merging a pull request may close this issue.

4 participants