ko en ko ko ko ko zh ko ko zh ko ko zh ko ko ko ko ko ko ko ko ko ko ko ko ko ko ko ko en ko ko zh ko ko zh ko ko zh ko ko ko ko ko ko ko ko ko ko ko zh ko ko ko en en en en en ko en ko en ko ko fr ko en ko ko ko ko ko ko de ca ko ko de oc ko ko de en ko ko de fa ko ko de fr en ko de ca ko ko de es ko ko de eu ko ko de de ko ko de ro ko ko de de ko ko de ca ko ko de it sv ko de ro ko ko de ca ko ko ko ko en kn ko en
챗봇 딥러닝 - 한국어 형태소 분석기 성능 비교 - khaiii
AI Dev - 인공지능 개발자 모임
최근에 공개된 카카오의 딥러닝 형태소분석기와 다른 제품들을 비교한 글입니다. 특히 띄어쓰기에서 가장 많은 차이를 보이고 있습니다.
한글은 영어와 다르게 단어들이 붙어있어도 대부분 독해가 가능합니다. 그래서 구어체(특히 카톡같은 메신저에서)는 띄어쓰기를 생략하는 경우가 아주 많습니다. 제가 mecab을 쓰는 이유가 속도가 빨라서이기도 하지만 띄어쓰기 여부에 상관없이 형태소분석이 잘 되기 때문입니다.
khaiii는 한글자 단위로 입력이 들어가는데 빈칸도 하나의 캐릭터로 처리합니다. 그래서 사전기반의 다른 형태소분석기와 다르게 띄어쓰기 처리가 전혀 안된다는 단점이 있습니다. 실제로 현업에 사용하기 위해서는 이에 대한 기능이 반드시 필요할 듯 합니다. 앞으로 지속적인 업데이트가 될거라 생각합니다.
워드 임베딩에 대한 아주 쉬운 설명 - The Illustrated Word2vec
대화 인공지능 대회 - ConvAI
문장의 유사성을 예측하고 평가하는 AI - 카카오 심슨
OpenAI Transformer GPT2로 만든 언어 모델
텐서플로에서 사전 훈련된 임베딩을 사용하는 예제
목적지향 대화 학습 - Learning End-to-End Goal-Oriented Dialog
문장을 입력하면 비슷한 짤방을 보여주는 프로젝트
딥러닝 자연어처리 - RNN에서 BERT까지 [2]
BERT를 이용한 챗봇 구현
사전훈련 자연어처리 모델의 발전과정 - The Illustrated BERT, ELMo, and co.
2018 Amazon Prize에서 우승한 Gunrock 소셜봇
한국어 형태소 분석기 성능 비교 - khaiii
첫 페이지 3 4 5 6 7 8 9 10 11 12 끝 페이지
Board Search 제목+내용 제목 내용 댓글 닉네임 태그 검색
© 2022 AI Dev - 인공지능 개발자 모임 Powered by XE