Kryo Serializer 추가, 빠른 직렬화 지원

import kr.bydelta.koala.hnn.Parser;
import kr.bydelta.koala.hnn.Tagger;

public class hnn_r {
public static void main(String[] args) {
//Tagger & Parser 사용법
Tagger tagger = new Tagger();
Parser parser = new Parser();
String line = "철수는 손을 베다";

    System.out.println(tagger.tagSentence(line));
    System.out.println(parser.parse(line));
}

}

결과는 다음과 같습니다.

철수는 손을 베다
철수는 = 철수/NNG(ncpa)는/JX(jxc)
손을 = 손/NNG(ncn)을/JKO(jco)
베다 = 베/NNG(ncn)이/VCP(jp)다/EF(ef)
철수는 손을 베이다
철수는 = 철수/NNG(NNG)는/JX(JX)
손을 = 손/NNG(NNG)을/JKO(JKO)
베이다 = 베/NNG(NNG)이/VCP(VCP)다/EC(EC)
의존관계:--[Subject]--> 0 --[Object]--> 1[ROOT]

뜬금없이 "베이다" 가 나오고 주어,목적어 다음에 root 가 나오는데 root 의 의미를 모르겠습니다.
숫자의 의미도 잘 이해가 안가서 같이 질문드립니다

Python 버전
3.9.7
KoalaNLP 버전
koalanlp-2.1.7

KoalaNLP를 사용한 코드 부분을 보여주세요.

from koalanlp.Util import initialize, finalize
from koalanlp.proc import *
from koalanlp import API

initialize(java_options="-Xmx4g -Dfile.encoding=utf-8", KKMA="2.0.2", EUNJEON="2.0.2", ETRI="2.0.2")

안녕하세요, 패키지를 써보고 싶은데 initialize 하면 에러 메세지가 뜹니다, 수정할 수 있는 방법이 있을까요?
'xml.etree.ElementTree.Element' object has no attribute 'getchildren'

initialize 에 다른 옵션을 써도 마찬가지입니다 (예: initialize(java_options="-Xmx4g", ETRI="LATEST"))

ScalaDoc을 작성하고, pages branch에 업로드.

facebook chatbot같은 chatbot application 개발할 때 활용할 수 있으면 좋을거 같습니다.

문장단위로 분리 하고 싶어서 python 3.6, Koalanlp 2.1.3 사용하려고 하는 데요,

근데 sentencesplitter(api=API.HNN) 명령 실행 하면 초기화 필요라는 문제가 나옵니다.

초기화 하려고 해서

from koalanlp.Util import initialize
	initialize(hnn='LATEST')

실행해보니까 여리 필수 library를 못 찾다는 에러가 나옵니다.

이 문제를 해결 방안 있거나 필수 librarires 좀 공유 해주시면 감사드리겠습니다.

전체 코드를 아래와 같습니다.

감사합니다.

This issue is for:

• Converting procedure of dictionaries between taggers
• Saving procedure for converted dictionary

1. Scala로 코드를 변경
2. SBT 기반 빌드로 변경하며, 모듈 단위로 분리.

This issue is for:

• Dictionary Learner Enhancement.

Current Dictionary Learner has many bugs, so patch them with a CRF-style learner. It requires another new independent package with dependency on "factorie".

말뭉치에서 학습한 사전 정보를 저장하고 불러오는 기능

• 사전을 Stream으로 출력
• Stream에서 사전 읽기
• 말뭉치에서 고유명사 학습하는 방법 README에 서술.

기초정보

• KoalaNLP 버전은 얼마였나요? 2.0.6
• 어떤 프로그래밍 언어에서 문제가 생겼습니까? ([]안에 x표하여 표기해주세요)
  • Kotlin
  • Java
  • Scala
  • Python 3 +
  • 기타 JVM 계열 언어
• 문제의 유형은 어떤 것인가요?
  • 버그리포트
  • 개선점제안
  • 사용법질문
  • 기타

재연을 위한 정보

Python 3+ 설치 소개 문서에서 안내해 주신 바와 같이
Cython, koalanlp를 오류 없이 설치하고 아래 과정을 진행하였습니다.

from koalanlp.Util import initialize
initialize(java_options="-Xmx4g", KKMA="2.0.4", ETRI="2.0.4")

본문

• 그 결과 Class not found b'kr/bydelta/koala/POS' 라는 JavaException이 나타났습니다.

아래는 오류의 전체 내용입니다.

C:\anaconda64bit\lib\site-packages\koalanlp\Util.py in initialize(java_options, **packages)
184
185 # Enum 항목 초기화
--> 186 POS.values()
187 PhraseTag.values()
188 DependencyTag.values()

C:\anaconda64bit\lib\site-packages\koalanlp\types.py in values()
46 """
47 if len(POS.VALUES) == 0:
---> 48 POS.VALUES = _enum_value_dict(class.name, lambda x: POS(x))
49 for name, value in POS.VALUES.items():
50 setattr(POS, name, value)

C:\anaconda64bit\lib\site-packages\koalanlp\types.py in _enum_value_dict(cls, item_converter)
6
7 def _enum_value_dict(cls, item_converter):
----> 8 return {value.name: value for value in py_list(koala_class_of(cls).values(), item_converter)}
9
10

C:\anaconda64bit\lib\site-packages\koalanlp\jnius.py in koala_class_of(*path)
18
19 def koala_class_of(*path):
---> 20 return class_of('kr.bydelta.koala', *path)
21
22

C:\anaconda64bit\lib\site-packages\koalanlp\jnius.py in class_of(*path)
12 if path not in _CLASS_DIC:
13 print(path)
---> 14 _CLASS_DIC[path] = autoclass(path)
15
16 return _CLASS_DIC[path]

C:\anaconda64bit\lib\site-packages\jnius\reflect.py in autoclass(clsname)
157
158 # c = Class.forName(clsname)
--> 159 c = find_javaclass(clsname)
160 if c is None:
161 raise Exception('Java class {0} not found'.format(c))

jnius\jnius_export_func.pxi in jnius.find_javaclass()

JavaException: Class not found b'kr/bydelta/koala/POS'

혹시 이 부분은 어떻게 해결해야할지 여쭤보고 싶습니다.

감사합니다.

대량 말뭉치에서 반복적으로 나타나는 단어+조사의 형태 비교를 통해, 필요한 고유 명사를 찾아 자동으로 학습하는 기능.

1. 말뭉치에서 조사로 끝나는 단어 추출
2. 조사로 끝나는 단어들 간의 비교, 필요한 고유명사 추출
3. 사전 자동 등록

기초정보

• Python은 koalanlp/python-support, NodeJS는 koalanlp/nodejs-support repository에 등록해주세요.
• KoalaNLP 버전은 얼마였나요?
• 어떤 프로그래밍 언어에서 문제가 생겼습니까? ([]안에 x표하여 표기해주세요)
  • Kotlin
  • Java
  • Scala
  • [x ] 기타 JVM 계열 언어
• 문제의 유형은 어떤 것인가요?
  • 버그리포트
  • 개선점제안
  • 사용법질문
  • 기타

재연을 위한 정보

• 어떤 문장을 시도하셨습니까?

https://koalanlp.github.io/koalanlp/usage/NER.html 이 사이트에서 python 3로 실행해볼 수 있는 예제를 사용하였습니다.

• KoalaNLP를 사용한 코드 부분을 보여주세요.

from koalanlp import API
from koalanlp.proc import EntityRecognizer
from koalanlp.Util import initialize, finalize

initialize(ETRI='LATEST')
recognizer = EntityRecognizer(API.ETRI, etri_key='키번호')

parsed = recognizer.analyze("이 문단을 분석합니다. 문단 구분은 자동으로 합니다.")
# 또는 recognizer.analyze(...), recognizer.invoke(...)

# 첫번째 문장의 개체명들을 출력합니다.
for entity in parsed[0].getEntities():
    print(entity)

finalize()

본문

현재 인증키를 받아 예제코드를 진행해보려 구글 코랩에서 진행중입니다. 하지만 py4j.protocol.Py4JJavaError: An error occurred while calling o209.analyze.
: connect timed out 이와 같은 오류가 지속적으로 발생하고 있습니다.
[root] Java에서 처리하던 중에 문제가 발생했습니다. 문제가 계속된다면, Issue를 등록해주세요. 이와 같은 오류 처리 표시가 함께 표출되고 있습니다. 이를 해결하기 위해 어떻게 해야하나요??

기초정보

• Python은 koalanlp/python-support, NodeJS는 koalanlp/nodejs-support repository에 등록해주세요.
• KoalaNLP 버전은 얼마였나요?
• 어떤 프로그래밍 언어에서 문제가 생겼습니까? ([]안에 x표하여 표기해주세요)
  • Kotlin
  • Java
  • Scala
  • 기타 JVM 계열 언어
• 문제의 유형은 어떤 것인가요?
  • 버그리포트
  • 개선점제안
  • 사용법질문
  • 기타

재연을 위한 정보

• 어떤 문장을 시도하셨습니까?

[여기에 문장을 넣어주세요]

• KoalaNLP를 사용한 코드 부분을 보여주세요.

// 여기에 사용한 코드부분을 보여주세요. 윗줄에 'kotlin'라고 되어있는 언어유형을 사용중인 언어로 바꾸는것을 권합니다.

본문

• 아래에 본문을 입력해주세요.

안녕하세요, RHINO 개발자입니다.
RHINO를 KoalaNLP에 등록해주셔서 감사합니다.

RHINO 소개글에서 3.x 버전이 단어 일부분을 누락하는 등의 문제가 있다는 내용을 보고 연락드리게 되었습니다.
어떠한 문제들인지, 해당 문장은 무엇이었는지 알 수 있을까요?

감사합니다.

각 모듈을 Maven Repository에 등록하고, README.md 수정.

기초정보

• KoalaNLP 버전은요? (Version of KoalaNLP)? 최신버전입니다.
• 어떤 프로그래밍 언어에서 문제가 생겼습니까? (Language Type)? ([]안에 x표하여 표기해주세요; Please mark one with [x] symbol)
  • Java
  • [x ] Scala
  • Other
• 문제의 유형은 어떤 것인가요? (Type of this issue)?
  • 버그리포트. Bug report
  • 개선점제안. Idea/Suggestion for a improvement
  • 사용법질문. Question about using KoalaNLP
  • 기타. Other

본문

• 아래에 본문을 입력해주세요. (Describe your issue here.)

sbt aseembly 로 수행하니
java.io.IOException: Cannot run program "javac" (in directory ... )CreateProcess error=2, 지정된 파일을 찾을 수 없습니다.
에러가 발생하는데, 빌드 수행시 추가적으로 해줘야 하는 것이 있나요?

간단한 번역기. 복잡한 파서 <- 를 분석하라고 했더니 xpn 에러가 떠서 올립니다.

[main] INFO kr.bydelta.koala.traits.CanExtractResource - Extracting dictionary resources to C:\Users\leesm\AppData\Local\Temp\koalanlp-hannanum.
[main] INFO kr.bydelta.koala.traits.CanExtractResource - Extraction finished.
Input a sentence >> 간단한 번역기. 복잡한 파서
FILE: C:\Users\leesm\AppData\Local\Temp\koalanlp-hannanum\data/kE/dic_analyzed.txt
Exception in thread "main" java.util.NoSuchElementException: No value found for 'XPN'
at scala.Enumeration.$anonfun$withName$2(Enumeration.scala:125)
......

아래는 사용한 소스코드입니다...만 올려주셨던 예제와 똑같습니다.

import kr.bydelta.koala.POS;
import kr.bydelta.koala.POS$;
import kr.bydelta.koala.data.Sentence;
import kr.bydelta.koala.hnn.JavaDictionary;//한나눔
import kr.bydelta.koala.hnn.Parser; //한나눔
import kr.bydelta.koala.hnn.Tagger; //한나눔

import java.util.LinkedList;
import java.util.List;
import java.util.Scanner;

@SuppressWarnings("WeakerAccess")
public class App {
public static void main(String[] args) {
/* 사용자정의사전 사용법 */
// 1. 형태소 기본형 추가.
List list = new LinkedList<>();
list.add("설빙");
list.add("구글하");

    // 2. 기본형별 품사 지정.
    List<POS$.Value> pos = new LinkedList<>();
    pos.add(POS.NNG());
    pos.add(POS.VV());

    // 3. JavaDictionary에 추가.
    JavaDictionary.addUserDictionary(list, pos);

    /* Tagger & Parser 사용법 */
    Tagger tagger = new Tagger();
    Parser parser = new Parser();
    String line;
    Scanner scan = new Scanner(System.in);

    do {
        System.out.print("Input a sentence >> ");
        line = scan.nextLine();
        if (!line.isEmpty()) {
            // 문단 단위를 Tagging하는 경우:
            List<Sentence> paragraph = tagger.jTagParagraph(line);
            // 1개 문장인 경우는, 아래와 같습니다.
            // Sentence sent = tagger.tagSentence(line);
            // 문장이 1개라면,바로 의존관계분석을 할 수도 있습니다.
            // Sentence sent = parser.parse(line);

            for (Sentence sent : paragraph) {
                // 아래와 같이, 의존관계분석을 진행합니다.
                // Sentence 객체를 넣었으므로, 해당 객체에 변경사항이 기록됩니다.
                parser.parse(sent);

                System.out.println(sent.singleLineString());
                System.out.println();
            }
        }
    } while (!line.isEmpty());
}

}

기초정보

• KoalaNLP 버전은 얼마였나요?
  2.1.3

• 어떤 프로그래밍 언어에서 문제가 생겼습니까? ([]안에 x표하여 표기해주세요)
  Python 3.6

• 문제의 유형은 어떤 것인가요?
  버그리포트

재연을 위한 정보

• 초기화 시에 문제가 생깁니다. Ubuntu 및 OS X 에서 둘다 아래와 같은 문제가 발생합니다.

Traceback (most recent call last):
  File "/usr/lib/python3.6/site-packages/koalanlp/proc.py", line 39, in sentences
    result += py_list(self.__api.invoke(string(paragraph)), lambda x: x)
  File "/usr/lib/python3.6/site-packages/py4j/java_gateway.py", line 1286, in __call__
    answer, self.gateway_client, self.target_id, self.name)
  File "/usr/lib/python3.6/site-packages/py4j/protocol.py", line 328, in get_return_value
    format(target_id, ".", name), value)
py4j.protocol.Py4JJavaError: An error occurred while calling o209.invoke.
: java.lang.NoClassDefFoundError: scala/collection/immutable/StringOps
	at org.openkoreantext.processor.tokenizer.KoreanSentenceSplitter$.<init>(KoreanSentenceSplitter.scala:30)
	at org.openkoreantext.processor.tokenizer.KoreanSentenceSplitter$.<clinit>(KoreanSentenceSplitter.scala)
	at org.openkoreantext.processor.OpenKoreanTextProcessor$.splitSentences(OpenKoreanTextProcessor.scala:144)
	at org.openkoreantext.processor.OpenKoreanTextProcessor.splitSentences(OpenKoreanTextProcessor.scala)
	at kr.bydelta.koala.okt.SentenceSplitter.sentences(proc.kt:162)
	at kr.bydelta.koala.proc.CanSplitSentence$DefaultImpls.invoke(processors.kt:63)
	at kr.bydelta.koala.okt.SentenceSplitter.invoke(proc.kt:153)
	at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
	at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62)
	at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
	at java.lang.reflect.Method.invoke(Method.java:498)
	at py4j.reflection.MethodInvoker.invoke(MethodInvoker.java:244)
	at py4j.reflection.ReflectionEngine.invoke(ReflectionEngine.java:357)
	at py4j.Gateway.invoke(Gateway.java:282)
	at py4j.commands.AbstractCommand.invokeMethod(AbstractCommand.java:132)
	at py4j.commands.CallCommand.execute(CallCommand.java:79)
	at py4j.GatewayConnection.run(GatewayConnection.java:238)
	at java.lang.Thread.run(Thread.java:748)
Caused by: java.lang.ClassNotFoundException: scala.collection.immutable.StringOps
	at java.net.URLClassLoader.findClass(URLClassLoader.java:382)
	at java.lang.ClassLoader.loadClass(ClassLoader.java:424)
	at sun.misc.Launcher$AppClassLoader.loadClass(Launcher.java:349)
	at java.lang.ClassLoader.loadClass(ClassLoader.java:357)
	... 18 more

• KoalaNLP를 사용한 코드 부분을 보여주세요.

initialize(OKT='latest', force_download=False)

본문

매뉴얼에 있는 사전설치 항목은 모두 설치했는데 위와 같은 문제가 발생합니다. 도움을 주실 수 있나요?

Java에서 사용할 수 있도록,

1. SentenceSplitter/Tagger/Parser Class에 Method 제공
2. Singleton Object들의 Java Wrapper 제공

기초정보

• KoalaNLP 버전은요? (Version of KoalaNLP)? 1.8.2 / Scala_2.11, 2.12
• 어떤 프로그래밍 언어에서 문제가 생겼습니까? (Language Type)? ([]안에 x표하여 표기해주세요; Please mark one with [x] symbol)
  • Java
  • Scala
  • Other
• 문제의 유형은 어떤 것인가요? (Type of this issue)?
  • 버그리포트. Bug report
  • 개선점제안. Idea/Suggestion for a improvement
  • 사용법질문. Question about using KoalaNLP
  • 기타. Other

본문

• 아래에 본문을 입력해주세요. (Describe your issue here.)

SBT에 가변 버전으로 지정된 부분들을 전수 검토하고, 고정 버전으로 변경 (Issue #19 에서 파생)

기초정보

• KoalaNLP 버전은 얼마였나요? 2.0.7
• 어떤 프로그래밍 언어에서 문제가 생겼습니까? ([]안에 x표하여 표기해주세요)
  • Kotlin
  • Java
  • Scala
  • Python3
  • 기타 JVM 계열 언어
• 문제의 유형은 어떤 것인가요?
  • 버그리포트
  • 개선점제안
  • 사용법질문
  • 기타

재연을 위한 정보

• 어떤 문장을 시도하셨습니까?

[from koalanlp.Util import initialize
initialize(java_options="-Xmx4g -Dfile.encoding=utf-8", KKMA="2.0.4", ETRI="2.0.4", EUNJEON="2.0.2", KMR = "2.0,5")
from koalanlp.proc import Tagger,SentenceSplitter
from koalanlp import API

tagger = Tagger(API.EUNJEON)]

• KoalaNLP를 사용한 코드 부분을 보여주세요.

// ---------------------------------------------------------------------------
JavaException                             Traceback (most recent call last)
~/anaconda3/envs/gc/lib/python3.5/site-packages/koalanlp/API.py in _query(api, type)
     21     try:
---> 22         java_api = koala_class_of(api, type)
     23         return java_api

~/anaconda3/envs/gc/lib/python3.5/site-packages/koalanlp/jnius.py in koala_class_of(*path)
     19 def koala_class_of(*path):
---> 20     return class_of('kr.bydelta.koala', *path)
     21 

~/anaconda3/envs/gc/lib/python3.5/site-packages/koalanlp/jnius.py in class_of(*path)
     13     if path not in _CLASS_DIC:
---> 14         _CLASS_DIC[path] = autoclass(path)
     15 

~/anaconda3/envs/gc/lib/python3.5/site-packages/jnius/reflect.py in autoclass(clsname)
    158     # c = Class.forName(clsname)
--> 159     c = find_javaclass(clsname)
    160     if c is None:

jnius/jnius_export_func.pxi in jnius.find_javaclass()

JavaException: Class not found b'kr/bydelta/koala/eunjeon/Tagger'

During handling of the above exception, another exception occurred:

Exception                                 Traceback (most recent call last)
<ipython-input-4-f002cb085532> in <module>
      8 from koalanlp import API
      9 
---> 10 tagger = Tagger(API.EUNJEON)

~/anaconda3/envs/gc/lib/python3.5/site-packages/koalanlp/proc.py in __init__(self, api, apiKey, useLightTagger)
     87             self.__api = API._query(api, __class__.__name__)(useLightTagger)
     88         else:
---> 89             self.__api = API._query(api, __class__.__name__)()
     90 
     91     def tag(self, *text: str) -> List[Sentence]:

~/anaconda3/envs/gc/lib/python3.5/site-packages/koalanlp/API.py in _query(api, type)
     23         return java_api
     24     except Exception:
---> 25         raise Exception('API.%s는 %s를 지원하지 않습니다!' % (api.upper(), str(type)))
     26 
     27 

Exception: API.EUNJEON는 Tagger를 지원하지 않습니다!

본문

• initialization후 처음에는 잘 작동 됐습니다.
  하지만 재부팅 후 다시 실행하니 저런 에러가 나타납니다.
  API.KMR도 마찬가지구요.

사용환경은 Ubuntu 16.04 LTS
아나콘다3 가상환경에서 수행하고 있습니다.
Python 3.5.6
java-8-oracle
javac version은 1.8.0_201입니다.

cmd창에서 java -jar KoreanAnalyzer-0.2.2.3-jar-with-dependencies.jar를 쳤더니

C:\Users\dev\Desktop\DEVELOPER\KoreanAnalyzer-master> java -jar KoreanAnalyzer-0
.2.2.3-jar-with-dependencies.jar
오류: 기본 클래스 kr.kaist.ir.drm.entail.extraction.PairExtract을(를) 찾거나 로
드할 수 없습니다.

이렇게 뜨네요... 컴파일을 어떻게 해야 하는건지 자세한 설명을 부탁드립니다...ㅠ

기초정보

• KoalaNLP 버전은 얼마였나요?
  2.1.3
• 어떤 프로그래밍 언어에서 문제가 생겼습니까? ([]안에 x표하여 표기해주세요)
  • Kotlin
  • Java
  • Scala
  • 기타 JVM 계열 언어
  • Python
• 문제의 유형은 어떤 것인가요?
  • 버그리포트
  • 개선점제안
  • 사용법질문
  • 기타

재연을 위한 정보

• 어떤 문장을 시도하셨습니까?

[여기에 문장을 넣어주세요]

• KoalaNLP를 사용한 코드 부분을 보여주세요.

// 여기에 사용한 코드부분을 보여주세요. 윗줄에 'kotlin'라고 되어있는 언어유형을 사용중인 언어로 바꾸는것을 권합니다.
from koalanlp.Util import initialize, finalize
from koalanlp.proc import Parser
from koalanlp import API

initialize(KKMA='2.0.2')
finalize()

본문

• 아래에 본문을 입력해주세요.
  위의 코드를 실행하면 아래와 같은 오류가 뜹니다.
  

Multi-thread 환경에서 적합한지 확인 필요.

1. 분석 결과 확인을 위한 Specs 테스트 작성
2. Multi-thread safety 확인을 위한 Specs 테스트 작성
3. 테스트 결과 나타나는 문제사항 확인.

소스는 아래와 같습니다.
public class hnn_r {
public static void main(String[] args) {
//Tagger & Parser 사용법
Tagger tagger = new Tagger();
Parser parser = new Parser();
String line = "멋진 나는 밥만있어도 함께 먹는다";
Sentence sent = parser.parse(line);

    System.out.println(sent.treeString());
}

}

결과문은 아래와 같습니다.
+Undefined : 먹/VV+는다/EF ... ROOT
+Subject : 나/NP+는/JX ... SBJ
+Object : 밥만있어/NNG+도/JX ... OBJ
+Adjunct : 함께/MAG ... ADV
+Modifier : 멋지/VA+ㄴ/ETM ... MOD

+Modifier : 멋지/VA+ㄴ/ETM ... MOD<- 가 어느 노드의 하위 노드인지 구분하는법을 몰라서 질문드립니다.

또한

"멋진 나는 저녁이 밥일지라도 함께 먹는다"의 결과는
+Undefined : 먹/VV+는다/EF ... ROOT
+Subject : 나/NP+는/JX ... SBJ
+Complement : ㄹ지/VV+라도/EC ... CMP
+Adjunct : 함께/MAG ... ADV
+Modifier : 멋지/VA+ㄴ/ETM ... MOD
+Subject : 저녁/NNG+이/JKS ... SBJ
+Subject : 밥/NNG+이/JKS ... SBJ

로 나왔습니다. 저녁밥과 멋진이 함께 있어서 어느 명사의 하위 노드인지 트리만 봐서는 잘 모르겠습니다.

기초정보

• KoalaNLP 버전은 얼마였나요?
  2.1.4
• 어떤 프로그래밍 언어에서 문제가 생겼습니까? ([]안에 x표하여 표기해주세요)
  • Kotlin
  • Java
  • Scala
  • 기타 JVM 계열 언어
• 문제의 유형은 어떤 것인가요?
  • 버그리포트
  • 개선점제안
  • 사용법질문
  • 기타

재연을 위한 정보

• khaiii 실행시에 문제가 생깁니다.
  Exception in thread "main" java.lang.UnsatisfiedLinkError: Unable to load library 'khaiii'

• KoalaNLP를 사용한 코드 부분을 보여주세요.
  Java 코드입니다.

pom.xml 코드입니다.

그리고, 현재 macOS 에서 진행중인데, prok.kt를 보니, LD_LIBRARY_PATH와 같은 환경변수를 등록하라고 하셔서
export DYLD_LIBRARY_PATH=/usr/local/share/khaiii 와 같이 등록해주었지만 여전히 같은 에러가 발생합니다.

본문

• khaiii를 실행하는데 위와 같은 문제가 발생합니다. 혹시 이와 관련되어 도움을 주실 수 있을까요? 감사합니다! :)

기초정보

• KoalaNLP 버전은요? (Version of KoalaNLP)?
  • g : kr.bydelta
  • a : koalanlp-twitter_2.11
  • v : 1.5.2
• 어떤 프로그래밍 언어에서 문제가 생겼습니까? (Language Type)? ([]안에 x표하여 표기해주세요; Please mark one with [x] symbol)
  • Java
  • Scala
  • Other
• 문제의 유형은 어떤 것인가요? (Type of this issue)?
  • 버그리포트. Bug report
  • 개선점제안. Idea/Suggestion for a improvement
  • 사용법질문. Question about using KoalaNLP
  • 기타. Other

재연을 위한 정보

• KoalaNLP를 사용한 코드 부분을 보여주세요. (Please show your code snippet which uses KoalaNLP.)

import kr.bydelta.koala.twt.SentenceSplitter

def extractWord(text: String): List[String] = {
  val sentenceSplitter = new SentenceSplitter
  sentenceSplitter.sentences(text).toList
}

본문

Spark(2.2.0)을 사용하여 단어 목록을 추출하고자 하는 과정에서 scala 2.12 버전에 대한 이슈가 발생하였습니다.

java.langNosuchMethroError: scala.Product$init ...

의존성을 체크해볼 결과 koalanlp-core 쪽의 의존성 트리상에 scala-library 2.12.0 에 대한 의존성이 있는것으로 나왔습니다.
Spark의 경우 아직 scala 2.12를 지원하지 않는것으로 알고 있고 이에 따라 발생하는 이슈로 확인되었는데
scala 2.12를 완전히 회피 할 수 있는 방안이 있는지 궁금합니다.

Update dependency to OpenKoreanText.