멀티프로세싱 환경에서 split_sentences 호출 시 아래와 같이 문장분리 결과가 다른 경우가 있어서 문의드립니다. 케이스를 확인한 버전은 3

<div class="highlight highlight-source-python notranslate position-relative overflow-auto" dir="auto

<a class="user-mention notranslate" data-hovercard-type="user" data-hovercard-url="/us

멀티프로세싱 환경에서 split_sentences 호출 시 문장분리 결과가 달라집니다. about kss HOT 4 CLOSED

nayulkoo commented on August 19, 2024

멀티프로세싱 환경에서 split_sentences 호출 시 문장분리 결과가 달라집니다.

from kss.

Comments (4)

hyunwoongko commented on August 19, 2024

넵 확인해보겠습니다.

from kss.

hyunwoongko commented on August 19, 2024

>>> import kss
>>> text = "또한 스마트 폰으로 웹캠 디바이스를 컨트롤 좌 우 상 하를 움직임 을하여 시야를 더 확장 시킬 수 있다. 결론적으로 폰으로 웹캠을 구동시켜 메시지전송 영상 및 사진전송 및 컨트롤 하는 것이 이번 프로젝트의 최종 목표이다."

>>> kss.split_sentences(text, num_workers=4)
[Korean Sentence Splitter]: Initializing Pynori...
['또한 스마트 폰으로 웹캠 디바이스를 컨트롤 좌 우 상 하를 움직임 을하여 시야를 더 확장 시킬 수 있다.', '결론적으로 폰으로 웹캠을 구동시켜 메시지전송 영상 및 사진전송 및 컨트롤 하는 것이 이번 프로젝트의 최종 목표이다.']

>>> kss.split_sentences(text, num_workers=1)
['또한 스마트 폰으로 웹캠 디바이스를 컨트롤 좌 우 상 하를 움직임 을하여 시야를 더 확장 시킬 수 있다.', '결론적으로 폰으로 웹캠을 구동시켜 메시지전송 영상 및 사진전송 및 컨트롤 하는 것이 이번 프로젝트의 최종 목표이다.']