파이썬 엘라스틱서치(Elasticsearch) 연동 -3 : 노리(Nori) 형태소 분석기 설치

노리(Nori) 형태소 분석기 노리는 Elasticsearch 6.6 버전 부터 공식적으로 개발해서 지원하기 시작했다. 노리는 루씬에 있는 일본어 형태소 분석기 Kuromoji 를 재활용한 것이다. MeCab 사전을 활용할 수 있다. 6.7.2 노리 (nori) 한글 형태소 분석기 이 문서의 허가되지 않은 무단 복제나 배포 및 출판을 금지합니다. 본 문서의 내용 및 도표 등을 인용하고자 하는 경우 출처를 명시하고 김종민(kimjmin@gmail.com)에게 사용 내용을 알려주시기 바랍� esbook.kimjmin.net 설치 환경은 다음과 같습니다. Ubuntu 18.04.4 LTS Elasticsearch 7.8.0 다음 명령어로 플러그인을 설치합니다. sudo /usr/share/elasticsear..
Language/Python 2020. 8. 13. 23:48

jQuery Ajax / hightcharts / Bithum API 비트코인 실시간 그래프 그리기

소개 비동기 통신(jQuery Ajax)으로 Bithum API 을 이용해서 실시간 그래프 그리는 것을 알아보겠습니다. 다음 결과들은 거래 금액 데이터를 사용했습니다. 이더리움 알파체잉, 이더리움, 리플 참고 아래 링크들을 참고했습니다. No.1 가상자산 플랫폼, 빗썸 비트코인, 이더리움, 비트코인캐시, 리플, 라이트코인, 대시, 모네로, 비트코인골드, 이오스, 이더리움클래식, 퀀텀, 제트캐시, 실시간 시세, 쉽고 안전한 거래 www.bithumb.com Bithumb API 응답 유형들입니다. Highcharts #Live data There are basically two ways of working with a live data feed from the server in Highcharts. Use..
Language/Javascript 2020. 8. 12. 17:02

파이썬 쓰레드(Thread) 알아보기 - 4 : 쓰레드 동작 순서 제어를 위한 Event

소개 둘 이상의 쓰레드가 절차적으로 동작하기 위한 쓰레드 이벤트에 대해 알아보겠습니다. 예제 1 set() 과 wait() 에 대한 예제입니다. import threading import time def before_work(): evt.set() print('* before work, done') def after_work(): print('** after work, waiting') evt.wait() print('** after work, done') if __name__ == '__main__': evt = threading.Event() t1 = threading.Thread(target=after_work) t2 = threading.Thread(target=before_work) t1.sta..
Language/Python 2020. 8. 12. 16:13

파이썬 쓰레드(Thread) 알아보기 - 3 : 데이터 통신

소개 큐(queue) 를 이용해서 독립적으로 실행되는 쓰레드의 상호간 데이터 통신에 대해 알아보겠습니다. 예제 1 큐의 put() 과 get() 을 사용한 예제입니다. import time import threading from queue import Queue def sender(q): data = [2020, 8, 12, 1, 55] while data: d = data.pop(0) q.put(d) print(f'sender : {d}') time.sleep(1) q.put(None) print('sender done') def receiver(q): while True: data = q.get() if data is None: break print(f'receiver : {data}') print(..
Language/Python 2020. 8. 12. 14:43

파이썬 쓰레드(Thread) 알아보기 - 2 : 뮤텍스(Lock)

소개 둘 이상의 쓰레드가 동일한 데이터를 공유하여 발생하는 문제를 해결하기 위한 동기화 기법에 대해 알아보 겠습니다. 세마포어(Semaphore): 공유 자원에 여러 프로세스가 접근하는 것을 막는 것 뮤텍스(Mutex): 공유 자원에 여러 쓰레드가 접근하는 것을 막는 것 예제 1 두 쓰레드가 동일 변수에 접근하며, 그 과정에서 에러가 발생하도록 유도된 코드입니다. 결과는 90이 아닌 45 import threading import time import random def run(n): global total_footprint for i in range(10): print(f'{n} {i}') tmp = total_footprint time.sleep(0.1) total_footprint = tmp + i..
Language/Python 2020. 8. 12. 12:43

파이썬 쓰레드(Thread) 알아보기 - 1

쓰레드(Thread) 쓰레드는 프로그램 내에서 실행되는 흐름의 단위를 말한다. 일반적으로 한 프로그램 하나의 쓰레드를 가지고 있지만, 둘 이상의 스레드를 동시에 실행할 수 있으며 이를 멀티 쓰레드라고 한다. 예제 1 기본적인 쓰레드 실행방법입니다. import threading import time def run(n): for i in range(10): time.sleep(0.1) # print(f'{n} : {i}') print(f'* [{n} done]') rank.append(n) if __name__ == '__main__': players = ['rabbit', 'turtle', 'horse'] for player in players: threading.Thread(target=run, arg..
Language/Python 2020. 8. 12. 11:36

파이썬 엘라스틱서치(Elasticsearch) 연동 -2 : CRUD

소개 파이썬에서 엘라스틱서치과 연동하여 기본 CRUD 사용법에 대해 알아보겠습니다. 우선 엘라스틱서치에서 사용하는 용어를 알아야 할 것입니다. RDBMS Elasticsearch Database Index Table Type Row Document .. .. Python Elasticsearch Client — Elasticsearch 8.0.0 documentation This client was designed as very thin wrapper around Elasticsearch’s REST API to allow for maximum flexibility. This means that there are no opinions in this client; it also means that some..
Language/Python 2020. 8. 11. 23:59

파이썬 엘라스틱서치(Elasticsearch) 연동 -1 : 원격 설정

소개 파이썬을 엘라스틱서치와 연동하는 방법에 대해 알아보려고 하는데요. 우선 원격 설정과 간단한 테스트까지 해보도록 하겠습니다. 서비스 시작 서비스를 시작합니다. sudo systemctl start elasticsearch 각각 서비스 확인, 서비스 포트 확인 명령어입니다. sudo systemctl status elasticsearch netstat -antp curl -X GET localhost:9200 curl 명령어를 이용해도 CRUD 를 할 수 있습니다. 해당 Elasticsearch 버전은 7.8 이네요. curl -X GET localhost:9200 { "name" : "dev", "cluster_name" : "elasticsearch", "cluster_uuid" : "VwEer7N..
Language/Python 2020. 8. 11. 22:39