개발이야기 검색 결과

해당 글 213건
반응형

[RxKotlin] Reactive 코틀린 #3 - Subject

Hot observable을 구현시 publish() 이외에 subject를 이용할 수 도 있습니다.Subject는 Observer 역할을 하기 때문에 여러 Observable에 구독을 신청할 수 있고, Overvable의 역할도 하기 때문에 받은 item을 재배출 하거나, 새로운 값을 배출할 수 있습니다.Observable이면서 Observer인거죠. subject를 설명하기 위한 마블 다이어그램은 하기 링크에서 작성된 자료를 사용했습니다.http://reactivex.io/documentation/ko/subject.html 편의를 위해 delay를 kotlin coroutine의 runBlocking을 이용합니다.(runBlocking으로 thread를 정지시키지는 않지만 delay가 있는 라인에서..
개발이야기/Kotlin 2019. 12. 6. 17:57

[RxKotlin] Reactive 코틀린 #2 - Observable, ConnectableObservable

Observable은 Consumer가 소비하는 값을 생성하는 역할을 합니다. Consumer들은 Observable에 구독을 신청하고, Observable은 값을 생성한 후에 Consumer들에게 push 방식으로 값을 전달합니다. Observable의 주요 이벤트 Observable은 주요하게 아래 event를 발생시킵니다. onNext(item T): 값을 전달할때 호출하여 값을 넘겨줌 onError(e: Throwable): 에러가 발생하면 호출함 onSubscribe(d: Disposable): 구독을 신청하면 호출해줌 이때 넘어오는 Disposable 객체는 Observer가 구독을 해제할때 사용함. onComplete(): 가지고 있는 값을 모두 전달하면 호출함. 따라서 위 callback ..
개발이야기/Kotlin 2019. 12. 4. 18:46

[RxKotlin] Reactive 코틀린 #1 - 개념 및 설치

Reactive program은 옵져버 패턴을 이용하여 구독자에게 변경사항을 알려주는 programming 기법 입니다.내가 어떤 데이터가 필요하여 요청하고, 그 데이터를 얻어와 가공하는게 아니라, 데이터 관리주체쪽에 데이터가 변경시 요청을 받겠다는 구독신청을 해놓고, 변경사항(event)이 발생하면 이를 전달 받습니다.보통 프로그래밍을 하는 방법과는 반대되는 설정이죠.따라서 reactive programming은 하나의 값을 반환하기 보다는 data stream을 반환합니다.ReactiveX의 개념은 iterator와 비교되는데, 좀더 명확하고 자세한 설명이 필요하다면 아래 페이지를 참고하면 됩니다.http://reactivex.io/intro.html Rx의 개념은 여러 언어로 개발되고 있습니다. 여..
개발이야기/Kotlin 2019. 12. 4. 09:15

[Python] 파이썬 기초#2 - BeautifulSoup를 이용한 웹 크롤링

BeautifulSoup을 이용하여 특정 페이지의 html 코드를 다운받을 수 있습니다.하기 링크는 로또 당첨페이지를 보여주는 페이지 입니다.여기서 로또 번호를 긁어와 보도록하지요~https://www.dhlottery.co.kr/gameResult.do?method=byWin from bs4 import BeautifulSoup from urllib.request import urlopen url = "https://www.dhlottery.co.kr/gameResult.do?method=byWin" html = urlopen(url) soup = BeautifulSoup(html, 'lxml') hoi = soup.select_one("#article > div:nth-child(2) > div > ..
개발이야기/Python 2019. 12. 2. 09:56

Android Room & Coroutines

해당 내용은 하기 링크를 번역한 내용입니다. https://medium.com/androiddevelopers/room-coroutines-422b786dc4c5 물론 추가적인 의역 및 설명이 추가되어 있습니다.Room 2.1에서 부터 Kotlin coroutine을 지원하기 시작했습니다. 2.2 버전부터는 return값으로 flow도 제공하지요~ Room에서 coroutine을 지원하면서 DAO에서 suspend function을 만들어 선언해 놓으면 해당 function들은 main thread에서 동작하지 않습니다. 따라서 DB 접근할때 따로 background thread를 만들어서 접근할 필요가 없어졌습니다. 아래에서는 이를 사용하는 방법과 내부적으로 어떻게 동작하는지와 test는 어떻게 진행해..
개발이야기/Android 2019. 11. 25. 15:21

Android Dev Summit 2019 - Debugging Tips n' Tricks

안드로이드 2019 Dev summit에서 발표된 Android studio debugging tips 관련 자료를 정리합니다. Android logcat1. 불필요한 시간 / TID / PID 제거 2. Filter 관리 및 등록 필요한 로그를 보기 위해서 filter를 걸거나, 여러개의 filter를 설정할수 있습니다. 하지만 자주 사용하는 Filter라면 "Edit Filter Configuration" 메뉴를 통해서 새 Filter를 등록해 놓고 사용 할 수 있는 기능을 제공합니다.등록해 놓은 Filter는 drop 메뉴에서 바꿔가면서 선택 가능합니다. 3. 동일 로그 folding계속해서 반복되는 로그가 있다면 해당 문자열을 드래그 하여 마우스를 우클릭하고 "Fold lines like this..
개발이야기/Android 2019. 11. 20. 11:07

Android Dev Summit 2019 - What's new in Room

안드로이드 2019 Dev Summit에서 발표된 Testing Coroutines 자료를 정리합니다. Room history Async QueriesRoom에서는 Rx에 대한 지원을 제공합니다. 2.1부터 coroutines에 대한 suspend function을 제공했고, 2.2에서 observable한 Flow를 제공하면서 완벽한 coroutine을 지원합니다. FlowFlow는 kotlin에서 새로이 제공하는 coroutine builder입니다. (1.2.0에는 없었는데..1.3.2를 보니 갑자기 생겨 있더군요..) 비동기로 동작하며 Cold stream이기 때문에 lazy하게 동작시킬 수 있습니다. 또한 intermediate operator와 terminal operator가 존재합니다.co..
개발이야기/Android 2019. 11. 18. 21:41

[Kotlin] 코틀린 - 코루틴#11- Asynchronous Flow(2/2)

이 글은 아래 링크의 내용을 기반으로 하여 설명합니다.https://github.com/Kotlin/kotlinx.coroutines/blob/master/coroutines-guide.md이 블로그 포스팅 당시의(2019.11.04) coroutine 버전은 1.3.2 입니다. 첫번째 글에 이어 포스팅 합니다.Flow 첫번째 정리 포스팅: https://tourspace.tistory.com/258 Flow contextflow로 만들어진 collection은 이를 호출한 caller의 coroutine context에서 수행되며, 이를 context preservation(context 보존) 이라고 부릅니다.따라서 collect() 함수 또는 기타 terminal api를 호출하는 coroutine..
개발이야기/Kotlin 2019. 11. 16. 23:54

Android Dev Summit 2019 - Testing Coroutines on Android

안드로이드 2019 Dev Summit에서 발표된 Testing Coroutines 자료를 정리합니다. Coroutines-first안드로이드 UI Component를 개발할때 코루틴을 염두해 두고 개발합니다.New APIs : 만약 새로운 API가 추가된다면 코루틴에 맞는지 살펴보고, API 대해 코루틴을 잘 지원할수 있는지 검토합니다.Jetpack Library: 라이브러리를 빌드할 때도 코루틴을 사용하며, 라이브러리중 일부에서는 이미 그렇게 하고 있습니다.Documentation: 안드로이드에서 코루틴을 사용하는 방법에 대한 develop.android.com에 문서화 작업을 진행하고 있습니다.이미 4개의 라이브러리에서 안정적으로 즉시 사용 가능한 코루틴을 지원합니다 또한 나머지 기능들 역시 안정적..
개발이야기/Android 2019. 11. 15. 15:42

Easy Coroutines in Android: viewModelScope

안드로이드 Summit 2019를 보던중 Testing coroutine section에 갑자기 viewModelScope이란게 튀어 나옵니다...분명 coroutineScope이긴 할텐데, ViewModel에 한정시킨 버전인듯한데..라고는 가늠해 보지만 세미나를 진행해야 하는 입장이라 명확한 viewModelScope에 대한 글을 정리했습니다.이 글은 하기 링크를 번역했습니다.https://medium.com/androiddevelopers/easy-coroutines-in-android-viewmodelscope-25bffb605471 Coroutines의 취소는 단조롭고 번거로운 작업으로 심지어 까먹기도 쉽습니다.viewModelScope은 extension property를 ViewModel에 추..
개발이야기/Android 2019. 11. 14. 14:05

[Kotlin] 코틀린 - 코루틴#10- Asynchronous Flow(1/2)

오랬만에 코루틴 페이지에 들어갔더니 coroutine builder가 추가되었네요.그리고 channel도 experimental flag가 떼졌습니다.(너무 오랬만에 들어가 봤나요?) 여튼 channel 사용이 가능해 지면서 actor의 사용도 가능해 졌으니, 동기화 부분에서도 좀더 코틀린 스럽고 코루틴스럽게 작성이 가능해 졌습니다.그럼 새로 추가된 builder들에 대해서 알아봅니다. 이 글은 아래 링크의 내용을 기반으로 하여 설명합니다.https://github.com/Kotlin/kotlinx.coroutines/blob/master/coroutines-guide.md이 블로그 포스팅 당시의(2019.11.04) coroutine 버전은 1.3.2 입니다. Asynchronous FlowSuspen..
개발이야기/Kotlin 2019. 11. 4. 19:27

[Lucene] 루씬 - 검색 #2 - Query의 종류

이번에는 Query의 종류에 대해서 설명합니다.검색을 하다보면 단순히 "people" 같은 문구 한개를 찾기 보다는, 여러 조건을 조합해서 질의를 만들어야 할때가 있습니다.따라서 lucene에서는 기본적으로 사용하는 Term query 이외에도 다른 query들을 지원합니다.이런 쿼리들은 org.apache.lucene.search.query 패키지 안에 존재합니다. lucene api는 8.2.0을 기준으로 합니다.또한 예제는 Kotlin으로 작성되었습니다. Term query앞의 예제에서 계속 사용한 query 입니다. 검색 할 Term을 설정하여 해당 Filed에서 요청한 문자를 찾습니다.이건 앞쪽에서 계속 사용해 왔으니 예제는 생략합니다.검색할 문자에 띄어쓰기가 들어있다면 TermQuery를 직접..
개발이야기/Lucene & Solr 2019. 10. 18. 15:27

[Lucene] 루씬 - 검색 #1- IndexReader, IndexSearcher

앞서서는 루씬의 index에 관련해서 알아봤습니다.물론 앞선 예제에서 따라하기 형태의 index, search를 전부 경험해볼수 있으니, 기본적인 사용법은 예제와 같습니다.(기본 따라하기 예제 - https://tourspace.tistory.com/237) 루씬에서 지원하는 검색은 질의(Query)와 문서간의 유사성을 판단합니다.여기서 유사성은 Document에 질의한 term이 나오는 횟수로 결정되면 이 유사도로 scoring을 하고 해당 문서를 결과로 return 합니다. 검색 indexing처럼 크게 API 어렵거나 사용이 복잡하지 않습니다.다만 검색에서 기본적으로 사용되는 class들에 대해서 간단하게 정리하고자 합니다.이 글은 lucene v8.2.0 기준으로 작성되었습니다. 모든 예제코드는 ..
개발이야기/Lucene & Solr 2019. 10. 17. 09:30

[Lucene] 루씬 indexing #5 - N-Gram, 한글 Analyzer (3/3)

영어와 같이 단어가 공백단위로 분리된다면야 tokenizing 하기가 쉽겠지만 제가 아는 아시아 언어들은 띄어쓰기만으로 tokenize를 하면 제대로 term을 만들기 쉽지 않습니다.물로 영어도 단어의 원형, 동사의 원형으로 변환하는 과정을 거쳐야 하겠지만, 한글이나, 일어(일어는 띄어쓰기가 없는걸로 알고 있습니다만..)등의 언어는 공백으로 분리해서 만들어진 term으로는 검색효율이 떨어집니다."사과와 포도는 참 달다"를 "사과와" "포도는" "참" "달다" 분리했을때 "사과"로 검색하면 검색결과가 0이겠죠~N-Gram 분석기는 글자를 한글자씩 연결해 가면서 term을 생성하는 방법을 말합니다. 이 글은 lucene v8.2.0 기준으로 작성되었습니다. 모든 예제코드는 Kotlin으로 작성되었습니다. N..
개발이야기/Lucene & Solr 2019. 10. 16. 09:23

[Lucene] 루씬 indexing #4 - Analyzer 동의어 검색(2/3)

검색시 명확하게 특정단어를 검색할수도 있지만 유사한 단어나 오타가 발생할 때에도 검색되도록 하도록 동의어(유의어)를 등록 가능하도록 lucene에서 지원합니다.이는 core 라이브러리가 아니기 때문에 maven pom.xml 파일에 아래와 같이 depedency를 추가해야 합니다. 이 글은 lucene V8.2.0 기준으로 작성되었습니다. 모든 예제코드는 Kotlin으로 작성되었습니다.검색시 동의어 설정"와치" 로 검색하면 "워치"도 알아서 검색해 주면 좋으련만, 아쉽게도 동의어는 수동으로 입력해 줘야 합니다."블루투스"를 검색할때 "블투", "불투", "BT", "Bluetooth", "Blue tooth" 등등의 예상되는 동의어를 잘 생각해서 만들어야 되겠네요. 동의어 검색을 위해서는 아래 두가지 C..
개발이야기/Lucene & Solr 2019. 10. 15. 09:20

[Lucene] 루씬 Indexing #3 - Analyzer 기초 (1/3)

루씬에서 Indexing 작업은 주어진 Text를 Term으로 쪼개서 검색 가능한 최소한의 단위로 만드는 작업이라고 볼수 있습니다.그리고, 그 단어들을 검색하기 편하도록 거꾸로 정리 놓는거죠. (Inverted index 말입니다.) 이번에는 indexing 작업중에 Text를 쪼개서 Term으로 만드는 방법에 대해서 설명합니다.이렇게 대상 Text를 잘게 잘라서 term을 만드는 작업은 Analyzer가 수행합니다. 이 글은 "실전비급 아파치 루씬 7"을 참고하였습니다.자세한 설명 및 다양한 예제는 해당 책을 구매하여 확인하시기 바랍니다. ※ 모든 예제 코드는 Kotlin으로 작성되었습니다. (Lucene library 원본 코드 제외) 크게 나누어 분석은 아래의 단계를 거칩니다.CharFilter -..
개발이야기/Lucene & Solr 2019. 10. 14. 00:52

[Lucene] 루씬 Indexing #2 - DocValues란?

Document의 Field type을 보다보면 xxxDocValue란 타입이 나옵니다.이 Field는 실제 값을 저장하지 않기 때문에 실제로 검색시 Document.get()으로 값을 받아올수도 없는 field인데 언제 쓰는걸까요?먼저 DocValue라는게 왜 생겨났는지 부터 보려면 Inverted index 얘기를 먼저 해 봐야 합니다.이 글은 하기 링크를 번역 및 의역 하였습니다.https://blog.trifork.com/2011/10/27/introducing-lucene-index-doc-values/ Inverted index는 term으로 document를 찾기에 좋은 형태입니다.(inverted idnex는 https://tourspace.tistory.com/245 글 확인)Invert..
개발이야기/Lucene & Solr 2019. 10. 11. 11:37

[Lucene] 루씬 indexing #1 - 기본

루씬의 기본 동작은 indexing과 searching 입니다.word든 xml이든, txt이든 csv든 간에 먼저 text로 만든 다음에 이를 검색하기 좋도록 index를 만들고 이를 이용하여 검색을 진행합니다. Inverted IndexingLucene은 빠른 전문 검색(Full Text Serach)를 하기 위하여 inverted index를 생성하여 사용합니다.Lucene 관련 공식문서나, 기타 문서들을 찾아보면 inverted index라는 용어를 많이 사용하는데, 말 그대로 일반적인 index의 key와 value를 뒤집어 놓은 형태입니다. 말보단..사진이 빠릅니다. 먼저 책상의 개발서적중 아무거나 하나를 꺼냅니다.(저는 최근 가장 재밌게본 "다시 미분적분"의 책을 꺼내서 사진을 찍었습니다)그..
개발이야기/Lucene & Solr 2019. 10. 10. 21:33

[Lucene] 루씬 - Search and Highlighting 예제

이번에는 문자열을 검색하고 이를 highlight 처리하는 방법에 대해서 알아봅니다.먼저 highlight 기능을 이용하려면 dependency에 highliter를 추가해야 합니다.maven project의 pom.xml 파일에 하기와 같이 추가하면 됩니다. Index writing폴더에 파일을 넣어두고 이 파일들의 내용을 검색해서 사용합니다.아래 링크에서 사용했던 방법과 동일한 방법으로 index를 생성합니다.https://tourspace.tistory.com/240 index를 생성하는건 동일한 코드이므로 코드에 대한 자세한 설명이 필요하다면 상기의 링크를 클릭하여 먼저 확인하시기 바랍니다. 1. Write helper class 생성class DocumentWriter2 { companion o..
개발이야기/Lucene & Solr 2019. 10. 5. 04:38
반응형