리치윈드 (RichWind)

Tensorflow IO (TFIO) Tensorflow_io는 GPU를 사용하여 파일 로드, 디코딩, 전처리 등을 빠르게 할 수 있어서 매우 유용한 툴이다. 필자 또한 다수의 파일을 읽고 전처리할 때 사용하고 있다. 처음에는, 각 파일별로 전처리한 결과를 저장해 놓고 그때 그때 저장해둔 전처리 결과물을 로딩하여 사용했으나, Tensorflow_io를 사용한 이후 부터는 실행하는 Runtime 시점에 파일로딩->전처리까지 실시간으로 처리하여도 속도 측면에서 뛰어남을 체감하고 있다. 더욱이, 전처리하는 과정에서 일부 수정이 발생하면, 미리 저장해둔 전처리 결과물을 재 생성해야 한다. 이 때문에, 전처리 과정에서 파라미터 변경 등에 따른 실험이 필요하다면 필수적으로 Tensorflow_io를 사용하게 될 것..

머신러닝 이야기 2022. 9. 6. 10:35

머신러닝에 대한 질문으로 아래와 같은 문의 사항을 많이 듣습니다. 제가 머신러닝을 사용해 보려고 하는데, 어디에 사용해야 하나요? 제 분야에 머신러닝을 사용해 보려고 하는데, 어디에서부터 손 데야 할지 모르겠습니다... 사실, 위 같은 질문을 받으면,, 저도,,, 멍.......................... 위 질문의 직설적이 답변을 드리면, 머신러닝에 대한 최소한의 이해를 키우시라... 라고 답변을 먼저 드려야 할것 같습니다. [Machine Learning Process] 우선, 머신러닝 관련 프로세스는 아래와 같습니다. 굳이 교과서적으로 표현한다면 아래와 같습니다. ① 목표 설정 (머신러닝으로 하고 싶은일이 무엇인가?) - 목표, 예상 알고리즘, 그에 따른 데이터 셋 설계 - ex) . 목표 ..

머신러닝 이야기 2020. 3. 15. 19:31

몇년 전만 해도 ... "머신러닝을 전공했다"라고 말하면, "뭐라고요 ? 러닝 머신을 전공 했다고?" 라는 우스게 소리 자주 듣던 적이 있었습니다. 3~4년 전만 해도 그런 분위기 였었습니다. 그러나, 최근에는 인공지능/머신러닝 이라는 단어는 그냥 일반적인 용어가 되어 버렸네요. 격세지감을 느끼지 아니할 수 없다. "인생사 새옹지마"라고 하지만, 참 세상 일이란 게....참....알다가도 모를일 아닌가요? 더욱이, 석사와는 다른 학교/다른지도교수님에게서 박사과정을 마친 저는, 머신러닝에 익숙하지 않으신 교수님을 설득하는데만 1년의 시간을 보냈는데, 요즈음은 머신러닝을 설명하는 것 자체가 웃긴 일이 되어 버렸죠. 비전공자도 머신러닝 책을 쓰는 시대이니깐 말이죠. 백마디의 말 보다, 백번의 설득 보다, "A..

머신러닝 이야기 2020. 3. 15. 19:23