DoITgrow

안녕하세요. 오늘은 간단히 파이썬 Pandas(판다스) 패키지의 좋은 기능 하나를 소개해 드리려고 합니다. 데이터 분석을 위해서 거의 70% 이상의 시간을 데이터 전처리하는데 쓰는 거 같아요. 저는 이제 엑셀보다 파이썬 판다스가 편해서 엑셀을 잘 안열고, 판다스를 많이 사용하는 것 같아요. 그래도 아직 알아야한 기능들이 있어서 지속적으로 공부하는 것이 필요할 것 같네요. 오늘은 문자열을 전처리하는 방법 중 하나로 문자열을 분리하는 방법을 소개드리려고 합니다. 데이터를 수집하다 보면 간혹 잘 분리되었지만 미처 분리되지 않고, 다른 구분자로 구분되어 있는 데이터 형태를 만날 수 있습니다. 예를들어 csv 파일을 콤마( , )로 구분하여 데이터프레임 형태로 얻었는데, 특정 부분은 콤마가 아닌 세미콜론( ; )..

안녕하세요. 자연어 처리를 할 때, 형태소 분석기는 매우 중요하죠. 오늘은 윈도우10 환경에서 Mecab 형태소 분석기를 설치하고 활용하는 방법에 대해서 알아보겠습니다. 사전에 설치가 필요한 프로그램 Mecab 형태소 분석기는 Java 언어로 구현된 라이브러리이므로 파이썬에서 작동시키려면 파이썬에서 자바 언어를 해석할 수 있어야 합니다. 그러게 위해 필요한 것은 파이썬을 대신하여 자바 언어를 읽고 파이썬에게 통역해주는 프로그램이 필요합니다. 바로 2가지 JDK 라고 부르는 "Java SE Development Kit"과 "Jpype" 프로그램 설치가 필요합니다. 단순하게 어떤 패키지를 설치해야 하는지 외우기 보다는 각각의 프로그램이 하는 역할을 같이 알고 계시면 나중에 다시 환경설정을 할 때, 금방 기억..

들어가며 오늘은 본격적인 웹 개발을 위한 사전 준비로 가상환경과 패키지를 준비하는 것에 대해 포스팅하려고 합니다. 또한 간략히 만든 웹 페이지를 자체 서버를 통해 열어보는 것까지 본 포스팅에서 다루고자 합니다. ▼ 앞으로 구현할 웹의 상세 내용은 첫번째 포스팅을 통해서 파이썬을 이용하여 앞으로 만들어볼 웹 시스템을 간략히 소개드렸으니 참고하시면 될 것 같습니다. 2021.12.11 - [백엔드 & 프론트엔드 & DevOps] - [파이썬 활용 웹 개발] 인트로 - DB 공유/관리 시스템① [파이썬 활용 웹 개발] 인트로 - DB 공유/관리 시스템① 배우고 싶은 것은 많은데 시간은 한정되어 있고, 또 회사 일과 병행하다 보면 하루 24시간이 너무 짧다는 생각이 부쩍 드네요. 딥러닝 알고리즘과 같이 개념을 ..

배우고 싶은 것은 많은데 시간은 한정되어 있고, 또 회사 일과 병행하다 보면 하루 24시간이 너무 짧다는 생각이 부쩍 드네요. 딥러닝 알고리즘과 같이 개념을 공부하는 것도 중요하지만 결국 누군가에게 도움이 될 수 있는 서비스로 만들기 위해선 웹이나 모바일로 개발하는 것이 필수라고 생각합니다. 저의 큰 목표는 개발한 딥러닝 알고리즘을 사람들이 쉽게 사용할 수 있는 서비스로 런칭하는 것이기에 웹 개발하는 부분도 열심히 공부하고 있습니다. 불과 1년 전만 해도 웹 개발에 관해서는 지식이 전무했지만 관심을 갖고 꾸준히 공부하다 보니 점점 성장하는 제 모습을 보고 더 열심히 하게 되네요. 이번 포스팅에서 다룰 주제는 굉장히 큰 범위라 몇 번을 나눈 포스팅을 통해 공부한 내용을 공유드리고자 합니다. 저도 현재 진행..