Python seaborn heatmap으로 보는 서울시 구별 범죄현황 (feat. pivot)

이번에는 Python에서 seaborn의 heatmap을 익혀볼겸 서울시 구별 범죄현황 데이터를 다뤄보겠습니다. 이 내용은 몇 년전에 제가 지은 책(파이썬으로 데이터 주무르기)에 있는 내용입니다. 그 내용을 조금 다듬어서 오늘 이야기해보려고 합니다.~먼저 구글에서 이쁘게 검색하고~위 사이트에서 관서별 5대 범죄 발생 검거현황을 클릭~위 사이트에서 다운로드 받습니다. 다운로드를 받아서 압축을 풀고 2018년 데이터를 소스코드와 같은 폴더에 두도록 하죠~먼저 raw 데이터를 읽어봅니다. 이 데이터는 경찰서 이름, 각 경찰서마다 5대 범죄, 각 범죄마다 발생/검거가 나눠 기록되어 있습니다.~이 데이터를 정리하는 마법같은 명령어가 pivot_table입니다~~~^^ 이 명령을 위와 같이 사용하면 raw 데이터가..
Theory/DataScience 2020. 6. 22. 08:00

[ROS2] 토픽 topic 개념을 이해하기 위해 간단히 사용해보기

지난번 ROS2에서 node의 개념을 이야기한 다음 이야기입니다. 노드에서 뭔가 도닥도닥 만져봤다면 당연히~ 토픽(topic)도 만져봐야죠. 이번에는 토픽에 대해 이야기를 해보고 싶네요.토픽은 ROS에서 노드간에 전해지는 메세지의 흐름입니다. 어떤 노드에서 토픽을 발행하구요. 또 어떤 노드들은 원하는 토픽을 받을 수 있습니다. 이렇게 해서 메세지가 노드에서 노드로 전해집니다.이 그림은 Exploring the performance of ROS2라는 논문에 나타난 그림인데요. 카메라를 다루는 노드가 카메라에서 받은 이미지를 발행(publish)합니다. 이 이미지를 쓰고 싶은 노드는 받으면 됩니다. 그래서 자동차도 인식하고 보행자도 인식하는 각각의 노드들이 사용하는 것이죠. 일단, 현재 터미널에는 turtl..
Robot/Robot Program - ROS 2020. 6. 11. 08:00

[ROS2] 노드의 개념 이해하기

요즘 로봇세계에서는 새로나온 ROS2 foxy 버전에 대한 이야기가 많습니다. 지난번에 Dashing 버전의 설치를 이야기했었는데요. Foxy 버전도 다르지 않습니다. 그래서 Foxy도 그냥 그대로 설치 페이지를 따라하면 그만입니다.^^ 단~ Foxy는 우분투 20.04버전~인 Focal Fossa에 설치를 해야합니다. 기억해주세요 우분투 20.04 Focal Fossa에 설치하는 것이Foxy Fitzroy입니다.설치페이지 안내대로 흘러가면 되어서 크게 어려운 점은 없습니다. 다시 이야기하지만, dashing 설치때와 다르지 않습니다.bashrc 마지막에 저렇게 foxy의 setup.bash를 포함 시켜 두도록 하죠그리고 연습용으로 turtlesim도 설치합니다. 당연한 이야기지만 foxy 버전요~그리고..
Robot/Robot Program - ROS 2020. 6. 8. 08:00

데이터 사이언스 과정을 막 배운 병아리 레벨이지만 열정을 가진 분들을 소개합니다.

저는 도전적인 일을 정말 좋아합니다. 이번에도 저 개인적으로는 도전적인 일을 하나 소화했습니다. 저는 패스트 캠퍼스와의 인연이 꽤 오래되었습니다. 처음 인연을 맺었던 강의는 파이썬을 활용한 데이터 분석 입문이라는 수업이었습니다. 2016년 가을쯤에 시작해서 2019년 겨울까지 수업을 진행했습니다. 여유가 생기면 곧 다시 시작할 수 있지 않을까 합니다.^^ 그리고 2019년 11월부터 정말 기억에 남고 무시무시한 AI Robot이라는 수업을 또 진행했습니다. 항상 뭔가 수업을 한다는 것은 내가 알고 있던 지식을 다시 체계적으로 정리해야하고, 또 미처 정리하지 않았던 내용도 보강해서 잘 정리해 두고 있어야합니다. 특히 저처럼 언제가 새로움을 추구하고 그 와중에 실습형 수업을 좋아하는 사람은 더더욱 여러 상황..
Theory/Review 2020. 5. 31. 10:36

서울시 인구현황이라는 데이터 시각화해보기

최근 데이터사이언스 카테고리에 아주 쉬운 난이도의 글을 올리고 있습니다. 입문하시는 분들에게 작은 도움이 되었으면 좋겠다고 생각했거든요. 이번에는 서울시 인구현황이라는 통계자료가 있는데요. 그걸 한 번 다뤄보도록 하겠습니다.서울시 열린데이터에서 구할 수 있는 자료입니다. 2020년 4월 29일에 업데이트 되었네요.데이터는 휠을 조금 내리면 내려받기를 선택할 수 있습니다. 혹시 시간이 지나서 글을 읽는 분들을 위해 데이터도 같이 올려둡니다.이제 간단히 시작해보겠습니다.~그냥 한 번 읽어봤습니다. 다운로드받는 웹페이지의 안내대로 탭(\t)으로 구분해서 읽어봤습니다.그러나 대략 3번째 줄부터 읽으면 좋을것 같네요. 그래서 header는 2로 설정했습니다. 하나더, 콤마(,)들이 숫자 세자리마다 위치해 있는데요..
Theory/DataScience 2020. 5. 25. 11:00

[Data Science] 서울시 흡연률 데이터에서 연령별 흡연률 데이터 시각화

이 글은 아주 쉬운 데이터를 실습용으로 사용해서 파이썬과 데이터 사이언스 분야를 공부하는 컨셉의 글입니다. 이번에 사용할 데이터는 서울시 흡연율 통계라는 데이터입니다. 해당 페이지 하단으로 이동하면저렇게 파일을 받을 수 있습니다.해당 파일은 저도 같이 공유하도록 하죠^^데이터는 매우 심플한 형태입니다.구분과 구분.1이라는 컬럼만 확인을 해보면 되겠네요이중에서 구분에 "생애주기별"이라는 데이터에 오늘은 집중하도록 하겠습니다.pandas의 DataFrame은 조건문을 이용한 데이터 선별이 아주 쉽습니다 저렇게 말이죠^^ 위 결과에서 전체, 남자, 여자만 가져오고 싶다면이렇게 하면 됩니다.이제 저장하죠. 이름을 smoke_age로 하겠습니다.이제 한글 폰트를 지정하고, (이전에도 이야기했지만, 윈도우 유저는 ..
Theory/DataScience 2020. 5. 18. 08:00

[Data Science] 시울시민들이 운동을 하지 않는 이유에 대한 분석

안녕하세요. 지난번에 Conda 환경을 세팅하는 이야기를 했구요. 이번에는 첫 번째 프로젝트(라고 부르기 창피하지만)로 서울시민들이 운동을 하지 않는 이유라는 통계 자료를 가지고 한 번 놀아보도록 하겠습니다. 진지하게 접근하는 것이 아니구요. 매우 간단한 파이썬 작업을 해보려고 합니다. 그러니 이 글은 파이썬을 처음 접하는 분들에게 그저 간단한 동기 부여 차원에서 진행되는 작은 글일 뿐임을 미리 이야기해둡니다.^^먼저 데이터를 찾아야겠죠. "서울시 운동을 하지 않는 이유 통계"라는 제목으로 구글에서 검색하면 저 글이 뜹니다. 서울 열린데이터 광장에서 구할 수 있는 데이터입니다. 혹시 데이터가 변경되어서 이 글의 코드가 동작하지 않을때를 대비해서 해당 데이터도 본문에 넣어두겠습니다.열린데이터광장에서 저 화..
Theory/DataScience 2020. 5. 11. 18:00

[Data Science] Conda 환경을 만들고 기초 모듈 설치하기

Python의 다양한 버전과 또 엄청~ 다양한 모듈들의 버전과 그들 사이의 관계들로 (모듈을 포함해서) 파이썬을 설치하는 경우의 수가 아주 많이 생길 수 있습니다. 어떤 때는 급하게 tensorflow 1.14 버전에서 테스트하거나, 또 어떤때는 tensorflow 2.0 버전에서 테스트해야할 수도 있지요. 이럴때 conda가 제공하는 환경을 다수 만들어서 사용하면 좋을 것 같습니다. 오늘은 그렇게 conda로 환경을 만드는 것에 대해 이야기를 하려고 합니다.일단 python 배포판에서 아마 많이들 설치하실 아나콘다를 설치해 둡니다.설치가 다 되었으면 맥 유저는 터미널을 열고, 윈도우 유저는 Anaconda Prompt를 실행하면 됩니다. 그리고 conda env list를 실행합니다. 저는 여러 환경을..
Theory/DataScience 2020. 5. 10. 14:51

[ROS1] ROS1 Melodic 설치

안녕하세요. 이번에는 ROS1 Melodic 버전의 설치를 이야기하려고 합니다. ROS는 이제 ROS2로 넘어가야하지만, 로봇의 특성상 많은 하드웨어들이 따라가야하기 때문에 분명 한동안 ROS1도 사용이 될겁니다. 그리고 그 많은 생태계가 정착을 하려면 또 시간이 필요할테니까요.이번 melodic은 Ubuntu18.04나 Mint19.3에 설치되는 ROS1 버전입니다.먼저 직전글인 ROS2 Dashing 설치 페이지를 따라하고 지금으로 오셨다면 그 글 마지막쯤에 작업했던 bashrc의 ROS2 부분을 주석처리하고 터미널을 다시 시작하고 설치를 진행하도록 하겠습니다.역시 여러분들은 melodic 설치 안내페이지를 따라하면 됩니다.네.. 그리고 큰 일이 없다면 공부하는 단계이니 desktop-full 버전을..
Robot/Robot Program - ROS 2020. 5. 9. 16:52

[ROS2] ROS2 dashing 설치

유사한 글을 올린적이 있지만, 일종의 정리 차원에서 다시 글을 올려봅니다. ROS2 Dashing의 설치입니다. 저는 Ubuntu18.04에 ROS2 Dashing을 설치해보려고 합니다. 2020년 5월쯤 LTS 버전이 예약되어 있지만, 설치법은 비슷할 것이니 미리 설치하고 한 번 가지고 놀아보는 것도 괜찮지 않을까 하네요^^. 요즘에는 설치페이지들이 워낙 잘 되어 있지만, 그래도 혹시나 도움이 될만한 것이 있을까하고 작성해봅니다.ROS2에서 Dashing 버전을 설치해보려고 합니다. Dashing의 공식 설치안내 페이지에서 하라는 데로 하면 됩니다.^^.위 부분을 터미널에서 긁어서 실행하구요~update와 dashing desktop 버전을 설치하면 됩니다.그리고, 명령어 자동완성이 되는 python3..
Robot/Robot Program - ROS 2020. 5. 9. 15:44