opencv는 c++ 기반의 영상, 이미지 처리 오픈소스 라이브러리로 많이 활용되고 있는데요. 몇 년전부터 딥러닝 기술이 많이 이루어지면서 대용량 데이터 학습 및 처리를 위해 속도 향상을 위해 GPU의 중요성이 올라가고 있어서, opencv 4.2 버전부터는 라이브러리 자체에서 NVIDIA GPU 가속 기술인 cuda를 지원하고 있습니다. 하지만 막상 opencv에서 cuda 가속을 사용하려면 단순히 인터넷이나 서버에서 라이브러리를 다운받아 쓰는 게 아니라, 사용자의 하드웨어 및 개발환경에 맞춰서 라이브러리를 생성하는 빌드(build) 작업을 해주어야 하는데, 이 과정이 꽤 번거로울 뿐 아니라 시간도 엄청 오래 걸리고(2시간 이상) 사용자 컴퓨터에 따라 인터넷을 보고 따라해도 잘 안되는 경우가 많아서 여..

본 슬라이드는 중고등학교 대상 빅데이터 기초 개념을 이해하고 데이터 분석가 진로 강의용으로 제작한 강의자료입니다. 빅데이터의 특징과 인공지능과의 관련성, 그리고 데이터 분석절차, 데이터 분석 사례, 그리고 데이터 분석가 관련 진로에 대해 소개하는 내용으로 구성되어 있습니다. 데이터의 정의와 존재, 그리고 빅데이터의 특징 데이터는 이미 우리 주변에 많이 존재합니다. 스마트폰으로 촬영한 사진에도 사진 이미지 뿐만 아니라 부가적으로 저장되는 데이터가 있으며, 유튜브 영상, 버스도착정보 등 일상생활 중에 마주치는 많은 것들이 데이터로 저장되어 있습니다. 빅데이터는 일반적으로 대량의 데이터를 뜻하지만, 일반적으로 5V(대규모, 다양성, 빠른 속도, 신뢰성, 가치) 중 일부를 지니고 있으면 빅데이터라고 불립니다. ..

본 슬라이드는 고등학생 대상 진로 멘토링 강의용으로 제작한 빅데이터 전문가(데이터 분석가) 직업 소개 자료입니다. 직업 소개와 저의 데이터 분석 및 참여 경험, 관련 전공 및 취업분야와 데이터 분석가가 되기 위한 필요 역량으로 내용이 구성되어있습니다. (2021. 9. 4 / 슬라이드 순서 변경 및 빅데이터 분석,활용 사례 파트를 수정하였습니다.) 빅데이터 전문가(데이터 분석가) 진로 관련 진학 및 취업 방향 빅데이터 전문가는 대량의 데이터를 관리하고 분석하여 의사결정에 도움이 되는 정보를 제공하거나 예측하는 모델을 설계하는 일 등을 하는 직업입니다. 빅데이터 전문가는 기존에 IT와 경영 분야에서 존재하던 데이터베이스 관리자, 통계 및 경영 분석가 등의 직업들이 2010년대 들어 서로 융합되어 탄생한 직..

재작년 말~작년 초에 국방TV의 최고 인기 프로그램, '토크멘터리 전쟁사'를 알게되서 즐겨보았는데요. 여느 우리나라 역사 프로그램 답지않게 국뽕이라 불리는 이른바 국수주의식 태도나 단순 사실 나열성 설명을 지양하고 현장감있는 묘사와 색다른 방향으로 역사를 해설하는 차별화된 특징이 있어서, 기존 역사 매니아 뿐만 아니라 저와 같은 역사에 약간 관심있는 일반인까지 폭넓은 사랑을 받던 프로그램이였습니다. 그 덕분에 여기에 출연했던 네 분(허준 MC, 윤지연 아나운서, 임용한 박사, 이세환 기자)의 인기가 상당히 올라갔는데, 그 중에서도 역사학자이자 여러 전쟁사 관련 책을 저술했던 임용한 박사가 토크멘터리 전쟁사의 장점을 살리는 데 가장 큰 지분이 있었던 만큼, 예전에는 일부 역사 매니아층에서만 인지도가 국한되..

- MBTI 성격유형과 평균소득 간 상관관계 첫 번째 글 - MBTI 성격 유형과 평균소득 간 관계에 대한 뇌피셜한 분석 (1) 작년, 재작년쯤 부터 MBTI가 사람 성격을 파악하는 도구로 인기를 끌고 있습니다. 옛날의 혈액형 성격설, 별자리 성격설의 계보를 잇는 듯 한데, 이에따른 비판도 많이 있죠. 비록 MBTI는 과학적 근 ellun.tistory.com - MBTI 성격유형과 평균소득 간 상관관계 두 번째 글 - MBTI 성격 유형과 평균소득 간 관계에 대한 뇌피셜한 분석 (2) - 연령대별 분석 연령대별 성격유형과 평균소득 통계 (연령대별 MBTI 성격유형별 평균소득) 'The Income Effect of Personality Type' 보고서에서 또 다른 흥미로운 점은 연령대별로 세분화한 평..

- 이전 글 - MBTI 성격 유형과 평균소득 간 관계에 대한 뇌피셜한 분석 (1) 작년, 재작년쯤 부터 MBTI가 사람 성격을 파악하는 도구로 인기를 끌고 있습니다. 옛날의 혈액형 성격설, 별자리 성격설의 계보를 잇는 듯 한데, 이에따른 비판도 많이 있죠. 비록 MBTI는 과학적 근 ellun.tistory.com 연령대별 성격유형과 평균소득 통계 (연령대별 MBTI 성격유형별 평균소득) 'The Income Effect of Personality Type' 보고서에서 또 다른 흥미로운 점은 연령대별로 세분화한 평균소득 통계입니다. 이 자료를 통해서 20대, 30대, 40대, 50대 연령대별로 어떤 성격유형이 평균소득 상승에 더 연관성이 높은 지 분석해보았습니다. '1) 연평균 소득 (근사)'는 위의 ..

작년, 재작년쯤 부터 MBTI가 사람 성격을 파악하는 도구로 인기를 끌고 있습니다. 옛날의 혈액형 성격설, 별자리 성격설의 계보를 잇는 듯 한데, 이에따른 비판도 많이 있죠. 비록 MBTI는 과학적 근거가 부족해서 심리학계에서는 인정받고 있지는 못하지만, 어쨌든 경험적, 임상적으로는 어느정도 사람의 성격을 구분하는 척도로 기업, 기관의 경영에 활용하는 등 효과를 나타내고 있기 때문에, 심리학계에서 주로 활용하는 성격지표인 'Big 5'와 별개로 여전히 대중성을 누릴 수 있을 것으로 생각됩니다. 언제부턴가 MBTI 16개 성격유형별 평균소득 순위를 나타내는 위의 짤이 인터넷에 많이 떠돌아 다녔는데요. 생각과는 다르게 아주 근거없는 자료는 아니고, 'Truity Psychometrics LLC'라는 성격검사..

보통 만드는 데서만 만드는 인터렉티브 무비식 어드벤처 장르계에서 2015년 홀연히 등장해서 수많은 팬덤을 양산했던 라이프 이즈 스트레인지의 후속편, 라이프 이즈 스트레인지 2를 이제서야 플레이 했습니다. 처음 나온 지는 2018년 가을이고 에피소드 5까지 완결난 것도 2019년 연말인데, 한국어 지원이 안되서 한국어 패치만 목 빠지게 기다렸었는데요. 에피소드 3까지는 몇 달 텀으로 느리지만 나오다가 아무리 기다려도 나머지 패치는 올라오지 않아서 알아보니, 한국어 패치를 만드는 '팀 프리스타일'이 해체해서 작업이 중단됐다고 하더군요. 그래서 이제 더 기다리기가 싫어서 그냥 에피소드 4랑 5는 영어로 플레이 했는데, 편지같은 긴 글 읽기 귀찮은 것 빼고는 생각보다 할 만하더라구요. 디시 라이프 이즈 스트레인..

지난 글에서는 대신증권 CybosPlus API로 코스피, 코스닥 전 종목의 과거 주가정보를 가져오는 코드를 만들었습니다. 이번에는 이 코드를 약간만 변형해서 코스피, 코스닥 등 과거 주가지수를 가져오는 코드를 만들어 보겠습니다. 과거 주가지수 불러오기 위해 변경한 코드는 아래와 같으며, 개별 종목 주가 불러오는 코드와 차이점 위주로만 간단히 설명드립니다. ##지수정보 가져오기 (최초 생성) import win32com.client import pandas as pd import time import datetime column_dailychart = ['code', 'section', 'date', 'open', 'high', 'low', 'close'] instStockChart = win32com...

알고리즘 트레이딩이나 주가 분석을 위해서 가장 먼저 할 일이 주식 종목 리스트와 주가정보를 가져오는 것인데요. 주식 종목 리스트에 비해서 주가정보는 데이터 양이나 가져올 항목이 훨씬 많아서 좀 더 신경쓸 점이 많습니다. 주식 데이터를 가져오는 여러가지 방법 중에 저는 대신증권 CybosPlus API를 활용하였는데요. 다른 API에 비해 아래와 같은 장점이 있습니다. 1. 수정주가 제공 주식은 여러 기업의 이벤트들로 인해 액면가나 기준가가 변경되는 경우들이 있습니다. 가장 대표적으로는 2019년의 삼성전자 액면 분할이 있겠고, 그 밖에도 많은 회사들이 증자, 감자, 배당과 같은 사유로 주가등락과는 별도로 주식 가격 자체가 크게 변화하는 경우들이 꽤 있습니다. 이러한 이벤트들이 발생할 경우 주가변화가 연속..

알고리즘 트레이딩이나 주가 분석을 위해서 가장 먼저 할 일이 주식 종목 리스트와 주가정보를 가져오는 것인데요. 주식 데이터를 가져오는 방법으로 API나 크롤링 등 여러가지 방법이 있고, API는 대신증권, 이베스트투자증권, 키움증권이 있습니다. 한두 종목이나 한 달, 몇 달치의 소량 데이터를 가져올 때는 어떤 API를 사용해도 크게 관계없겠으나, 유가증권 전 종목을 몇 년 치 가져오기 올 때는 여러가지 장애들에 부딪치는데요. 대신증권 CybosPlus API가 가져오는 속도나 데이터 가공 용이성 등 여러가지 측면에서 장점이 있어서 과거 데이터를 대량으로 가져올 때 추천합니다. 이번 글에서는 대신증권 CybosPlus API를 활용해서 Python으로 KOSPI, KOSDAQ 전 종목 리스트를 가져오고 C..

작년부터 주식이나 코인에 관심을 갖는 젊은 분들이 많이 늘어난 것 같습니다. 예전에는 주로 40~50대 아저씨들과 만났을 때나 주로 들리던 주제인데, 요즘은 젊은 사람들 사이에서도 많이 얘기가 오가고, 대학교에서도 투자 스터디나 동아리들이 생기고 있다고 하네요. 특히, 요즘 젊은 층의 주식 투자는 예전보다 훨씬 스마트해지고 있는데, 다양한 인공지능을 활용한 투자 서비스를 활용한다든가, 아니면 코딩을 할 줄 아는 사람들은 본인이 직접 주식 데이터를 활용하여 최적의 투자 방법을 수립하거나 주가를 예측하는 알고리즘 트레이딩, 또는 퀀트 방법을 활용하기도 합니다. 알고리즘 트레이딩이나 주식 분석을 하기 위해서 가장 먼저 필요한 것은 바로 과거 주가 데이터입니다. 주가 데이터를 제대로 확보할 수 있는 것에서 부터..

소금산 출렁다리 가기 위해 1km정도 떨어진 간현 관광지에서 출발합니다. 간현 관광지는 어렸을 때 갔던 기억이 있는데, 옛날부터 유명했던 유원지라 지금도 관광지화 되어있어 음식점이나 매점, 숙박시설들이 많이 있었습니다. 강 옆으로 난 길을 따라 가다가 다리를 건넙니다. 앞에 보이는 산이 소금산인데, 출렁다리는 산 너머에 있어서 여기서는 보이지 않네요. 그리고 앞에 또 다른 다리가 있는데, 구 철로를 레일바이크로 운영중입니다. 다리를 한 번 더 건너기 전 매표소. 여기 지나도 산 바로 밑에 매표소가 하나 더 있습니다. 입장료는 3천원인데, 티켓을 사면 원주시내에서 현금처럼 사용할 수 있는 2천원 쿠폰을 주기 때문에 이걸로 근처에서 음료나 아무거나 살 때 사용하면, 실질 입장료는 1천원이라고 볼 수 있겠습니..

데이터를 정리하거나 분석할 때 날짜 시간을 기준으로 정렬하거나 비교할 일들이 많은데, 데이터 분석으로 많이 사용하고 있는 파이썬(python)은 날짜 타입이 여러 종류가 있어서 헷갈리기 쉽습니다. 그 이유는 파이썬에서 수학계산이나 데이터 분석을 위해서는 거의 필수로 활용되는 라이브러리인 numpy와 pandas가 자체 데이터 타입을 갖고 있기 때문인데요. 이것들은 기본 파이썬 데이터 타입과 용도는 비슷하지만 기능과 문법에 차이가 있기 때문에, 제대로 구분하지 않고 인터넷에서 검색해서 복사 붙여넣기하면 제대로 작동하지 않는 경우가 많습니다. A. 파이썬 날짜 시간 타입 이해 먼저 파이썬에서 및 numpy, pandas에서 정의된 날짜타입은 아래와 같습니다. 라이브러리 날짜, 시간 클래스 타임델타 클래스 d..

영월 주천면에서 평창 쪽으로 가면 깊은 계곡 사이로 난 길을 가게 되는데요. 중간에 평창강을 삼면으로 끼고 있는 곳에 '보보스캇 캠핑장'이라는 곳이 있는데, 여기에 섶다리와 메타세콰이어 길이 있다고 해서 잠시 차를 멈춰서 구경해봅니다. 주소 : 강원 영월군 주천면 미다리길 50-24 보보스캇 캠핑장은 도로에서 강을 건너야 나오는데, 일반적인 콘크리트 다리가 아니라, 통나무를 세우고 나무가지, 흙을 다져서 만든 섶다리를 건너가야 합니다. 여기 섶다리가 영월 주민들이 함께 모여서 지었다고 하는데, 저희 삼촌도 이 다리 만드는데 참여하셨다고 하더라구요ㅎㅎ 얼핏보면 아슬아슬해보이는 모습인데, 막상 올라가보면 생각보다 넓고 튼튼합니다! 많은 자본과 재료없이도 주변에 있는 재료만으로도 건설할 수 있는 전통적인 다리..