전체 글 462

데이터 엔지니어 - 업무, 필요 능력, 취업 팁 한번에 정리

1. 데이터 엔지니어란 ? - 데이터 자체와 데이터를 둘러싼 시스템을 책임지는 사람으로, 데이터 관리뿐 아니라 수집, 보관, 처리 시스템의 개발, 구조 설계, 유지보수를 담당한다. 또한 사내 데이터 분석 도구나 시각화 도구를 직접 개발하기도 한다. (개발자와 가장 가까운 형태) 2. 데이터 엔지니어의 자세한 업무 1. 파이프라인 구축, 관리 및 유지 보수 : 데이터가 흐르는 과정 구축 및 관리 유지 보수 -> 1.데이터 레이크 : 데이터를 한곳에 가공 없이 저장하는 것 (아마존의 S3) -> 2.데이터 가져오기 : 데이터 웨어하우스에 저장하는 과정 (아마존-Redshift, 구글-BigQuery, IBM-Db2) -> 3.데이터 마트 : 데이터 웨어하우스의 하위 부분, 실제 사용하는 부서 레벨이나 주제로..

[Django 기초] 파이썬 장고 - 개념 정리 및 웹 페이지 만들기

1. 웹 프레임워크란? - 웹 서버를 구현하기 위한 목적으로, 해당 기능들을 모아놓은 것이다. - 파이썬에는 장고와 플라스크가 있다. 2. 장고와 플라스크의 차이점 - 장고 : 대규모 웹 사이트 개발 -> 공통 개발 구역을 패키지로 - 플라스크 : 파이썬 마이크로프레임워크 -> 직접 구현, 자유도 높음 즉 장고는 익숙한 개발자가 큰 규모의 프로젝트를 편리하게 도와주고, 플라스크는 작은 규모의 프로젝트를 처음부터 끝까지 원하는 방향으로 진행할 수 있다. 3. 장고 설치 및 기본 명령어 정리 #장고 웹 플레임워크 설치 pip install django #장고 프로젝트 생성 django-admin startproject [프로젝트 이름] #장고 서버 실행하기 python manage.py runserver 0..

[알고리즘] 백준 25165 파이썬 - 영리한 아리의 포탈 타기

25165번: 영리한 아리의 포탈 타기 아리가 보스 몬스터를 잡으러 가려면 광야에 위치한 포탈을 타야만 한다. 하지만 광야에는 아리가 포탈을 타러 가는 것을 방해하려는 보스 몬스터의 오른팔인 부하 몬스터 한 마리도 함께 위치 www.acmicpc.net 문제 아리가 보스 몬스터를 잡으러 가려면 광야에 위치한 포탈을 타야만 한다. 하지만 광야에는 아리가 포탈을 타러 가는 것을 방해하려는 보스 몬스터의 오른팔인 부하 몬스터 한 마리도 함께 위치해 있다. 광야는 세로의 길이가 N, 가로의 길이가 M 인 N x M 격자판으로 이루어져 있고 격자판의 왼쪽 윗 칸은 (1, 1)이며 오른쪽 아래 칸은 (N, M)이다. 아리가 처음 위치한 칸은 (1, Ac)이고, 부하 몬스터가 위치한 칸은 (Sr, Sc)이며, 포탈은..

우분투 VS CODE 자바 개발 환경 구축 - 필수 플러그인

1. 필수 플러그인 - Bracket Pair Colorizer 2 괄호가 어디에 겹쳐져있는지 알려주는 플러그인이다. - Prettier 코드를 양식에 맞게 자동으로 정렬해주는 플러그인이다. - Live Server 코드를 라이브로 서버에 새로고침 없이 연결해주는 역할을 하는 플러그인이다. - Core Runner 자바를 포함한 다양한 언어를 컴파일 해주는 기능을 가진 플러그인이다. - Korean Language Pack for Visual Studio Code vs code를 한국어 버전으로 바꾸어준다. - Extension Pack for java 자바 확장 팩도 설치한다. 2. 자바 설치 과정 ## 설치가능리스트 업데이트 apt-get update ## JDK 8버전 설치 sudo apt-get ..

IT지식/나머지 2022.10.11

투자 기초 용어 정리 (Feat. 월가의 퀀트 투자 바이블)

1. PER = 주가 / 주당순이익(EPS) - 낮을수록 저평가되었을 확률이 크다. ​ 2. EBITDA/EV(기업가치) - 낮을수록 주식이 싸다는 것 출처 : 주가수익비율(PER) (naver.com) 3. PCR = 시가총액 / 현금흐름 총액 - 저 PCR 상위 10프로가 효율적 ​ 4. PSR = 주가 / 매출액 - 저 PSR 상위 10 -> 고 PSR종목이 유리할 때는 시장이 과열됐을 때 ​ 5. PBR = 주가 / 주당순자산(BPS) - 낮은 주식은 가치주로 경제가 어려울 때 저조한 기록을 보여준다. ​ 6. 배당수익률 = 연간 배당금 / 주식의 현재 가격 * 100 ​ 7. 자사주 매입 수익률 = (1년전 유통 주식 수 - 오늘 유통 주식 수) / 1년전 유통 주식 수 -> 상위는 저평가라고 ..

빅데이터 직업 종류 5가지 소개

1. 데이터 엔지니어 - 업무 : 데이터 자체와 데이터를 둘러싼 시스템을 책임지는 사람으로, 데이터 관리뿐 아니라 수집, 보관, 처리 시스템의 개발, 구조 설계, 유지보수를 담당한다. 또한 사내 데이터 분석 도구나 시각화 도구를 직접 개발하기도 한다. (개발자와 가장 가까운 형태) - 필요능력 : SQL, (자바, JS, 파이썬, C/C++ 중 1), 하둡,스파크와 같은 빅데이터 도구, 도커 개발 및 배포 경험 데이터 엔지니어 - 업무, 필요 능력, 취업 팁 한번에 정리 1. 데이터 엔지니어란 ? - 데이터 자체와 데이터를 둘러싼 시스템을 책임지는 사람으로, 데이터 관리뿐 아니라 수집, 보관, 처리 시스템의 개발, 구조 설계, 유지보수를 담당한다. maeseok.tistory.com 2. 데이터 애널리스..

[Python] Matplotlib - 데이터 시각화 활용예제(Feat. 산점도, 히스토그램, 그래프, 차트)

1. Matplotlib이란 ? - Python 프로그래밍 언어 및 수학적 확장 NumPy 라이브러리를 활용한 플로팅 라이브러리입니다. Tkinter , wxPython , Qt 또는 GTK 와 같은 범용 GUI 툴킷을 사용하여 애플리케이션에 플롯을 포함 하기 위한 객체 지향 API를 제공한다. Matplotlib은 매트랩과 유사하게 설계된 상태기계(예: OpenGL )을 기반으로 하는 절차적 "pylab" 인터페이스도 있지만 사용은 권장되지 않습니다. SciPy는 Matplotlib을 활용합니다. 출처 : Matplotlib - 위키백과, 우리 모두의 백과사전 (wikipedia.org) - 간단히 말하면 데이터 시각화를 도와주는 라이브러리입니다. 2. 설치 pip install matplotlib i..

[알고리즘] 백준 25285 파이썬 - 심준의 병역판정검사

문제 병역판정검사는 병역의무자들의 상태를 검사해 징병 여부와 징병 시 어느 방향으로 복무를 시키는 게 좋을지 판정하는 검사로, 남성들은 만 19세가 되는 해에 모두 병역판정검사를 받는다. 신체 등급이 1급부터 3급인 사람은 현역 입영 대상, 4급은 보충역, 5급은 전시근로역, 6급은 병역면제 처분을 받는다. 올해 20살이 된 준이와 친구들은 병역판정검사를 받아야 한다. 준이와 친구들은 매우 건강하기 때문에 다른 질병의 유무와 관계 없이 신장 및 체중으로만 신체 등급이 결정된다. 준이와 친구들의 신장과 체중이 주어지면 아래 표를 참고해 신체 등급을 알려주자. ↓신장(cm), 등급 → 1급 2급 3급 4급 5급 6급 140.1 미만 체중과 관계없이 6급 140.1 이상 146 미만 체중과 관계없이 5급 14..

월가의 퀀트 투자 바이블 - 퀀트의 교과서

월가의 퀀트 투자 바이블(양장본 HardCover) PER, PSR, 배당수익률, 가격 모멘텀 등 널리 알려진 단일 요소부터 이들을 결합한 복합 요소까지 적용한 온갖 투자 전략의 성과를 약 90년간의 데이터로 검증해서 가장 강력한 전략을 찾는 방법을 알려주는 책. 전략들의 기간별 수익률과 변동성, 기저율 등 객관적인 자료를 제공하면서 결과를 해석하는 과정을 보여주기 때문에, 독자는 주식시장의 과거 흐름을 이해하고 현재를 적절한 맥락에서 파악할 수 있다. 저자 제임스 오쇼너시는 오쇼너시자산운용의 회장이며 미국을 대표하는 금융 전문가, 퀀트 분석의 선구자로 인정받았다. 〈포브스〉는 2009년 2월에 ‘전설적 투자자’로 벤저민 그레이엄, 워런 버핏, 피터 린치와 함께 그를 꼽았고, 〈배런스〉는 ‘세계 최강’이..

돈의 본능 - 세계가 변해도 결코 변하지 않는

돈의 본능 전 세계 천만 부 이상의 판매고를 올린 『네 안에 잠든 거인을 깨워라』, 『거인의 힘 무한능력』의 저자 토니 로빈스의 신작 『돈의 본능』이 출간됐다. 그는 인간의 무한한 잠재력을 좇아 내면의 변화를 이끌어냄으로써 전 세계 수백만 명의 삶을 뒤바꾼 동기부여 전문가이자 변화심리학의 최고 권위자다. 평범하게 태어난 보통의 사람들이 경제적 자유를 거머쥐고 더 나은 삶을 영위하길 바라며 『머니』, 『흔들리지 않는 돈의 법칙』에서 0.001% 최상류층 부자들만의 머니 시크릿을 공개해왔던 그가 이번에는 자신의 주장에 전문적 이론을 뒷받침해줄 미국 최고의 투자자문가 피터 멀록과 함께 돌아왔다. 2021년 현재, 인류는 팬데믹 쇼크로 공황에 빠져 있다. 그간 경험해보지 못한 사회경제적 변화 앞에서 대부분의 일..