tips

study 2022-12-14

[tips] logitech mouse g hub inactive problem

[tips] logitech mouse g hub inactive problem원인1로지텍 G 허브에서 비활성화 문제가 발생하는 이유는 karabiner때문이다.karabiner에서 인식을 먼저 가져가기 때문에...

spark

study 2022-12-14

[spark] spark란? spark 기본 개념

[spark] spark란? spark 기본 개념spark란? 범용적인 목적을 지닌 분산 클러스터 컴퓨팅 프레임워크 내 결함성, 병렬처리를 언어 수준에서 처리가 가능 Java,Python, R 등 다양한 ...

DE

study 2022-12-14

[DE] spark vs hive vs hadoop vs rdbms

[DE] spark vs hive vs hadoop vs rdbms 간단 정리hive hive는 SQL언어를 하둡 위에서 사용할 수 있는 쿼리 엔진이다. Metastore database 저장소에 스키마정보...

tips

study 2022-12-12

[tips] mac os keyboard home,end 윈도우처럼 사용하기

[tips] mac os keyboard home,end 윈도우처럼 사용하기문제1 mac에서 home,end key가 있는 키보드를 연결하고 사용할 떄 어떤 application에서는 커서가 앞,뒤로 잘 움직...

python

study 2022-12-10

[python] 폴더 내의 모든 파일 가져오기 코드

[python] 폴더 내의 모든 파일 가져오기 코드# use glob to get all the csv files# in the folder# path = os.getcwd()path = os.getcwd()c...

study 2022-12-10

[heroku] heroku사용 후기

[heroku] heroku사용후기지인의 요청으로 heroku에 Node.js , React, DB 구축을 도와주었다.장점 배포가 쉽다. APP 구성 디자인이 간단하다. Backend - DB연결 쉽다. ...

study 2022-12-09

[ml] Precision, Recall

[ml] Precision, RecallRecall Recall은 실제로 True인 데이터를 모델이 True라고 인식한 데이터의 수입니다. 모델이 True라고 예측한 갯수 / 실제로 True인 갯수Preci...

docker

study 2022-12-08

[docker] conatiner내부에서 docker 실행

[docker] conatiner내부에서 docker 실행Data Engineer 과정중 shell에 접속하여 이것저것 해볼 수 있는 환경이 있었다..당연히 여기서 docker 설치 및 sqoop 테스트, do...

docker

study 2022-12-07

[docker] linux에 docker 설치

[docker] linux에 docker 설치apt-get updateapt install -y docker.ioapt install docker-composedocker info한 번에 설치curl -fsSL...

sqoop

study 2022-12-05

[sqoop] sqoop-mysql 연동

[sqoop] sqoop-mysql 연동

study 2022-12-05

[postgresql] postgres cli 명령어

[postgresql] postgres cli 명령어postgres 접속 명령어# localhost의 5432 port로 Postgresql 접속을 시도. Target DB는 현재 사용자 이름과 동일한 'jhy...

study 2022-12-05

[postgrsql] PostgreSQL-tmp.s.PGSQL.5432-failed

[postgrsql] PostgreSQL-tmp.s.PGSQL.5432-failed문제발생 brew services start postgresql 로 서비스 실행시 ps-ef | grep sql 로 ...