🚀 OkOJJ

요즘은 대부분 퍼블릭 클라우드를 사용하고 있지만 각 클라우드별로 용어가 달라서 헷갈리는 경우가 있다. 아래 이미지를 보면 각 클라우드간 비슷한 서비스를 한눈에 볼 수 있다. * 출처 : https://blog.bytebytego.com/p/ep70-cloud-services-cheat-sheet

전에 데이터 직무별 하는일에 대한 포스팅을 올린 적이 있었는데 (아래 글 참고) 이번에는 각 데이터 직무별 주요 업무에 대해 차트 형태로 된 그림이 있어서 공유해 본다. Data Scientist vs Engineer vs Analyst 예전에 인터넷에서 봤던 이미지 인데, 데이터 관련 직무에 대해 정리가 잘 안되는 경우가 많아서 참고하면 좋을 것 같다. (현실은 그렇지 않지만) Data Scientist 통계나 머신 러닝을 이용해 주요 비 blog.ojj.kr

매번 검색하기 귀찮아서 퍼옴 ㅎㅎ Table 11.1 Required Storage and Range for Integer Types Supported by MySQL Type Storage (Bytes) 최소값 (signed) 최소값 (unsigned) 최대값 (signed) 최대값 (unsigned) TINYINT 1 -128 0 127 255 SMALLINT 2 -32768 0 32767 65535 MEDIUMINTINT 3 -8388608 0 8388607 16777215 INT 4 -2147483648 0 2147483647 4294967295 BIGINT 8 -2^63 0 2^63 - 1 2^64 - 1 * 출처 : https://dev.mysql.com/doc/refman/8.0/en/int..

Jenkins 설치 관련해서 검색을 하다보면 이런저런 글들이 많은데 설치 하다 보면 GPG error 도 종종 발생하고 이런 저런 오류가 나오는 경우가 있는데 공식 홈페이지에 있는 가이드 대로 따라하면 문제 없이 설치가 되는 것 같다. * 출처 : https://pkg.origin.jenkins.io/debian-stable/ 아래 코드를 쉴에서 순서대로 실행 curl -fsSL https://pkg.jenkins.io/debian-stable/jenkins.io-2023.key | sudo tee \ /usr/share/keyrings/jenkins-keyring.asc > /dev/null echo deb [signed-by=/usr/share/keyrings/jenkins-keyring.asc] \..

Github 등에서 git 을 통해 코드를 관리하다 보면 여러 repo 에 중복되는 코드가 발생할 수 있다. 이런 repo 간 코드 중복을 피하기 위해 특정 repo 안에 다른 repo 를 연결해서 사용하면 중복을 피할 수 있는데, git subtree 를 활용하면 가능하다. (리눅스에서의 symbloic link 와 비슷하다고 해야할까?) - 메인 repo : mysite - 서브 repo : utils (연결할 repo) 메인 repo 의 최상위 폴더에서 아래 명령을 순서대로 실행 1. remote 에 연결할 repo 등록 $ git remote add [remote 이름] [연결할 repo 주소] $ git remote add utils https://github.com/okojj/utils.git..

많이들 보셨겠지만 요즘 분위기 ㅎㅎ

DataFrame 은 행과 열이 있는 데이터 테이블을 나타내며, DataFrame 개념은 어떤 프로그래밍 언어에서도 변하지 않지만 Spark 와 Pandas 의 DataFrame 은 상당히 다르다. 이 글에서는 Spark DataFrame과 Pandas DataFra,e의 차이점을 알아보려고 합니다. Pandas DataFrame Panda는 NumPy 라이브러리를 기반으로 하는 오픈 소스 Python 라이브러리입니다. 다양한 데이터 구조와 연산을 사용하여 수치 데이터와 시계열을 조작할 수 있는 Python 패키지입니다. 주로 데이터 가져오기 및 분석을 상당히 쉽게 하기 위해 사용됩니다. Panda DataFrame은 레이블이 지정된 축(행 및 열)을 가진 잠재적으로 이질적인 2차원 크기 가변 표 형식 ..

ChatGPT 에게 물어봤다. Q) How can I capture the API URL of smartphone application ? A) To capture the API URL of a smartphone application, you will need to use a tool called a network sniffer or packet capture tool. This type of tool intercepts and captures the network traffic between your smartphone and the application's server, allowing you to inspect the requests and responses that are sent and rec..

일반적인 리눅스 서버는 랜포트별로 IP를 할당하여 ifconfig 명령어로 할당된 IP 를 확인할 수 있으나 AWS (Amazon Web Service)등의 클라우드 장비에서는 Private IP 만 확인이 가능하고 Public IP 는 Amazon Console 등을 통해서 확인이 가능하다. 또는 NAT 아래에 위치한 서버들의 경우도 실제 할당된 IP는 사설 IP만 표시되고, 외부 접속시 외부 서버에서 인식하는 IP 는 NAT 의 IP 가 된다. 이런 경우 서버에서 간단하게 외부로 접속하는 본인 IP를 확인하는 방법은 아래와 같다. $ curl ip.ojj.kr Your IP is 175.123.191.3 $ curl ip.ojj.kr/?q=1.1.1.1 * Query : 1.1.1.1 * Result..

1. timestamp 값으로 원하는 날짜 형태로 변환하기 $ date -d '1970-01-01 1676360315 sec' 2023. 02. 14. (화) 07:38:35 KST $ date -d '1970-01-01 1676360315 sec' +'%Y-%m-%d %H:%M:%S' 2023-02-14 07:38:35 * 결과는 시스템 Timezone에 맞춰서 표시됨 2. 날짜 형식으로 timestamp 값 구하기 (1번과 반대) $ date -d '2022-02-14' +%s 1644764400