Spark Kafka 설치 방법(Docker Compose)
Docker Compose를 사용하면 Apache Spark와 Apache Kafka를 간단하게 설치해 사용할 수 있습니다. docker-compose.yml 파일을 작성해 Spark를 사용할 수 있는 간단한 환경을 구축해보겠습니다. Spark와 Kafka 외에도 Jupyter L...
Docker Compose를 사용하면 Apache Spark와 Apache Kafka를 간단하게 설치해 사용할 수 있습니다. docker-compose.yml 파일을 작성해 Spark를 사용할 수 있는 간단한 환경을 구축해보겠습니다. Spark와 Kafka 외에도 Jupyter L...
Recently, high-performance, lightweight language models such as Meta’s Llama3 and MS’s Phi-3 have been open-sourced on HuggingFace. These models can be consi...
최근에 Meta의 Llama3와 MS의 Phi-3 같은 고성능 경량화 언어 모델이 허깅페이스(HuggingFace)에서 오픈소스로 공개되었다. 이러한 모델은 ChatGPT나 Claude와 같은 대형 언어 모델(LLM)을 API로 사용하는 대안으로 고려될 수 있다. 오픈소스 모델을 ...
GPT와 같은 언어 모델에 사용되는 두 가지 혁신적 파일 형식, GGUF와 GGML에 대해 소개하겠습니다. 이들의 차이점과 각각의 장단점을 살펴보겠습니다. 이 글은 What is GGUF and GGML?의 내용을 한글로 번역/정리한 글입니다.
파이썬으로 구글 주소록에 저장된 연락처 목록을 조회하는 방법에 대해 알아본다. 이 기능을 구현하려면 구글 계정과 GCP 프로젝트가 필요하다. Google People API를 사용해 구글 주소록 서비스에 접근할 수 있다. 일반적으로 해당 API는 웹/앱 서비스에 통합해 사용자들 각...
Viewing FRED Data
FRED 데이터 조회하기
카카오뱅크의 SWIFT 코드 변경에 따른 안내
한국은행 경제통계 데이터 조회하기
국토교통부 건축인허가정보 데이터 조회하기
Whisper API Python 사용법
파이썬으로 PDF파일에서 텍스트 추출하는 방법
파이썬으로 PDF파일을 이미지 파일(JPG, PNG)로 변환하는 방법
ChatGPT API Python 사용법 (feat.DALL-E, Karlo)
국토교통부 토지소유정보 데이터 조회하기
국토교통부 토지임야정보 데이터 조회하기
국토교통부 주택인허가정보 데이터 조회하기
카카오 API를 사용하기 위한 오픈소스 파이썬 라이브러리
파이썬으로 법정동코드와 행정동코드 조회하는 방법
KB부동산 주택가격동향조사 데이터 조회하기
파이썬으로 사업자등록정보 진위확인 및 상태조회하기
카카오 API를 사용하기 위한 오픈소스 파이썬 라이브러리
카카오 API를 사용하기 위한 오픈소스 파이썬 라이브러리
카카오 API를 사용하기 위한 오픈소스 파이썬 라이브러리
카카오 API를 사용하기 위한 오픈소스 파이썬 라이브러리
파이썬으로 캠코 공매물건 조회하기
판다스 멀티 인덱스 컬럼을 정렬하고 레벨 스왑하는 방법
Python Folium 첫 오픈소스 기여 후기
파이썬으로 미분양주택현황 데이터 조회하기
파이썬으로 주민등록인구 데이터 조회하기
KOSIS 공유서비스(OpenAPI)
Merge를 이용해 다른 테이블의 값으로 기존 테이블의 값을 바꾸거나 새로 추가할 수 있다.
깃허브 코파일럿(GitHub Copilot)을 이용해 자동으로 파이썬(Python) 코드를 작성하는 방법에 대해 알아보자.
Python AutoML 라이브러리 중 하나인 Lazypredict를 이용해 여러 ML 모델들을 동시에 학습하고, 예측 성능을 비교해보자.
Python AutoML 라이브러리 중 하나인 Lazypredict를 이용해 여러 ML 모델들을 동시에 학습하고, 예측 성능을 비교해보자.
Sphinx를 이용하면 Python으로 작성한 모듈, 클래스 그리고 함수 등의 소스코드에 대한 정적 페이지(HTML)을 자동으로 만들 수 있다.
AutoViz를 이용하면 데이터 전처리 및 시각화를 자동화할 수 있다.
쿠버네티스 테스트 환경 구축을 위해 가상 머신을 생성하고 접속하는 방법과 가상 머신을 삭제하는 방법을 알아보자. VirtualBox와 Vagrant를 통해 가상 머신을 생성/삭제할 수 있고, SuperPuTTY를 통해 가상 머신에 접속할 수 있다.
Python으로 GCS(Google Cloud Storage)에 접근하는 방법에 대해 알아보자.
파이썬을 이용해 구글 클라우드 스토리지 GCS에 버킷을 만들고 파일을 업로드할 수 있다.
파이썬을 이용해 쿼리 결과를 빅쿼리의 새 테이블에 저장할 수 있다.
파이썬을 이용해 빅쿼리 데이터 세트와 테이블을 생성할 수 있다.
파이썬을 이용해 판다스 데이터프레임을 빅쿼리 테이블에 삽입할 수 있다.
conda를 통해 생성한 Python 가상환경(venv)을 주피터 노트북 커널로 추가하거나 삭제하는 방법을 알아보자.
Python을 이용해 웹 브라우저에서 동작하는 간단한 애플리케이션을 만드는 방법에 대해 알아보자.
Python으로 4가지 네이버 지도를 쉽게 시각화하는 방법
Python으로 7가지 구글 지도를 쉽게 시각화하는 방법
파이썬 티스토리 라이브러리로 블로그 자동화하기
openpyxl을 이용해 엑셀 통합 문서를 읽고, 쓰는 방법과 숫자 형식, 수식을 이용하는 방법을 알아보자. 또, 셀 병합 및 병합 해제 방법, 이미지 삽입 방법 그리고 행, 열 숨기기 방법도 살펴보자.
파이썬으로 엑셀 파일을 핸들링하는 방법
Pandas로 직접 DataFrame을 엑셀 파일로 저장하는 기능을 제공해주기도 하지만, Openpyxl을 이용하면 자유도 높게 DataFrame을 엑셀 파일로 저장할 수 있다.
네이버 API를 사용하기 위한 오픈소스 파이썬 라이브러리
BigQuery TRUNC 함수
Google Street View API
Google Elevation API
Benchmark, Alpha
shape 파일을 csv 파일로 변환하는 방법
Compound Annual Growth Rate, Maximum Draw Down
파이썬으로 네이버 지도 시각화하기
파이썬으로 리버스 지오코딩하기
파이썬으로 지오코딩하기
proxy api를 이용한 스크래핑 차단 우회하기
파워포인트 업무 자동화
환경변수로 Connections, Variables 관리하기
Visualization of actual transaction price per 3.3㎡ of apartment in Seoul
VS Code로 GCE 원격 접속하기
울산광역시 아파트 공급 평당가 시각화
서울특별시 아파트 공급 평당가 시각화
세종특별자치시 아파트 공급 평당가 시각화
전라남도 아파트 공급 평당가 시각화
전라북도 아파트 공급 평당가 시각화
제주특별자치도 아파트 공급 평당가 시각화
인천광역시 아파트 공급 평당가 시각화
경상남도 아파트 공급 평당가 시각화
경기도 아파트 공급 평당가 시각화
경상북도 아파트 공급 평당가 시각화
광주광역시 아파트 공급 평당가 시각화
강원도 아파트 공급 평당가 시각화
대전광역시 아파트 공급 평당가 시각화
대구광역시 아파트 공급 평당가 시각화
충청남도 아파트 공급 평당가 시각화
충청북도 아파트 공급 평당가 시각화
부산광역시 아파트 공급 평당가 시각화
FastAPI 이미지 전달 기능 만들기
깃허브 블로그 GA4로 업그레이드하기
Python Mapboxgl로 지도 시각화하기
Python으로 서울 아파트 가격 지도에 시각화하기
Folium Vworld 데이터 시각화하기
Folium 배경지도 변경하기
Golang 튜토리얼 - 01 Go 시작하기
Python으로 좌표계 변환
카카오 API를 사용하기 위한 오픈소스 파이썬 라이브러리
CaptchaCracker 보안문자 인식 모델 만들기
빅쿼리 데이터를 파이썬 데이터프레임으로 불러오기
Python으로 슬랙봇 만들기
파이썬 뉴스레터 서비스
만료기한 없는 Access Token 발급받기
Python MySQL 테이블 ORM model.py 자동 작성
Python 상위 경로 제외 파일 압축
COVID19 변이 오미크론(Omicron) 발생 현황 지도
요소수 중점 유통 주유소 재고현황 지도
세계 각국의 공공 데이터 맵 오픈 데이터 인셉션
GDP나우(GDPNow)
Gradio - Python으로 머신러닝 모델 웹 앱 배포하기
기본 logging 모듈 이용하기
PyCon Korea 2021
국토교통부 건축물대장정보 데이터 조회하기
소상공인진흥공단 상가업소 데이터 조회하기
국토교통부 부동산 실거래 데이터 조회하기
CSV파일을 MySQL에 적재하는 세 가지 방법 비교
Running Airflow in Docker
Yuval Noah Harari: Lessons from a year of Covid
카카오 로컬 API
WGS84 좌표 기반 데이터 집계 및 시각화
네이버 데이터랩 오픈 API 서비스
PyTorch 튜토리얼 - 04 분류기 학습(Training a classifier)
PyTorch 튜토리얼 - 03 신경망(Neural Networks)
PyTorch 튜토리얼 - 02 자동미분(autograd)
PyTorch 튜토리얼 - 01 텐서(Tensors)
Dockerfile로 주피터 서버 구축하기
도커(Docker)로 MySQL 서버 구축하기
도커(Docker)로 MongoDB 서버 구축하기
PyMongo Aggregation Examples
PyMongo Tutorial
Yuval Noah Harari: the world after coronavirus
플로틀리(Plotly) - Line Plot 그리기”
플로틀리(Plotly) - Scatter Plot 그리기 02
플로틀리(Plotly) - Scatter Plot 그리기 01
Iris Data Classification
Multinomial Classification
Logistic Regression
Multiple Linear Regression
How to minimize cost in Linear Regression Model
Simple Linear Regression in TensorFlow 2.0
macOS에 딥러닝을 위한 도커 환경 구축하기
강화학습(Reinforcement Learning) 참고 사이트 모음
머신러닝을 위한 선형대수학 참고 사이트 모음
전처리가 쉬워지는 판다스 파이프라인
전처리가 쉬워지는 판다스 파이프라인
AWS EC2 Ubuntu에 주피터 서버 구축하기
Virtual Box에 Hortonworks Sandbox 설치하기
빅데이터 처리 기술 관련 사이트 모음
파이썬 표준 라이브러리 소개
데이터 과학을 위한 파이썬 라이브러리 모음
nohup과 &로 파이썬 플라스크 웹 서버를 백그라운드로 실행하기
folium을 이용한 서울시 스타벅스 이디야 입지 시각화
인터렉티브 데이터 시각화 툴 플로틀리(Plotly)
제2장 : 통계 분석
제2장 : 통계 분석
제1장 : R 기초와 데이터 마트
제1장 : R 기초와 데이터 마트
카페에서 아이패드로 주피터 노트북 사용하기
아이패드로 주피터 노트북 사용하기
베스트셀러 데이터 크롤링하기
책 한 권에 대한 데이터 수집하기
파이썬으로 데이터 자동으로 수집하기
퀀들(Quandl) API를 이용한 금융 데이터 수집 튜토리얼
Step 3 : 랜덤포레스트(Random Forest)로 예측하기
Step 2 : 의사결정나무(Decision Trees)로 예측하기
Step 1 : 파이썬(Python)으로 시작하기
Step 0 : 캐글(Kaggle) 관련 배경지식
마크다운(Markdown)을 이용해 직관적인 웹 문서 작성하기