robots.txt 확인 웹사이트에서 데이터를 스크래핑할 때 robots.txt를 확인해야 하는 이유에 대해서 정리합니다. 2022-02-02 Programming > web #data #스크래핑 #scraping #robots #웹스크래핑 #webscraping
Poetry로 패키지 관리 Python에서 Poetry로 패키지를 관리하는 방법을 정리합니다. 2022-02-02 Programming > package #python #package #poetry #패키지 #pypi
KBO-data 패키지 이 글은 한국프로야구(Korea Baseball Organization) 웹사이트에서 데이터를 스크래핑하는 패키지 만드는 과정을 정리합니다. 2022-01-23 Programming > package #KBO #data #python #package #패키지 #pypi #한국프로야구 #야구데이터
Hive 아키텍쳐 하둡 에코시스템 중 하나인 Hive의 아키텍처에 대해서 공부한 내용을 정리합니다. 2021-12-30 BigData > hadoop #Hive #빅데이터 #hadoop #ecosystem #SQL #Tez #mapreduce
YARN 아키텍쳐 하둡의 코어 서비스 중 하나인 YARN의 아키텍처에 대해서 공부한 내용을 정리합니다. 2021-12-23 BigData > hadoop #빅데이터 #hadoop #ecosystem #datastorage #Yarn #resource