실전프로젝트까지 끝내고 spark 강의를 이어나가고 있는 중이다.
실습 강의 자료를 다운로드 받아서 직접 내 vscode로 옮겨서 코드를 해석하고 이해하는 시간이었다.
튜터님의 코드이기 때문에 자주 사용하지 않는 함수들도 많이 나와서 공부가 많이되는 것 같다.
-
glob 함수
: 해당 파일 내에 있는 특정 형식의 파일 이름을 추출 -
tqdm
: 리스트를 포함해서 모든 이터러블을 감싸주고 시간이 지남을 알려주는 진행도를 표시해준다. -
sample
: 데이터프레임이나 시리즈에서 샘플을 추출할 수 있다. frac 옵션으로 추출할 비율을 설정 가능(Ex. frac = 0.1 (10%)
Data analyst를 향해 도전하는 이야기