액셀에서 웹 크롤링을 수행할 때 파워 쿼리를 활용하는 것은 매우 유용합니다.
아래는 웹 크롤링에 유용한 10가지 파워 쿼리 함수입니다

- 데이터 가져오기 (From Web): 웹 페이지에서 데이터를 가져오는 기본 함수입니다. URL을 지정하고 원하는 데이터를 선택하여 가져올 수 있습니다1.
- 매개 변수 사용하기: 여러 웹 페이지에서 데이터를 수집해야 할 때, 매개 변수를 활용하여 자동화할 수 있습니다. 각 웹 페이지의 URL을 매개 변수로 설정하고, 함수를 호출하여 데이터를 가져옵니다1.
- 데이터 필터링 (Filter Rows): 가져온 데이터 중에서 원하는 행만 선택하여 추출할 수 있습니다. 예를 들어 특정 조건을 만족하는 행만 가져오는 경우에 유용합니다1.
- 열 선택 (Choose Columns): 웹 페이지에서 가져온 데이터 중에서 필요한 열만 선택하여 결과를 정리할 수 있습니다1.
- 데이터 변환 (Transform Data): 가져온 데이터를 정리하고 변환하는 작업을 수행할 수 있습니다. 예를 들어 날짜 형식 변경, 텍스트 추출, 계산 등을 할 수 있습니다1.
- 테이블 병합 (Merge Queries): 여러 웹 페이지에서 가져온 데이터를 하나의 테이블로 합치는 기능입니다. 공통 열을 기준으로 테이블을 병합할 수 있습니다1.
- 데이터 정렬 (Sort Rows): 가져온 데이터를 원하는 순서로 정렬할 수 있습니다. 오름차순이나 내림차순으로 정렬할 수 있습니다1.
- 데이터 그룹화 (Group By): 특정 열을 기준으로 데이터를 그룹화하고 집계할 수 있습니다. 예를 들어 날짜별로 합계를 구하는 경우에 유용합니다1.
- 데이터 피벗 (Pivot Columns): 행과 열을 바꾸어 데이터를 재구성할 수 있습니다. 특정 열을 행으로 변환하거나, 열을 행으로 변환할 수 있습니다1.
- 데이터 결합 (Append Queries): 여러 웹 페이지에서 가져온 데이터를 하나의 테이블로 합치는 기능입니다. 행을 추가하여 데이터를 결합할 수 있습니다1.
이 함수들을 활용하여 웹 크롤링 작업을 효율적으로 수행하시기 바랍니다! 😊
반응형
'etc' 카테고리의 다른 글
보배링크 이용하기 고고!! (0) | 2024.06.01 |
---|---|
옥토파스 크롤링의 장점 5가지 (0) | 2024.02.28 |
블로그 지수를 높이는 5가지 방법 (0) | 2024.02.25 |
정체시 차 안에서 급똥시 취할 수 있는 대응 5가지. (0) | 2024.02.24 |
한국인이 가장 많이 소비하는 횟감 5가지 (0) | 2024.02.24 |