이런 유형의 사이트에서도 웹크롤링이 가능할까요?

VBA
작성자
스일이
작성일
2021-10-26 23:07
조회
83
엑셀버전 : 엑셀2019

운영체제 : 윈도우10

KEPCO

https://cyber.kepco.co.kr/ckepco/mobile/cy_mypage/use_state_list_esb1.jsp

가입을 해야 검색이 되네요 죄송합니다..

아무튼 웹사이트가 jsp로 끝나서 어렵네요

예제들은 항상 네이버 검색이라 검색을 하면 URL이 달라져서 따라할 수 있는데

이 사이트는 고객번호(10자리)를 입력해도 URL이 변하지 않아서 어렵습니다.

 

 

제가 하고싶은 내용은

 

엑셀

 

 

고객번호가 주르륵(1만개 이상)있으며 그에 해당하는 값을 위에 사이트에 입력,

 

그리고 그 사이트 다음페이지에 나오는 다른정보가 떴으면 좋겠는데 가능할지 의문입니다.

 

 

참고로 정확한 고객정보를 입력 후 다음페이지로 넘어가게되면

 

KEPCO

https://cyber.kepco.co.kr/ckepco/mobile/cy_mypage/use_state_view_esb1.jsp

이러한 주소로 넘어가게됩니다.

 

 

jsp?이러한 형태의 사이트에서도 웹크롤링이 가능한지 간단한 설명 부탁드립니다.

전체 2

  • 2021-10-27 04:17

    로그인이 필요한 페이지를 엑셀로 크롤링하려면 셀레니움으로 가능합니다.

    다른 언어로 코딩하면 beautifulsoup 같이 라이브러리를 써서 할 수도 있습니다. 엑셀은 제가 알기로 1회성 요청만 보낼 수 있는 것으로 알고 있고, 만약 로그인 페이지가 post 형태로 id와 pw를 보낸 뒤 리턴된 url을 받을 수 있다면 post (아이디, 비번)-> get 형태로도 받아올 수 있습니다

    정리하자면 크롤링 시 뒤에 .jsp, .html 형태는 중요하지 않습니다


    • 2021-10-27 08:49

      @더블유에이 님 감사합니다.. 가능성이라도 보여서 행복하네요 열공하겠습니다.


전체 4,698
번호 카테고리 제목 작성자 작성일 추천 조회
공지사항 공지사항
⭐ [더 나은 커뮤니티 문화를 위한 Q&A 글 작성 규칙] ⭐ (12)
오빠두엑셀 | 2021.10.28 | 추천 16 | 조회 795
트로피 오빠두엑셀 2021.10.28 16 795
24321 VBA
New 열 나누기
정미현 | 18:25 | 추천 0 | 조회 4
정미현 18:25 0 4
24317 피벗테이블
New 상품별로 기간 판매량을 구하고 싶습니다 첨부파일 (4) 답변완료
wlfl**** | 15:01 | 추천 0 | 조회 24
wlfl**** 15:01 0 24
24315 함수/공식
New 선택한 2개 열/행의 값의 곱을 구하고 싶습니다. (2)
(알수없음) | 03:54 | 추천 0 | 조회 22
(알수없음) 03:54 0 22
24310 VBA
New 제발 도와주세요 ㅠㅠ 첨부파일 (1)
떠희아빠 | 2021.12.04 | 추천 0 | 조회 45
떠희아빠 2021.12.04 0 45
24307 함수/공식
New 엑셀 초보인데 count 함수 관련 질문 있습니다. 첨부파일 (4)
야기분좋다 | 2021.12.04 | 추천 1 | 조회 25
야기분좋다 2021.12.04 1 25
24305 VBA
New 이문제는 시트를 변수로 지정을 해아하나요?? 첨부파일
어려워 | 2021.12.04 | 추천 0 | 조회 24
어려워 2021.12.04 0 24
24300 VBA
New 떨어져 있는 특정 셀 선택 매크로 (1) 답변완료
제비제비 | 2021.12.04 | 추천 0 | 조회 35
제비제비 2021.12.04 0 35
24293 기능/도구
New 특정행으로 이동하는 문의를 드립니다. 첨부파일 (2)
열공합시다 | 2021.12.04 | 추천 0 | 조회 30
열공합시다 2021.12.04 0 30
24291 VBA
New for 문과 for each문을 보다가 궁금한게있습니다. (1)
이치영 | 2021.12.04 | 추천 0 | 조회 29
이치영 2021.12.04 0 29
24289 함수/공식
New 함수좀 알려주세요. 첨부파일 (5) 답변완료
naver_5f055a605ee7d | 2021.12.04 | 추천 0 | 조회 43
naver_5f055a605ee7d 2021.12.04 0 43
24285 VBA
New 파일선택하면 파일명을 클립보드에 넣을수 있을까요? (1)
ㅈㄱㄹ | 2021.12.04 | 추천 0 | 조회 26
ㅈㄱㄹ 2021.12.04 0 26
24279 함수/공식
New xfilter 사용조건 중 모두를 검색하는 수식 첨부파일 (4) 답변완료
다우미노 | 2021.12.03 | 추천 0 | 조회 34
다우미노 2021.12.03 0 34
24277 VBA
New 엑셀 화일명 변경 관련 첨부파일 (2)
워싱턴 | 2021.12.03 | 추천 0 | 조회 42
워싱턴 2021.12.03 0 42
24276 함수/공식
New 해당값을 끌고오는 양식? 첨부파일 (1) 답변완료
뚜루루 | 2021.12.03 | 추천 1 | 조회 44
뚜루루 2021.12.03 1 44
24275 VBA
New 병렬로 나열된 자료 일렬로 정렬하는 방법 문의 드립니다. 첨부파일 (2) 답변완료
007 | 2021.12.03 | 추천 0 | 조회 53
007 2021.12.03 0 53
24271 VBA
New Sheet 이동시 속성이름을 유지하고 싶어요 첨부파일 (5)
Lucas's | 2021.12.03 | 추천 0 | 조회 31
Lucas's 2021.12.03 0 31
24270 기능/도구
New 여러가지 수식으로 된 엑셀시트에서 목표값에 맞추기 위한 해 찾기 문의드립니다. 첨부파일 (1)
함수시르미 | 2021.12.03 | 추천 1 | 조회 34
함수시르미 2021.12.03 1 34
24262 VBA
New 불규칙 데이터의 자동채우기 해결방법 (1)
파퍼 | 2021.12.03 | 추천 0 | 조회 47
파퍼 2021.12.03 0 47
24259 함수/공식
New 계획시트에서 일일실적시트로 일별 데이터 취합방법 문의드립니다. 첨부파일 (3)
skyzza**** | 2021.12.03 | 추천 0 | 조회 42
skyzza**** 2021.12.03 0 42
24253 함수/공식
New 파일과 관련된 숫자를 다른 파일에 있는 숫자로 변경할 수 있는 방법 첨부파일 (2)
안녕 | 2021.12.02 | 추천 0 | 조회 32
안녕 2021.12.02 0 32
24252 함수/공식
New 표 범위 내에서 맨 좌측값 가져오기 질문드립니다. (3) 답변완료
김성환 | 2021.12.02 | 추천 0 | 조회 37
김성환 2021.12.02 0 37
24251 기능/도구
New 엑셀 주식 가격 예측 양식 사용 질문입니다. 첨부파일 (1)
thause | 2021.12.02 | 추천 0 | 조회 29
thause 2021.12.02 0 29
24249 VBA
모든 하위 폴더 내의 최신 파일 하나만을 특정 폴더로 복사하려 합니다 (1)
너의나라 | 2021.12.02 | 추천 0 | 조회 34
너의나라 2021.12.02 0 34
24248 차트/그래프
그래프에서 가로 축 Data 설정하는 법 첨부파일
Etter | 2021.12.02 | 추천 0 | 조회 36
Etter 2021.12.02 0 36
24245 VBA
아웃룩 이메일 내용에 VBA 변수 넣기 (1) 답변완료
argus | 2021.12.02 | 추천 0 | 조회 38
argus 2021.12.02 0 38
24239 VBA
[초보] 웹 크롤링 관련 질문입니다. 첨부파일 (2) 답변완료
스캐쳐 | 2021.12.02 | 추천 0 | 조회 39
스캐쳐 2021.12.02 0 39
24238 VBA
어떤 한 배열에서 다른 배열에 있는 값만 제외하고 새로운 배열3을 만들 수 있을까요? (2)
Paul | 2021.12.02 | 추천 0 | 조회 35
Paul 2021.12.02 0 35
24233 함수/공식
0이상의 값(유효값)이 있는 칼럼과 그 값을 불러오고 싶습니다. 첨부파일 (2) 답변완료
크놉스 | 2021.12.02 | 추천 0 | 조회 32
크놉스 2021.12.02 0 32
24232 차트/그래프
엑셀 차트에서 특정 값이 너무 높을때 차트화 하는 법 (2) 답변완료
담담 | 2021.12.02 | 추천 0 | 조회 41
담담 2021.12.02 0 41
24230 VBA
vba 코딩을 부탁드립니다. 첨부파일 (6)
Trimman | 2021.12.02 | 추천 -2 | 조회 64
Trimman 2021.12.02 -2 64