데이터 스크래핑 초보자를 위한 필독서 : ScrapeStorm을 사용하여 KCI 한국학술지인용색인 데이터 스크래핑하기
안녕하세요, 졸업 시즌이 맞이해서 오늘은 여러분과 함께 ScrapeStorm을 사용하여 KCI 한국 학술지 인용 색인을 스크래핑하는 방법을 공유하려고 합니다. 이 글이 여러분의 학술 연구와 학습에 도움이 되길 바랍니다! KCI 한국 학술지 인용 색인 소개: KCI 한국 학술지 인용 색인은 한국에서 출판된 다양한 학술지 논문을 포함하는 데이터베이스입니다. 인문학에서 공학에 이르기까지 매우 다양한 학문 분야를 포함하고 있습니다. ScrapeStorm 소개: ScrapeStorm은 사용자 친화적인 웹 페이지 데이터 스크래핑 프로그램로, 프로그래밍 지식이 없어도 쉽게 웹 페이지 데이터를 스크래핑할 수 있습니다. AI 기반으로 작동하여 웹 페이지 구조가 변경되더라도 자동으로 적응하고 정확하게 데이터를 스크래핑할 수 있습니다. 자세한 설명: 1.ScrapeStorm 설치 및 실행 먼저 ScrapeStorm의 공식 웹사이트에서 프로그램을 다운로드하여 설치합니다. 설치가 완료되면 프로그램을 실행합니다. 공식 홈페이지 링크: https://kr.scrapestorm.com/ 그다음으로, 작동 팁 입력란에 스크래핑할 검색 결과 웹사이트 주소를 입력합니다(주의 : KCI 공식 웹사이트 주소가 아닙니다!). 그리고 오른쪽에 있는 "스마트 모드" 를 클릭합니다. 이번 글에서는 비즈니스 관련 내용을 검색하겠습니다. 예시 링크: https://www.kci.go.kr/kciportal/po/search/poArtiSearList.kci 여기서 우리는 웹사이트가 다소 특별하여 검색 결과 페이지를 직접 열 수 없음을 알 수 있습니다. 하지만 걱정하지 마세요! ScrapeStorm은 사전 실행 기능을 제공하며, 우리는 오른쪽 상단의 녹색 버튼을 클릭하여 이 기능을 설정할 수 있습니다. 2.사전 실행 설정 사전 실행 기능은 스크래핑 과정 중에 페이지 내에서 클릭, 텍스트 입력, 페이지 스크롤 등의 작업을 수행하는 기능입니다. 이는 ScrapeStorm의 강력한 기...