본문 바로가기

크롤링5

[python] 실시간 주식 종목, 현재가, 차트 카카오톡 메세지로 나에게 보내기 이번 게시글에서는 내가 보고자 하는 종목을 "네이버 금융"페이지로부터 종목이름, 현재가, 차트를 불러와 카카오톡 메세지로 나에게 일정 시간마다 전송해주는 코드를 짜보려고 한다. Kakao Developers 카카오 API를 활용하여 다양한 어플리케이션을 개발해보세요. 카카오 로그인, 메시지 보내기, 친구 API, 인공지능 API 등을 제공합니다. developers.kakao.com 우선 해당 기능을 구현하기 위해서는 카카오 개발자 페이지의 가입이 필수적이다. 가입 후 상단의 "내 애플리케이션"에 들어가 첫 애플리케이션을 만들어준다. 나는 "가격 알리미"라고 이름을 지정해주었고, 차트모양의 이미지를 아이콘으로 설정해주었다. 애플리케이션이 생성되면 들어간 후 "카카오 로그인" -> "동의 항목"의 접근권한.. 2021. 6. 19.
[python] 3/3__Selenium을 이용한 구글 검색 이미지 크롤링 하기 이전 글에 이어 마지막으로 구글 검색 결과의 썸네일 이미지가 아닌, 클릭했을때 나타나는 원본 이미지 파일을 저장해보고자 한다. 이전 게시글 1번 : yobbicorgi.tistory.com/29 [python] 1/3__Selenium을 이용한 구글 검색 이미지 크롤링 하기 Python Selenium을 이용하여 구글(Google)에서 이미지를 검색한 후, 검색 목록에 나오는 썸네일 이미지들을 모아 다운로드 해보고자 한다. 해당 게시글은 3개의 시리즈로 게시될 예정이며, 시리즈 별 yobbicorgi.tistory.com 이전 게시글 2번 : yobbicorgi.tistory.com/30 앞선 두번째 게시글과 전체적인 과정은 모두 같다. 하지만 중간에 각 이미지들을 한번 클릭하고, 원본이미지 링크들을 수.. 2021. 5. 11.
[python] 2/3__Selenium을 이용한 구글 검색 이미지 크롤링 하기 이전 글에 이어 이번에는 Pool을 이용하여 multiprocessing를 이용하고, 여러개의 크롬 창에서 이미지들을 동시다발적으로 검색하는 방법에 대해 고안해보았다. 이전 글 : yobbicorgi.tistory.com/29 [python] 1/3__Selenium을 이용한 구글 검색 이미지 크롤링 하기 Python Selenium을 이용하여 구글(Google)에서 이미지를 검색한 후, 검색 목록에 나오는 썸네일 이미지들을 모아 다운로드 해보고자 한다. 해당 게시글은 3개의 시리즈로 게시될 예정이며, 시리즈 별 yobbicorgi.tistory.com 이전에는 Spyder상에서 직접 실행시킨 것과는 다르게 Anaconda Prompt상에서 실행하도록 할 것이다. 또한, 텍스트 파일에 검색하고자 하는 키.. 2021. 5. 8.
[python] 1/3__Selenium을 이용한 구글 검색 이미지 크롤링 하기 Python Selenium을 이용하여 구글(Google)에서 이미지를 검색한 후, 검색 목록에 나오는 썸네일 이미지들을 모아 다운로드 해보고자 한다. 해당 게시글은 3개의 시리즈로 게시될 예정이며, 시리즈 별 발전 과정은 다음과 같다. 1. Spyder상에서 하나의 키워드를 검색하고, 비교적 저화질인 썸네일 이미지를 빠르게 다운로드 하는 법 2. Anaconda상에서 Pool를 이용하여 여러개 키워드를 동시 다발적으로 검색하고, 썸네일 이미지를 다운로드 하는 법 3. Anaconda상에서 여러개 키워드를 동시다발적으로 검색하고, 원본 고화질 이미지를 다운로드 하는 법 이 중 본 게시글에서는 하나의 키워드만을 사용해볼 것이다. 이미지 검색은 아래 Google 이미지 검색 페이지에서 수행하도록 한다. ww.. 2021. 5. 6.
[python] Selenium을 이용한 티스토리 로그인 & 게시글 자동 작성 이번에는 Selenium과 크롬 웹드라이버('chromedriver')를 이용해 자동으로 티스토리에 로그인을 하고, 간단한 게시글을 작성하는 코드를 짜보고자 한다. 우선 자신이 사용하고 있는 크롬 버전과 맞는 chromedriver를 다운받아야 한다. 다음 페이지 에서 chromedriver 다운로드가 가능하며, 사용하고 있는 크롬 버전은 "설정 -> chrome 정보"에서 확인 가능하다. ※ Chromedriver 다운로드 chromedriver.chromium.org/downloads ChromeDriver - WebDriver for Chrome - Downloads Current Releases If you are using Chrome version 91, please download Chrom.. 2021. 5. 1.