분류 전체보기 (4) 썸네일형 리스트형 구글 이미지 정보 크롤링 하기 목표 내가 원하는 이미지를 웹사이트 검색을 통해 수집합니다. 사용 도구 : Selenium Selenium 사용 준비 Python crawling package인 Selenium을 사용하기 위해서는 두가지가 필요합니다. Selenium에서 사용할 browser에 대한 드라이버 저는 Selenium 내에서 크롬을 사용할 것이기 때문에 chrome driver를 다운받습니다 그리고 나서 Selenium package가있는 python 경로로 옮겨줍니다. Geckodriver를 다운받습니다. 원하는 이미지 URL selector 획득정보를 가져오기 위해서 저는 크롬 개발자도구에서 element select하는 방법을 활용했습니다. (참고링크) 검색하고 나오는 이미지들에 대한 css selector검색 후 나오.. Python Multiprocessing에 대한 고찰 ## Multiprocessing? 여러개의 CPU(Processor)가 작업 효율을 위해 여러 프로세스를 동시에 처리하는 것 여러개의 작업을 동시에 처리 하는 방법 중 Python에서 사용할 수 있는 가장 쉬운 방법이 Multiprocessing이다. (python에서 Multithread를 구현 하더라도 GIL로 인해 하나의 Thread로 실행한것과 크게 차이가 없다) ## core 개수 확인 Linux : grep -c processor /proc/cpuinfo MAC : sysctl -n hw.ncpu Windows Ctrl +Shift + Esc를 눌러 작업 관리자를 니다. 성능 탭을 선택하여 PC에 있는 코어 및 논리 프로세서 수를 볼 수 있습니다. ## 속도 비교 import multipro.. 20181204 홍콩 마카오 여행 3박 4일 2일차(홍콩섬 주변) # 여행 정보여행지 : 홍콩, 마카오기간 : 20181203~20181206 # 2일차 여행 루트1. 오션파크(S2)Waterfront Gifts - (C5)The Grand Aquarium - (C8)Ocean Express타고 ThrillMountain 이동 - (R4)Tuxedos Restaurant - (D1)Arctic Blast - (D2)South Pole Spectacular - (F2)Whirly Bird - (K8)BoardWalk Cafe - (H8)Pacific Pier - (H4)Shark Mistique - (H1)Cable Car - (B5)Panda Village 2. 센트럴PMQ - 이름 모를 밥집 # 오션파크숙소 베니토 주변에 있는 스타벅스에서 간단하게 조식을 먹고 침사추.. 20181204 홍콩 마카오 여행 3박 4일 1일차(침사추이) # 홍콩 여행 1일차 루트대구공항 - 홍콩공항 - 베니토(체크인) - 성림거 국수 - 하버시티 - 1881헤리티지 - 캔톤로드 - aqua - 야경 - 야시장 # 홍콩공항홍콩 공항 들어오자마자 공항 스케일이 달라서 놀랬다. 사실 다른나라가면 항상 드는 생각인거같다구룡역에 있는 무료 호텔 셔틀버스를 타기 위해서 AEL티켓을 끊었다 # 성림거 국수AEL을 타고 구룡역 까지 이동 후에 무료셔틀버스를 타고 이동했다.베니토 호텔을 잡았는데 가까이에 있는 역이름을 검색을 통해 알아냈다. K3에서 탔던걸로 기억한다.체크인을 하고 짐을 내려놓은 후 배가 고파 침사추이 시내에 있는 성림거 국수를 먹으러 갔다. 주문을 하려면 이런 주문지에 이것저것 체크를 해야하는데어렵다고 소문이 난 것 치고는 영어로 설명이 다 되어있어 .. 이전 1 다음
