[Python] 파이썬 문자열(string) 포함여부(contains) 확인하는 방법, 문자열 부분 검색 : 리스트, 딕셔너리 자료형에서 문자열 포함여부 확인
파이썬에서 문자열 포함여부를 체크하는 방법에 대해 알아봅니다. 리스트와 딕셔너리 자료형 타입에서도 문자열 포함여부에 대해 알아봅니다. ■첫번째 방법 : find() find()함수는 찾고자하는 문자열이 존재하는 경우, ...
[Python] 파이썬 셀레늄(selenium)을 사용하여 네이버, 다음, 구글, 인스타그램, 페이스북 자동 로그인 및 검색 기능 만드는 방법 : 크롬 브라우저 조작(매크로)
셀레늄을 사용하여 자동으로 웹사이트 열고 특정 키워드를 검색하는 방법에 대해 알아봅니다. 셀레늄을 사용하는 가장 큰 이유는 request를 사용할 경우 페이지가 로드 되기도 전에 종료될 수...
[Python] 파이썬 selenium WebDriverException오류 해결 : selenium.common.exceptions.WebDriverException: Message: ‘chromedriver’ executable needs to be in PATH
selenium 테스트 코드를 실행해보았습니다. 여기저기서 셀레니움, 셀레늄 하길래…궁금했거든요. 그러나 오류를 직면했네요. [파이썬 스크립트] from selenium import webdriver from selenium.webdriver.common.by import By driver = webdriver.Chrome()...
[Python] 파이썬 리스트(list) 값 삭제하는 방법 총정리: remove(), del(), clear(), pop()
파이썬에서 리스트(list) 자료형의 값을 삭제하는 방법에 대해 알아봅니다. 총 4개의 함수를 사용하여 삭제가 가능합니다. 다. 단순 반복 삭제를 하지않는 다면 remove()함수를 사용하면 편리하며, 값의 범위를...
[Python] 파이썬 판다스(pandas)를 사용하여 엑셀(xlsx, csv)파일로 저장하는 방법 : numpy, openpyxl, to_excel(), to_csv()
판다스(pandas)는 데이터 분석을 위해 많이 사용되는 모듈입니다. xlsx, csv파일을 읽어와서 DataFrame으로 가져올 수 있습니다. 또다른 방법은 웹 크롤링을 하여 가져올 수 있습니다. 판다스(pandas)를 사용하여 엑셀파일(xlsx,...
[Python] 파이썬 오류처리 RuntimeError: The current Numpy installation…fails to pass a sanity check due to a bug in the windows runtime.
웹크롤링을 통하여 얻은 데이터를 엑셀파일로 저장하기위해 판다스(pandas) 모듈을 설치 후 엑셀로 출력하는 코드를 실행하였습니다. 그런데 기대했던 것과 달리 오류가 발생했어요. pandas 모듈을 import 후 사용하기...
[Python] 파이썬 웹 크롤링 BeautifulSoup모듈을 사용하여 뉴스 긁어오기: HTML파싱(뉴스 제목, 날짜, 링크,이미지URL)
뉴스타파 사이트의 “세금도둑추적2020” 뉴스 크롤링을 시도해봅니다. 뉴스부분의 HTML을 파싱하기위해서 크롬 브라우저를 열고 newstapa.org 사이트를 열어요. 그리고 난 후 F12키를 눌러 개발자 도구를 사용합니다. 왼쪽에 커서버튼을...
[Python] 파이썬 BeautifulSoup 설치 오류시 해결 방법 : os.system(), pip install beautifulsoup4
import 문에 빨간줄이 표시가되어 마우스를 올렸다. BeautifulSoup 모듈을 사용하기위해서는 패키지를 설치해야한다. 클릭하여 자동설치를 시작하였으나 바로 오류가 터졌다. Collecting BeautifulSoup Downloading BeautifulSoup-3.2.2.tar.gz (32 kB) DEPRECATION: The...
[Python:자료구조] 파이썬 큐(Queue) , 우선순위 큐(PriorityQueue) 사용방법 및 예제 총정리
큐(queue)는 선입선출 FIFO(First In First Out) 기반의 자료 구조로 매우 유명합니다. 파이썬에서는 queue모듈에서 큐(Queue), 스택(LifoQueue), 우선순위큐(PriorityQueue), SimpleQueue를 제공하고 있습니다. 파이썬에서 큐(queue)는 주로 멀티 쓰레딩(threading) 환경에서 사용된다고 알려져...
[Python] 파이썬 멀티프로세싱(multiprocessing) 구현 예제 : 멀티 쓰레드(multi-Thread)와 실행시간 차이 분석
파이썬에서 다중 CPU에서 병렬 실행을 위해서는 다중 프로세스를 이용하는 multiprocessing 모듈을 사용해야 합니다. 멀티 쓰레드를 구현하여 실행한 결과 프로세스 처리시간은 동일하였습니다. 그 이유는 파이썬 GIL 정책때문입니다....
