Try to 개발자 EthanJ의 성장 로그

Python OOP Inheritance and Overriding 파이썬 객체 지향 프로그래밍 상속과 오버라이딩 1. 상속 : 부모 class의 정보를 활용해 자식 class를 생성하는 것 문법 class [class 이름](부모 class): ... 상속 시 부모 class의 item(variable, method)을 자식 class에 물려준다. 상속은 자식 class 선언 시 부모 class명을 지목해서 실행된다 자식 class는 새로운 변수, method를 선언 해 사용할 수 있다. class Person: name = "" age = 0 height = 0 def get_info(self): print("이름 : %s, 나이 : %s살, 키 : %scm" %(self.name, self.age,..

Python OOP with Structures and Classes 파이썬 객체 지향 프로그래밍 with 구조체와 클래스 1. 구조체 클래스(class): C언어의 구조체에서 확장된 개념 > 클래스 이전에 구조체 학습 구조체: 배열과 달리 인덱스가 아닌 "변수명"으로 object를 사용 1.1. 추상화 (abstaction) : 일부 관점(기준)으로 바라본 요소를 추출해서 표현하는 것 예를 들어, 사람을 프로그래밍적 관점에서 표현하면, 인간의 모든 구성 중에서 숫자로 표현 가능한 것, bool type으로 표현할 수 있는 것 등으로 추려서 표현하는 것 추상화(abstraction)를 통해 programming 개발에 사용 가능! 추상화 예시 고양이의 요소(item): 털 색, 무게, 품종, 나이, 선호..

Python crawling with browserless 파이썬 browserless 크롤링 requests library requests는 브라우저 없이 Python에서 다이렉트로 server에 http 요청 전송 request를 받은 webpage server는 해당 page의 source code를 Python 내부로 전송 단, 버튼 클릭이나 광고 닫기 등의 web page내에서의 작업은 물리 browser가 없기 때문에 불가능 오로지 특정 url로 접속했을 떄 최초에 response되는 webpage code만 가져오기 가능 대신 물리 브라우저를 직접 켜지 않고, 코드 내에서 request만 수행 > 속도, resource면에서 우월함 웹페이지와 네트워크 user가 브라우저로 특정 서버 주소를 ..

Python crawler with traversal in Nested loop 이중 반복문을 활용한 파이썬 순회 크롤러 # crwaling library import from bs4 import BeautifulSoup from selenium import webdriver import requests # 코드 진행 지연을 위한 time 임포트 import time # 2022-07 이후 selenium 업데이트로 인한 XPATH 추적 시 사용하는 임포트 from selenium.webdriver.common.by import By # file io import codecs 1. bs4.element 내부 item 접근 my_driver = webdriver.Chrome() # 알라딘 베스트셀러 사이트..

Python crawler with traversal 파이썬 순회 크롤러 같은 양식의 페이지를 순회하면서 자료를 수집해오는 크롤러 원 페이지 크롤러 제작 후 > 완성된 크롤러를 반복문에 넣어서 만든다 반복을 어디부터 돌릴지에 대한 파악이 제일 중요! # crwaling library import from bs4 import BeautifulSoup from selenium import webdriver import requests # 코드 진행 지연을 위한 time 임포트 import time # 2022-07 이후 selenium 업데이트로 인한 XPATH 추적 시 사용하는 임포트 from selenium.webdriver.common.by import By # file io import codecs ..

Python File IO with codecs and Encoding codecs 라이브러리를 활용한 파이썬 파일 입출력 and Encoding 1. codecs 라이브러리 Python ver.3.5. > 내장 라이브러리로 바뀜 (예전에는pip install codecs 명령어 수행해야 했음) 파이썬으로 (텍스트)파일을 제어할 수 있도록 (읽어오기, 쓰기) 도와줌 console에 출력된 내용을 txt로 옮겨서 출력, 읽어올 때 사용 특이사항 개행은 "\r\n"으로 처리 현재는 "\n"으로 개행 처리 가능 mode w: 기존에 있던 자료 없에고 새 파일 입력 a: 기존에 있던 자료에 이어서 계속 입력 r: 기존 파일에 있던 내용 읽어오기 # import codecs library import codecs..

Python Crawling 파이썬 크롤링 with selenium, BeautifulSoup 크롤링(Crawling) 웹에서 원하는 자료를 컴퓨터에게 수집해오도록 하는 기술 requests library를 활용한 브라우저 없는 crawling urlib library를 활용한 브라우저 없는 crawling crawler의 역할은 원하는 정보를 포함한 자료를 수집해 오는 것까지이며 실제로 원하는 데이터를 용도에 맞게 처리하는 것은 BeautifulSoup가 담당한다 selenium 설치 anaconda navigator 좌측 environments 선택 중간에 base(root) 우측 재생버튼 클릭 > open terminal 선택 열리는 cmd창에서 "pip install selenium" 입력 # 크..

파이썬 제어문 Python Control statement 3) for 반복문 (for loop) data(list, tuple, string, dict, ...)의 모든 item에 대하여, 처음부터 마지막까지 차례대로 접근 > 실행문 적용 ▶ 기본 문법 for 임시변수 in data : 수행할 문장1 수행할 문장2 ... ▶ 임시변수 for 반복문이 실행 > data의 item이 차례대로 임시변수에 할당 (임시변수 = item) 기본적으로 변수는 할당문이 필수 존재, but 임시변수는 할당문이 필요 없는 객체 # 하나의 아이템에 접근 : list 자료형 a = [1, 2, 3] for i in a: print("Hello world") Hello world Hello world Hello world #..