Python 검색 결과

해당 글 32건

WEB 데이터 형식

WEB 데이터 형식 : XML / JSON / YAML / CSV / TSV / Excel / PDF ... 데이터의 형식 : Text형식 - 일반적으로 에디터로 편집할 수 있는 데이터 포맷 - 자연어(한국어, 영어, 중국어, 일어, ...)와 숫자로 구성된 데이터 - 특수문자(탭, 줄 바꿈, 제어 문자들) - ex) XML / JSON / YAML / CSV ... - 장점> 편집을 쉽게 할 수 있다. 설명을 포함해서 쓸 수 있기 때문에 가독성이 좋다. - 단점> 보안성이 떨어진다. 바이너리 데이터보다 데이터 크기가 크다. : Binary형식 - 텍스트 형식을 제외한 나머지 - 문자와 상관없이 데이터를 사용할 수 있는 데이터 - 장점> 데이터 크기가 작다. 보안성이 좋다. - 단점> 에디터로 편집할 수..
Python/python 2020. 11. 13. 12:13

(Python) 날씨 API 활용

home.openweathermap.org/ 사용 (서울, 도쿄, 뉴욕 날씨) import requests #보통 웹API의 결과는 JSON형식이나 XML형식 리턴을 한다. #openweather에서는 JSON형식으로 리턴한다. #따라서, JSON형식의 데이터를 파이썬 데이터 형식으로 변환해줘야 하는데 #이때 json모듈이 필요함. import json #API키를 지정한다. 여러분들의 API키를 사용 apikey="키 값" city_list = ["Seoul,KR", "Tokyo,JP", "New York,US"] #API 지정 api="http://api.openweathermap.org/data/2.5/weather?q={city}&APPID={key}" # 켈빈 온도를 섭씨 온도로 변환하는 함수 ..
Python/Python 연습 2020. 11. 12. 14:36

(Python) 제주도 교통정보 일간 통계 API로 값 뽑기

from bs4 import BeautifulSoup import urllib.request as req import os.path searchDate = '20201111000000' #API키 apikey="api 키" #API 지정 api="http://openapi.jejuits.go.kr/rfcapi/rest/jejuits/getTrafficInfoDailyStat?authApiKey={key}&statDt={stat}" #API의 URL 구성하기 url = api.format(key=apikey, stat=searchDate) print("URL : ", url) #XML 다운로드 fileName = "jejuTraffic.xml" if not os.path.exists(fileName): r..
Python/Python 연습 2020. 11. 12. 14:21

(Python) Selenium 연습 : 로그인, 검색

다음 로그인 from selenium import webdriver myId = '아이디' myPw = '비밀번호' # PhantomJS를 이용할 경우 # driver = webdriver.PhantomJS('D:\SeleniumDriver/phantomjs-2.1.1-windows/bin/phantomjs') # Chrome을 이용할 경우 driver = webdriver.Chrome('D:\SeleniumDriver/chromedriver_win32/chromedriver') driver.implicitly_wait(3) url_login = "https://logins.daum.net/accounts/signinform.do" driver.get(url_login) print("로그인 페이지에 접속..
Python/Python 연습 2020. 11. 9. 11:46

Selenium

Selenium : 웹 브라우저를 컨트롤하여 웹 자동화 하는 도구 중의 하나 : UI 자동화 시스템을 사용할 때 많이 사용하는 것 중 하나 자동화의 종류 : 가장 원초적인 자동화는 화면의 좌표를 기준으로 한 자동화 - 많이 사용되지 않음 : Selenium 도구를 이용하는 웹 자동화 : 윈도우즈의 자동화 : 작업의 자동화 웹 드라이버의 구성 : WebDriver.Firefox 파이어폭스 : WebDriver.Chrom - 크롬 : WebDriver.Ie - 익스플로러 : WebDriver.Opera - 오페라 : WebDriver.PhantomJS - PhantomJS 브라우저 (CLI 형식의 브라우저) Selenium Client 설치 pip install selenium PhantomJS 다운로드 :..
Python/python 2020. 11. 9. 11:15

Web site 경로를 따라가 데이터 찾기

절대경로 : 전체경로 상대경로 : 특정 위치를 기준으로 경로 urllib.parse.urljoin() : 상대경로를 절대경로로 변환하는 함수 from urllib.parse import urljoin baseUrl = "http://www.example.com/html/a.html" # 절대경로를 기준으로 상대경로가 잡힘 print(urljoin(baseUrl, "b.html")) print(urljoin(baseUrl, "sub/c.html")) print(urljoin(baseUrl, "../index.html")) print(urljoin(baseUrl, "../image/a.png")) print(urljoin(baseUrl, "../css/style.css")) # urljoin 두 번째 매개 ..
Python/python 2020. 11. 6. 10:48

(Python) 데이터 시각화 연습 : 웹에서 값 가져오기

네이버 증권 import urllib.request as request from bs4 import BeautifulSoup as bs url = "https://finance.naver.com/marketindex/" data = request.urlopen(url).read() soup = bs(data, "html.parser") while True: print(""" 1. 미국USD 2. 일본JPY(100엔) 3. 유럽연합EUR 4. 중국CNY 5. 일본 엔/달러 6. 달러/유로 7. 달러/영국파운드 8. 달러 인덱스 9. WTI 10. 휘발유 11. 국제 금 12. 국내 금 0. 종료 """) cn = None txt = None choice = int(input()) if choice == 1..
Python/Python 연습 2020. 11. 4. 17:16

Python을 이용한 데이터 시각화

아나콘다 설치하기 2020/10/13 - [잡학] - 아나콘다(Ananconda) 설치 빅 데이터(Big Data) : 딥러닝 - 머신 러닝을 가장 최적화된 학습 방법.알파고 : 스트레이핑 - 웹 사이트에 있는 특정 정보를 추출하는 기술 : 크롤링 - 프로그램이 웹 사이트를 정기적으로 돌며 정보를 추출하는 기술 urllib : Http, Ftp 프로토콜을 통해서 다운받고 사용할 수 있게 도와주는 라이브러리 request 모듈 : 웹 사이트에 있는 데이터에 접근하게 해주는 모듈 urlretrieve 함수 : 웹 상에 자료를 다운로드할 수 있게 도와주는 함수 # urllib URL을 다루는 모듈을 모아놓은 패키지 # urllib 패키지에 있는 모듈 중에서 request 모듈을 이용하는데 # request 모..
Python/python 2020. 11. 3. 16:33