Lecture Note – 페이지 7

[공공데이터 포털][파이썬][크롤링] 전라북도 전주시 노선정보 서비스

제공 서비스 공통으로 사용하는 함수

import bs4

def get_parsing(html):
  bs = bs4.BeautifulSoup(html, 'html.parser')

  items = bs.find_all('list')

  lst_items = []
  for item in items:
    dic_atom = {}
    for atom in item:
      #print(atom.get_text().strip())
      #print(atom.name)
      dic_atom[atom.name] = atom.get_text()
    lst_items.append(dic_atom)

  return lst_items

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

import bs4

def get_parsing(html):

bs = bs4.BeautifulSoup(html, 'html.parser')

items = bs.find_all('list')

lst_items = []

for item in items:

dic_atom = {}

for atom in item:

#print(atom.get_text().strip())

#print(atom.name)

dic_atom[atom.name] = atom.get_text()

lst_items.append(dic_atom)

return lst_items

노선번호 목록 조회

apiKey = "개발자 apiKey"

import requests

url = 'http://openapi.jeonju.go.kr/jeonjubus/openApi/traffic/bus_location_all_common.do'
queryParams = '?ServiceKey=' + apiKey

resp = requests.get(url + queryParams)
html = resp.content
html = html.decode('utf8')  # utf8 string으로 변환

lst_items = get_parsing(html)
for item in lst_items:
  print(item)

1

2

3

4

5

6

7

8

9

10

11

12

13

14

apiKey = "개발자 apiKey"

import requests

url = 'http://openapi.jeonju.go.kr/jeonjubus/openApi/traffic/bus_location_all_common.do'

queryParams = '?ServiceKey=' + apiKey

resp = requests.get(url + queryParams)

html = resp.content

html = html.decode('utf8') # utf8 string으로 변환

lst_items = get_parsing(html)

for item in lst_items:

print(item)

노선정보 항목조회

apiKey = "개발자 apiKey"
brtId = "165"
brtClass = "0"

import requests

url = 'http://openapi.jeonju.go.kr/jeonjubus/openApi/traffic/bus_location1_common.do'
queryParams = '?ServiceKey=' + apiKey + '&brtId=' + brtId + '&brtClass=' + brtClass

resp = requests.get(url + queryParams)
html = resp.content
html = html.decode('utf8')  # utf8 string으로 변환

lst_items = get_parsing(html)
for item in lst_items[:10]:
  print(item)

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

apiKey = "개발자 apiKey"

brtId = "165"

brtClass = "0"

import requests

url = 'http://openapi.jeonju.go.kr/jeonjubus/openApi/traffic/bus_location1_common.do'

queryParams = '?ServiceKey=' + apiKey + '&brtId=' + brtId + '&brtClass=' + brtClass

resp = requests.get(url + queryParams)

html = resp.content

html = html.decode('utf8') # utf8 string으로 변환

lst_items = get_parsing(html)

for item in lst_items[:10]:

print(item)

노선별 경유 정류소 목록 조회

apiKey = "개발자 apiKey"
brtStdid = "305001141"
lKey = "LOW"

import requests

url = 'http://openapi.jeonju.go.kr/jeonjubus/openApi/traffic/bus_location_busstop_list_common.do'
queryParams = '?ServiceKey=' + apiKey + '&brtStdid=' + brtStdid + '&lKey=' + lKey

resp = requests.get(url + queryParams)
html = resp.content
html = html.decode('utf8')  # utf8 string으로 변환

lst_items = get_parsing(html)
for item in lst_items[:10]:
  print(item)

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

apiKey = "개발자 apiKey"

brtStdid = "305001141"

lKey = "LOW"

import requests

url = 'http://openapi.jeonju.go.kr/jeonjubus/openApi/traffic/bus_location_busstop_list_common.do'

queryParams = '?ServiceKey=' + apiKey + '&brtStdid=' + brtStdid + '&lKey=' + lKey

resp = requests.get(url + queryParams)

html = resp.content

html = html.decode('utf8') # utf8 string으로 변환

lst_items = get_parsing(html)

for item in lst_items[:10]:

print(item)

노선별 형상정보 목록 조회

apiKey = "개발자 apiKey"

brtStdid = "305001141"

import requests

url = 'http://openapi.jeonju.go.kr/jeonjubus/openApi/traffic/bus_nosun_drawing_common.do'
queryParams = '?ServiceKey=' + apiKey + '&brtStdid=' + brtStdid

resp = requests.get(url + queryParams)
html = resp.content
html = html.decode('utf8')  # utf8 string으로 변환

lst_items = get_parsing(html)
for item in lst_items[:25]:
  print(item)

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

apiKey = "개발자 apiKey"

brtStdid = "305001141"

import requests

url = 'http://openapi.jeonju.go.kr/jeonjubus/openApi/traffic/bus_nosun_drawing_common.do'

queryParams = '?ServiceKey=' + apiKey + '&brtStdid=' + brtStdid

resp = requests.get(url + queryParams)

html = resp.content

html = html.decode('utf8') # utf8 string으로 변환

lst_items = get_parsing(html)

for item in lst_items[:25]:

print(item)

노선별 시간표 목록 조회

apiKey = "개발자 apiKey"

brtStdid = "305001141"

import requests

url = 'http://openapi.jeonju.go.kr/jeonjubus/openApi/traffic/bus_location_time_common.do'
queryParams = '?ServiceKey=' + apiKey + '&stdId=' + brtStdid

resp = requests.get(url + queryParams)
html = resp.content
html = html.decode('utf8')  # utf8 string으로 변환

lst_items = get_parsing(html)
for item in lst_items[:10]:
  print(item)

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

apiKey = "개발자 apiKey"

brtStdid = "305001141"

import requests

url = 'http://openapi.jeonju.go.kr/jeonjubus/openApi/traffic/bus_location_time_common.do'

queryParams = '?ServiceKey=' + apiKey + '&stdId=' + brtStdid

resp = requests.get(url + queryParams)

html = resp.content

html = html.decode('utf8') # utf8 string으로 변환

lst_items = get_parsing(html)

for item in lst_items[:10]:

print(item)

저상버스 노선번호 목록조회

apiKey = "개발자 apiKey"

import requests

url = 'http://openapi.jeonju.go.kr/jeonjubus/openApi/traffic/low_location1_list_common.do'
queryParams = '?ServiceKey=' + apiKey

resp = requests.get(url + queryParams)
html = resp.content
html = html.decode('utf8')  # utf8 string으로 변환

lst_items = get_parsing(html)
for item in lst_items[:10]:
  print(item)

1

2

3

4

5

6

7

8

9

10

11

12

13

14

apiKey = "개발자 apiKey"

import requests

url = 'http://openapi.jeonju.go.kr/jeonjubus/openApi/traffic/low_location1_list_common.do'

queryParams = '?ServiceKey=' + apiKey

resp = requests.get(url + queryParams)

html = resp.content

html = html.decode('utf8') # utf8 string으로 변환

lst_items = get_parsing(html)

for item in lst_items[:10]:

print(item)

해당 노선의 상세 추가 정보

apiKey = "개발자 apiKey"

brtStdid = "305001141"

import requests

url = 'http://openapi.jeonju.go.kr/jeonjubus/openApi/traffic/bus_location_busstop_info_common.do'
queryParams = '?ServiceKey=' + apiKey + '&stdId=' + brtStdid

resp = requests.get(url + queryParams)
html = resp.content
html = html.decode('utf8')  # utf8 string으로 변환

lst_items = get_parsing(html)
for item in lst_items[:10]:
  print(item)

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

apiKey = "개발자 apiKey"

brtStdid = "305001141"

import requests

url = 'http://openapi.jeonju.go.kr/jeonjubus/openApi/traffic/bus_location_busstop_info_common.do'

queryParams = '?ServiceKey=' + apiKey + '&stdId=' + brtStdid

resp = requests.get(url + queryParams)

html = resp.content

html = html.decode('utf8') # utf8 string으로 변환

lst_items = get_parsing(html)

for item in lst_items[:10]:

print(item)

[공공데이터 포털][파이썬][크롤링] 전라북도 전주시 승강장 정보 서비스

공통으로 사용하는 함수

import bs4

def get_parsing(html):
  bs = bs4.BeautifulSoup(html, 'html.parser')

  items = bs.find_all('list')

  lst_items = []
  for item in items:
    dic_atom = {}
    for atom in item:
      #print(atom.get_text().strip())
      #print(atom.name)
      dic_atom[atom.name] = atom.get_text()
    lst_items.append(dic_atom)

  return lst_items

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

import bs4

def get_parsing(html):

bs = bs4.BeautifulSoup(html, 'html.parser')

items = bs.find_all('list')

lst_items = []

for item in items:

dic_atom = {}

for atom in item:

#print(atom.get_text().strip())

#print(atom.name)

dic_atom[atom.name] = atom.get_text()

lst_items.append(dic_atom)

return lst_items

승강장명 목록 조회

apiKey = "개발자 apiKey"

#ServiceKey = "DIFVRMOVXUMNJHY"
searchFld = "stopnm"
searchNm = "안골"
#searchNm = input("찾는 정류장 이름(예: 안골) : ")

import requests

url = 'http://openapi.jeonju.go.kr/jeonjubus/openApi/traffic/bus_location2_stopnm_common.do'
queryParams = '?ServiceKey=' + apiKey + '&searchFld=stopnm&searchNm=' + searchNm

resp = requests.get(url + queryParams)
html = resp.content
html = html.decode('utf8')  # utf8 string으로 변환

lst_items = get_parsing(html)
for item in lst_items:
  print(item)

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

apiKey = "개발자 apiKey"

#ServiceKey = "DIFVRMOVXUMNJHY"

searchFld = "stopnm"

searchNm = "안골"

#searchNm = input("찾는 정류장 이름(예: 안골) : ")

import requests

url = 'http://openapi.jeonju.go.kr/jeonjubus/openApi/traffic/bus_location2_stopnm_common.do'

queryParams = '?ServiceKey=' + apiKey + '&searchFld=stopnm&searchNm=' + searchNm

resp = requests.get(url + queryParams)

html = resp.content

html = html.decode('utf8') # utf8 string으로 변환

lst_items = get_parsing(html)

for item in lst_items:

print(item)

승강장 번호 목록 조회

apiKey = "개발자 apiKey"

#ServiceKey = "DIFVRMOVXUMNJHY"
searchFld = "stopnm"
searchNm = "30972"
#searchNm = input("찾는 정류장 이름(예: 30972) : ")

import requests

url = 'http://openapi.jeonju.go.kr/jeonjubus/openApi/traffic/bus_location2_stopnm_common.do'
queryParams = '?ServiceKey=' + apiKey + '&searchFld=stopno&searchNm=' + searchNm

resp = requests.get(url + queryParams)
html = resp.content
html = html.decode('utf8')  # utf8 string으로 변환

lst_items = get_parsing(html)
for item in lst_items:
  print(item)

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

apiKey = "개발자 apiKey"

#ServiceKey = "DIFVRMOVXUMNJHY"

searchFld = "stopnm"

searchNm = "30972"

#searchNm = input("찾는 정류장 이름(예: 30972) : ")

import requests

url = 'http://openapi.jeonju.go.kr/jeonjubus/openApi/traffic/bus_location2_stopnm_common.do'

queryParams = '?ServiceKey=' + apiKey + '&searchFld=stopno&searchNm=' + searchNm

resp = requests.get(url + queryParams)

html = resp.content

html = html.decode('utf8') # utf8 string으로 변환

lst_items = get_parsing(html)

for item in lst_items:

print(item)

승강장별 경유노선 목록 조회

apiKey = "개발자 apiKey"

#ServiceKey = "DIFVRMOVXUMNJHY"
standardid = "306100972"
#searchNm = input("찾는 정류장 표준 아이디(예: 306100972) : ")

import requests

url = 'http://openapi.jeonju.go.kr/jeonjubus/openApi/traffic/general_busstop_common.do'
queryParams = '?ServiceKey=' + apiKey + '&stopStandardid=' + standardid

resp = requests.get(url + queryParams)
html = resp.content
html = html.decode('utf8')  # utf8 string으로 변환

lst_items = get_parsing(html)
for item in lst_items:
  print(item)

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

apiKey = "개발자 apiKey"

#ServiceKey = "DIFVRMOVXUMNJHY"

standardid = "306100972"

#searchNm = input("찾는 정류장 표준 아이디(예: 306100972) : ")

import requests

url = 'http://openapi.jeonju.go.kr/jeonjubus/openApi/traffic/general_busstop_common.do'

queryParams = '?ServiceKey=' + apiKey + '&stopStandardid=' + standardid

resp = requests.get(url + queryParams)

html = resp.content

html = html.decode('utf8') # utf8 string으로 변환

lst_items = get_parsing(html)

for item in lst_items:

print(item)

좌표기반 근접정류소 목록 조회

apiKey = "개발자 apiKey"

#ServiceKey = "DIFVRMOVXUMNJHY"
lat = '35.81354'  #위도
lng = '127.09445' #경도
qry_cnt = '5'
#searchNm = input("찾는 정류장 표준 아이디(예: 306100972) : ")

import requests

url = 'http://openapi.jeonju.go.kr/jeonjubus/openApi/traffic/bus_stop_approach_common.do'
queryParams = '?ServiceKey=' + apiKey + '&arg1=' + lng + '&arg2=' + lat + '&arg3=' + qry_cnt

resp = requests.get(url + queryParams)
html = resp.content
html = html.decode('utf8')  # utf8 string으로 변환

lst_items = get_parsing(html)
for item in lst_items:
  print(item)

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

apiKey = "개발자 apiKey"

#ServiceKey = "DIFVRMOVXUMNJHY"

lat = '35.81354' #위도

lng = '127.09445' #경도

qry_cnt = '5'

#searchNm = input("찾는 정류장 표준 아이디(예: 306100972) : ")

import requests

url = 'http://openapi.jeonju.go.kr/jeonjubus/openApi/traffic/bus_stop_approach_common.do'

queryParams = '?ServiceKey=' + apiKey + '&arg1=' + lng + '&arg2=' + lat + '&arg3=' + qry_cnt

resp = requests.get(url + queryParams)

html = resp.content

html = html.decode('utf8') # utf8 string으로 변환

lst_items = get_parsing(html)

for item in lst_items:

print(item)

노선번호 목록 조회

apiKey = "개발자 apiKey"

import requests

url = 'http://openapi.jeonju.go.kr/jeonjubus/openApi/traffic/bus_location_all_common.do'
queryParams = '?ServiceKey=' + apiKey

resp = requests.get(url + queryParams)
html = resp.content
html = html.decode('utf8')  # utf8 string으로 변환

lst_items = get_parsing(html)
for item in lst_items:
  print(item)

1

2

3

4

5

6

7

8

9

10

11

12

13

14

apiKey = "개발자 apiKey"

import requests

url = 'http://openapi.jeonju.go.kr/jeonjubus/openApi/traffic/bus_location_all_common.do'

queryParams = '?ServiceKey=' + apiKey

resp = requests.get(url + queryParams)

html = resp.content

html = html.decode('utf8') # utf8 string으로 변환

lst_items = get_parsing(html)

for item in lst_items:

print(item)

ttt

https://docs.google.com/spreadsheets/d/1r5UMRmvJOPoP63aSgiGjpMzzkQ-SIPuwXwL5sqp3mpY/edit?usp=sharing

numpy.org 활용 User Guide : 교과서 Installation Numpy : the absolute basics for beginners(초급자) NumPy quickstart : 빠르게 전체를 설명(중급자 이상 가능) API reference : NumPy에 대한 기술 자료 자료 교재204_Numpy모듈 Pandas 활용 자료 교재205_Pandas모듈1 교재206_Pandas모듈2 데이터셋(타이타닉_코비드) 교재207_Pandas성적 데이터셋(성적처리) Data_Science_Library_02_Pandas 01 Matplotlib 활용 자료 교재201_Matplotlib 모듈 교재202_Matplotlib_02번째 3주차 수업 자료… Continue Reading Numpy/Pandas/Matplotlib 정리

2021년 1학기 소프트웨어적사고 기말고사

소프트웨어적사고 기말고사 삼각형의 밑변과 높이를 입력받아 넓이를 구하고 넓이를 출력하는 프로그램을 작성하시오.(30점) 변수명(밑변) : w 변수명(높이) : h 변수명(넓이) : area 숫자 1개를 입력받아 홀수이면 ‘홀수(odd)’, 짝수이면 ‘짝수(even)’를 출력하는 프로그램을 작성하시오.(30점) 숫자 1개를 입력받아 그 배수 9개를 출력하는 프로그램을 작성하시오(20점) 예) 4을 입력하면 4 8 12 16 20 24 28… Continue Reading 2021년 1학기 소프트웨어적사고 기말고사

파이썬관련 과목 기말대비

소프트웨어적사고 기말대비 샘플 삼각형의 밑변과 높이를 입력받아 넓이를 구하고 넓이를 출력하는 프로그램을 작성하시오.(30점) 숫자 1개를 입력받아 홀수이면 ‘홀수’, 짝수이면 ‘짝수’를 출력하는 프로그램을 작성하시오.(30점) for 반복문을 사용하여 ???? 프로그램을 작성하시오(20점) ???? (20점) [파일] -> [다운로드] -> .ipynb 다운로드 [사이버캠퍼스] – 15주차 기말고사에 업로드 파이썬 기말대비 샘플 1 : 전기 요금 계산기… Continue Reading 파이썬관련 과목 기말대비

인공지능학과 복수전공/부전공/융합전공

기준 : 2021년 5월 31일 현재 신청가능 복수전공/부전공 신청 : 전학년(1,2,3,4학년 모두 가능) 융합전공/부전공 신청 : 2학년 이상 관련자료 인공지능융합 개설교과목 : 인공지능학과 과목 추가해야 함 일본IT융합 개설교과목 : 인공지능학과 과목 추가해야 함

파이썬 함수 연습해보기

1에서 4사이의 숫자를 입력받아 1이면 가로, 세로의 길이를 입력받아 사각형의 넓이를 구하고(함수명 : f_rect) 2이면 밑변, 높이를 입력받아 삼각형의 넓이를 구하고(함수명 : f_tri) 3이면 반지름을 입력받아, 원의 둘레의 길이와, 원의 넓이를 구하고(함수명 : f_circle) 4이면 종료하는 프로그램을 작성하시오 위 프로그램은 무한 반복하도록 하시오.

소프트웨어적사고/파이썬(1) 과제

소프트웨어적 사고 중간고사 대체 과제 2개의 숫자를 입력받아 그 곱을 출력하는 프로그램을 작성하시오.(30점) 1개의 숫자를 입력받아 19이상이면 ‘성인’ 아니면 ‘미성년’를 출력하는 프로그램을 작성하시오.(30점) for 반복문을 이용하여 1에서 20까지의 숫자중 홀수를 출력하는 프로그램을 작성하시오(20점) 김치찌게(6000원), 비빔밥(7000원), 순두부찌게(8000원)에 대한 주문을 각각 받고(예 2, 2, 3개) 총 금액을 출력하는 프로그램을 작성하시오(20점) [파일] ->… Continue Reading 소프트웨어적사고/파이썬(1) 과제

가상환경에서 장고(django) 프로그래밍

리눅스 서버에서 sudoer 역할 : virtualenv 모듈 설치 : ora.jj.ac.kr에는 이미 설치 되어 있음 virtualenv 모듈 설치 여부 확인 sudo apt list | grep venv virtualenv 모듈 설치 sudo apt-get install python3-venv django 개발자 역할 wort 계정 로그인 (/home/wort) django 작업 폴더 생성 및 이동 mkdir django cd django django… Continue Reading 가상환경에서 장고(django) 프로그래밍