수강대상
교육목표
[온라인 교육과정 문의]
- 이메일 : sesac@sba.seoul.kr
[해당 교육과정 소개]
- 웹크롤링 역량
- 데이터 유형에 따른 전처리 역량
- 오픈소스 활용 역량
교육내용
이수기준
평가항목 | 이수기준 | 반영기준(가중치) |
---|---|---|
진도율 | 80점 이상 | 80% |
시험 | 60점 이상 | 20% |
총점 | 80점 이상 | 100% |
1. 과정소개 |
|
1. 과정소개 | 2분 0초 |
---|---|
2. 환경세팅 |
|
2. 파이썬과 웹크롤링이란? | 7분 0초 |
3. 아나콘다로 환경구성하기 윈도우 | 23분 0초 |
4. 아나콘다로 환경구성하기 맥 | 13분 0초 |
5. 개발IDE설치하기(윈도우) | 21분 0초 |
6. 개발IDE설치하기(맥) | 16분 0초 |
3. 파이썬 빠르게 살펴보기 |
|
7. 산술연산과변수 | 12분 0초 |
8. 자료형 (1) | 27분 0초 |
9. 자료형 (2) | 17분 0초 |
10. 조건문 | 18분 0초 |
11. 파이썬 도전문제 (1) | 17분 0초 |
12. 반복문 for | 18분 0초 |
13. 반복문 while | 10분 0초 |
14. 반복문과 다차원리스트 | 20분 0초 |
15. 파이썬 도전문제 (2) | 13분 0초 |
16. 가위바위보게임 | 11분 0초 |
17. 함수 | 11분 0초 |
18. 함수응용 | 13분 0초 |
19. 람다함수 표현식 | 17분 0초 |
20. 객체와 클래스 | 20분 0초 |
21. 객체와 클래스 상속 | 9분 0초 |
22. 파이썬 도전문제 (3) | 17분 0초 |
4. 크롤링에 필요한 웹 기초 |
|
23. 웹과 크롬 개발자도구 | 15분 0초 |
24. HTTP 구조 | 8분 0초 |
25. HTML (1) | 18분 0초 |
26. HTML (2) | 13분 0초 |
5. 파이썬크롤링 |
|
27. Request 모듈 | 19분 0초 |
28. BeautifulSoup4 모듈 | 17분 0초 |
29. 크롤링 실습 1 | 18분 0초 |
30. CSS 셀렉터 | 9분 0초 |
31. CSS 셀렉터를 활용한 크롤링 | 18분 0초 |
32. 크롤링 실습 (1) | 17분 0초 |
33. 크롤링 실습 (2) | 15분 0초 |
34. 실전 영화순위 크롤링 | 8분 0초 |
35. 실전 주가 크롤링 (1) | 11분 0초 |
36. 실전 주가 크롤링 (2) | 12분 0초 |
37. 실전 쇼핑몰 크롤링 (1) | 14분 0초 |
38. 실전 쇼핑몰 크롤링 (2) | 14분 0초 |
39. 실전 뉴스사이트 크롤링 (1) | 13분 0초 |
40. 실전 뉴스사이트 크롤링 (2) | 17분 0초 |
41. 실전 뉴스사이트 크롤링 (3) | 20분 0초 |
42. 실전 뉴스사이트 크롤링 (4) | 11분 0초 |
6. 정규표현식 |
|
43. 파이썬 정규표현식 (1) | 12분 0초 |
44. 파이썬 정규표현식 (2) | 9분 0초 |
45. 정규표현식 문법 (1) | 14분 0초 |
46. 정규표현식 문법 (2) | 15분 0초 |
47. 정규표현식 실습 | 19분 0초 |
7. 비동기사이트크롤링 |
|
48. 비동기사이트란? | 5분 0초 |
49. 비동기사이트란? (비동기사이트 살펴보기) | 20분 0초 |
50. 비동기사이트 실습 (1) | 14분 0초 |
51. 비동기사이트 실습 (2-1) | 16분 0초 |
52. 비동기사이트 실습 (2-2) | 17분 0초 |
53. 비동기사이트 실습 (2-3) | 21분 0초 |
8. 데이터저장 |
|
54. 데이터베이스란?? | 11분 0초 |
55. 데이터베이스 서버설치 | 12분 0초 |
56. 데이터베이스 서버세팅 | 8분 0초 |
57. 데이터베이스 테이블 생성 | 24분 0초 |
58. SQL 빠르게 살펴보기 (1) | 15분 0초 |
59. SQL 빠르게 살펴보기 (2) | 14분 0초 |
60. 데이터베이스에 크롤링데이터 저장 | 22분 0초 |
61. AWS와 S3스토리지 | 10분 0초 |
62. S3버킷생성 | 9분 0초 |
63. S3에 크롤링데이터 저장 | 27분 0초 |
9. 비동기사이트크롤링_실전 |
|
64. 인피니티스크롤 크롤링 | 15분 0초 |
65. 채용정보사이트 크롤링 (1) | 15분 0초 |
66. 채용정보사이트 크롤링 (2) | 22분 0초 |
67. SNS 계정 크롤링 (1) | 15분 0초 |
68. SNS 계정 크롤링 (2) | 16분 0초 |
69. SNS 계정 크롤링 (3) | 19분 0초 |
70. SNS 검색어 크롤링 (1) | 15분 0초 |
71. SNS 검색어 크롤링 (2) | 20분 0초 |
72. 이미지 SNS 검색어 크롤링 (1) | 17분 0초 |
73. 이미지 SNS 검색어 크롤링 (2) | 17분 0초 |
74. 이미지 SNS 검색어 크롤링 (3) | 12분 0초 |
10. 데이터정리 |
|
75. Pandas Series | 23분 0초 |
76. Pandas DataFrame (1) | 13분 0초 |
77. Pandas DataFrame (2) | 14분 0초 |
78. 실습 Pandas (1) | 16분 0초 |
79. 실습 Pandas (2) | 11분 0초 |
80. 실습 Pandas (3) | 14분 0초 |
11. 쿠키와 세션 |
|
81. 쿠키와 세션이란? | 9분 0초 |
82. 실전 국내 유가정보사이트 크롤링 (1) | 11분 0초 |
83. 실전 국내 유가정보사이트 크롤링 (2) | 22분 0초 |
84. 실전 국내 유가정보사이트 데이터정리 (3) | 7분 0초 |
12. OpenAPI |
|
85. OPENAPI 데이터 활용방법 (1) | 14분 0초 |
86. OPENAPI 데이터 활용방법 (2) | 15분 0초 |
87. 실전 OPENAPI 데이터 활용 | 19분 0초 |
13. 셀레니움 |
|
88. 셀레니움 세팅 및 사용법 (1) | 15분 0초 |
89. 셀레니움 세팅 및 사용법 (2) | 10분 0초 |
90. 셀레니움 실습 (1) | 22분 0초 |
91. 셀레니움 실습 (2) | 11분 0초 |
92. 실전 뉴스사이트 크롤링 (1) | 18분 0초 |
93. 실전 뉴스사이트 크롤링 (2) | 15분 0초 |
94. 실전 뉴스사이트 크롤링 (3) | 13분 0초 |
95. 실전 채용정보사이트 크롤링 (1) | 11분 0초 |
96. 실전 채용정보사이트 크롤링 (2) | 18분 0초 |
97. 실전 채용정보사이트 크롤링 (3) | 11분 0초 |
14. 스크레피 |
|
98. 스크레피 시작하기 | 7분 0초 |
99. 스크레피로 크롤링하기 | 16분 0초 |
100. 크롤링한 데이터 저장 | 10분 0초 |
101. 여러페이지 크롤링 | 21분 0초 |