기획의도 : 가장 좋아하던 프로그램이 무한도전이라서 유튜브로 무한도전 오분순삭을 많이 시청합니다. 무한도전은 인기가 많아 영상 조회수가 백만이 넘는 영상들이 많은데 1년 이내 올라온 영상들의 경우 조회수가 백만이 넘는 영상들이 많지 않다는 것을 알게 되었습니다. 저는 무한도전 오분순삭 크롤링하여 무한도전 오분순삭 영상 50개를 뽑아 조회수가 백만 넘는게 몇 개인지를 분석하고, 조회수 높은 순으로 나열하여 그래프를 만들고, 각 영상들 맨 위에 있는 댓글에서 빈출단어를 뽑아내 댓글에 어떤 단어들이 많이 쓰여지는지를 한눈에 볼 수 있도록 시각화하였습니다.
1. 나중에 댓글을 크롤링하기 위해 동영상 url을 수집하여 저장
[None,
'https://www.youtube.com/watch?v=NSQltP1aau8',
'https://www.youtube.com/watch?v=IsmbK4ceKIQ',
'https://www.youtube.com/watch?v=PpdJIgEgnm4',
'https://www.youtube.com/watch?v=gBjkdNbQApY',
'https://www.youtube.com/watch?v=qB6hnUdMZ8g',
'https://www.youtube.com/watch?v=0KYVxJ55atI',
'https://www.youtube.com/watch?v=8HwO-GvLR3M',
'https://www.youtube.com/watch?v=_moUN4npV2A',
'https://www.youtube.com/watch?v=BMv9f6x_EjA',
'https://www.youtube.com/watch?v=kTZDrP7w9X4',
'https://www.youtube.com/watch?v=XfrHTKWRL-g',
'https://www.youtube.com/watch?v=ZPufn_J0EQQ',
'https://www.youtube.com/watch?v=aUNd8Km6h3Q',
'https://www.youtube.com/watch?v=-tONw0bBgus',
'https://www.youtube.com/watch?v=7cVM9PnUnzo',
'https://www.youtube.com/watch?v=Uef7_hOWBNI',
'https://www.youtube.com/watch?v=BusfJ4WSEdk',
'https://www.youtube.com/watch?v=2U-wXB7rglg',
'https://www.youtube.com/watch?v=puuqTKSD0jY',
'https://www.youtube.com/watch?v=ZNLhWSsaeXU',
'https://www.youtube.com/watch?v=cpiQ2HQG-8Y',
'https://www.youtube.com/watch?v=D-q5lvVFeLU',
'https://www.youtube.com/watch?v=QLmDHbAV-5o',
'https://www.youtube.com/watch?v=2lV_spuwHY4',
'https://www.youtube.com/watch?v=BR7OFcEFRDw',
'https://www.youtube.com/watch?v=hBfQNIXUnwE',
'https://www.youtube.com/watch?v=5gEgBSf106Y',
'https://www.youtube.com/watch?v=2kWfWo8_7vA',
'https://www.youtube.com/watch?v=hGn0ojaG7Ik',
'https://www.youtube.com/watch?v=mycIpcE-tCo',
'https://www.youtube.com/watch?v=qIyHu4944pg',
'https://www.youtube.com/watch?v=CerVxxM1Pyo',
'https://www.youtube.com/watch?v=Kli-OLpJ_vo',
'https://www.youtube.com/watch?v=YviN73bHRSo',
'https://www.youtube.com/watch?v=XsZdFhlvsYQ',
'https://www.youtube.com/watch?v=pS2d1jqPXqM',
'https://www.youtube.com/watch?v=elJ0Qs-CO6s',
'https://www.youtube.com/watch?v=LiuxSyrUUEA',
'https://www.youtube.com/watch?v=k_3Kcw2aG0o',
'https://www.youtube.com/watch?v=HUlWWnAgtb8',
'https://www.youtube.com/watch?v=zCdJHwT0DRs',
'https://www.youtube.com/watch?v=27Gya479akw',
'https://www.youtube.com/watch?v=Yf7XCMT42io',
'https://www.youtube.com/watch?v=-XdvfwvQF3g',
'https://www.youtube.com/watch?v=mqHixuTg7NA',
'https://www.youtube.com/watch?v=TFKm7SSfWbY',
'https://www.youtube.com/watch?v=jRg7klsHf8c',
'https://www.youtube.com/watch?v=VPH5ccGL9Zw',
'https://www.youtube.com/watch?v=hE3cf48ImbI',
'https://www.youtube.com/watch?v=7k5owTFBTck',
'https://www.youtube.com/watch?v=7vXbrMyqoD0',
'https://www.youtube.com/watch?v=xcFtUaOFH2k',
'https://www.youtube.com/watch?v=PiX3LjMxVe4',
'https://www.youtube.com/watch?v=Ffz74juoQNs',
'https://www.youtube.com/watch?v=LcPq8SA5sgM',
'https://www.youtube.com/watch?v=ZS5YqvSB5Kk',
'https://www.youtube.com/watch?v=keCEqKu2Tr8',
'https://www.youtube.com/watch?v=hPml1EaGvYM']
2. for문으로 데이터 수집하기(영상 제목, 조회수, 방영날짜)
3. 정규표현식 이용하여 방영날짜 추출
4. 영상 제목 추출
5. 데이터 프레임 형성(댓글은 아직 크롤링 하지 않았다.)
6. 댓글 크롤링
{0: '그저 예능 역사상 최고의 탱커\n어느순간 공격하는 법을 깨닫기 시작한 정준하는 \n어느새 예능에서 최고의 사기 캐릭터가 되어 있었음..',
1: '전체적으로 볼때는 잘 몰랐는데 오분순삭으로 주나형만 모아놓으면 겁나 웃김ㅋㅋㅋㅋㅋㅋㅋㅋㅋ',
2: '01:37 이땐 어려서 잘 몰라가지고 마냥 웃었는데 나중에보니 진짜 홍철이형 멘탈보고 정말 놀랐네요. 그런 사고를 겪으시고도 저런 드립을 칠 수 있다는게 진짜 ㅋㅋㅋㅋㅋㅋ 멤버들 눈치보면서 멘트치는게 너무 웃겨 ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ',
3: '시원하고 재밌음 ..\n타인은 상상하지 못 할 미움 받을 용기라는 자막 너무 좋다',
4: '미스춘향, 디즈니 공주 분장과 함께 무도에서 전 멤버 여자 분장하면 떠오르는 며느리 분장ㅋㅋㅋㅋ 명수옹 진짜 시골에 살고 계신 우리 첫째 이모랑 복붙 ㅋㅋㅋㅋㅋㅋ',
5: '인정하는 명수라서 명수가 주인공인줄 알았는데 거의 쩌리짱 특집ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ',
6: '7인체제는 진짜 전설이다',
7: '진짜 지상렬님 마지막 지인 소개팅 하이라이트는 볼 때마다 레전드 같아요 인생 애드립입니다 정말 ㅋㅋ',
8: '하와수 싸움은 유재석이 매번 부추겨서 너무 웃김ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ',
9: '7:52 멤버들 다 같이 부르는거 넘 좋다ㅠㅠ',
10: '2022년에도 무도 틀어놓고 살아야지',
11: '박명수는 자기가 공격할 때는 좋아하면서 그걸 받아치면ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ 진짜 당황하는게 너무 웃김ㅋㅋㅋㅋ',
12: '무도에서 길의 웃음 포인트 \n1. 순수한 무근본 멘트(예- ‘형, 요즘 벌이도 안좋은데’)\n2. 웃길 의도 없는 동작인데 빵터짐\n(예- 준비, 차려)',
13: '무도 멤버도 소중하지만, 그들을 이끌고 기발한 아이디어로 레전드 프로그램을 만든 김태호 pd도 대단한 사람임. 이제 남은건 그의 궁서체 자막 모음집 존버뿐',
14: '난 아무리봐도 윌리스가 레전드임ㅋㅋㅋㅋㅋㅋㄱㅋㅋㅋㅋㅋㅋ 근데 또 잘어울렼ㅋㅋㅋㅋㅋㅋㅋㄱㅋㄱㅋㅋㄱㄲ',
15: '뭔가 웃길라고 하는게 아니라 진짜 특유의 아무것도 모르는 순수한 두뇌에서 나오는 드립이라 개웃김 ㅋㅋㅋㅋㅋㅋㅋㅋ',
16: '9:28 커버장인 장범준도 따라하지 못한 원곡자의 위엄',
17: '정치인 패러디 \n0:57 이명박 - 곰탕\n4:08 이정희 - 박근혜 떨어뜨리려고 나왔습니다.\n4:55 윤진숙 - 구설수에 오르는 건 인기 덕분',
18: '저것도 다른 멤버가 아닌 꼭 명수옹이 해야 그느낌, 그발음이 제대로 살아날수 있음ㅋㅋㅋㅋㅋ 심지어 저때 조정 연습하고 와서 되게 피곤했을텐데 \n저정도의 웃음포인트는 진짜 타고난게 맞는거 같아요 그리고 애당초 우천시 취소 특집이 그자체가 그냥 레전드',
19: '대추차 드립은 언제봐도 레전드임ㅋㅋㅋ',
20: '1:09 풍월을 울리는 길왕\n\n2:05 뭉치고 살면 흩어지면 죽는 길이\n\n2:22 입 옆에 황태끼는 길이\n\n3:15 주나형 황태 관리해주는 길이',
21: '중앙이형을 제일 많이놀리는건 유느님이고 제일 세게놀리는건 띵수옹인게 학계의정설ㅋㅋㅋㅋ',
22: '1:47 내 최애 장면ㅋㅋㅋㅋㅋ\n아프면 진짜 정신이 오락가락해서 나도 모르게 헛소리 나옴ㅋㅋㅋ\n명수옹의 아픔과 웃음이 공존하는 영상ㅋㅋㅋㅋㅋㅋㅋ',
23: '진짜 형돈이형은 아이디어 뱅크가 맞았네. 특히 정신감정 체인지 히든카드 특집은 진짜 레전드로 손꼽히는 에피소드인데, 진지하게 예능작가나 유튜브를 먼저 제대로 시작했으면 훨씬 대박났을듯',
24: '3:03 진짜 짜고 하는거 아닌이상 BGM도 뚝 끊키고 다들 쳐다보다가 고개 숙이고 마지막에 명수옹 빼꼼까지 ㅋㅋㅋ 완벽한 꽁트다 진짜 ㅋㅋㅋ',
25: '보고 또 보고 해도 진짜 자주보지만 정말 질리지가 않네ㅋㅋㅋㅋㅋ 무도 ㅠㅠ',
26: '진짜 관찰예능으로 쉽게 돈벌지 말고 연예인들 저렇게 애드립도 치고 콩트식으로 웃기면 얼마나좋냐',
27: '첫 시작이 딱지치기에다가 유재석이 계속 이기는 것도 소름',
28: '이편 킬포는 잎아리라고 쓴 노홍철이 아니라 주둥아리는 주둥파리라고 쓰냐고 물어보는 정준하임ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ',
29: '유느 컹 소리 내면서 웃을 때 너무 행복하고 즐거워 보여서 덩달아 같이 웃게됨 ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ',
30: '둘이 어이없는답해도 바로 못웃고 유재석눈치보고 웃는게 킬포임 ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ',
31: '이건 그냥 상렬이형 특집이라고 제목 바꿔도 ㅇㅈ함ㅋㅋㅋㅋㅋㅋㅋ',
32: '저때는 치루를 웃으면서 얘기하길래 별거 아닌 줄 알았지... 얼마전 치루 수술 하고 느꼈습니다 홍철이형이 얼마나 대단하고 프로페셔널한 사람인지\n치루수술하고 며칠만에 선택2014에서 무릎꿇고 얘기하는거 보고 기겁했습니다 그는 대단한 사람이에요',
33: '7공주 특집은 처음에 등장해서 춤추는거, 모여서 통장관리 얘기하는거, 햄버거 루왁커피 냉면 먹는거, 화장하는거, 런닝머신위로 지나가는거 등등 거를타선이없음ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ 이건 ㄹㅇ풀로봐야됨',
34: '홍카 모음이 있다는게 대단ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ',
35: '사브레도 사브레인데 이어지는 콤보가 미침 ㅋㅋㅋㅋㅋㅋ 둘이 연인이세요? 아니요 빤스런엔딩 ㅋㅋㅋㅋ',
36: '성골 박명수 타이틀 개웃김 ㅋㅋㅋㅋㅋ',
37: '희대의 띵언 꿈은 없구요 놀고 싶습니다 ㅋㅋㅋㅋㅋ',
38: '공채 개그맨 출신 양세형, 조세호도 적응 못한 무도 멤버 자리를 완벽히 소화한 힙합 가수 길은 진짜 대단한거였어… 캐릭터 때문에 재미없는 친구인줄 알았는데 제일 재밌는 사람이였어',
39: '귀엽게 걸어서 내성적 발톱이였던 준하ㅋㅋㅋ',
40: '노홍철이 유재석에게 "형 개처럼 파시네요"\n유재석이 정준하에게 "물 2L면 변기통에 있는 그 정도 마시는 거지"\n형동생 할거 없이 서로서로 극딜 넣는거 진짜 개웃겨ㅋㅋㅋㅋ',
41: '시상식에서까지 저렇게 망가지면서 시청자들을 웃기고 싶어하는 개그맨들이 또 있을까싶다.\n본인들도 멋진 옷 입고 멋지게 수상소감 밝히고 싶었을텐데 과감히 포기하고 시청자들의 웃음을 위해\n희생하는 그들의 프로정신이 지금 봐도 너무나도 멋지다.',
42: '정준하 1인 7역은 ㄹㅇ 참신한데 겁나 웃겼음\nㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㄱㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㄱㅋㅋㄱㅋㅋ',
43: '좁은 안경 박명수는 진짜 레전드 ㅋㅋㅋㅋㅋㅋㅋㅋㅋ',
44: '길이 영입이 정말 신의 한수였던게 길이 들어오고나서 형돈이도 살고 바로 무도 전성기 열림',
45: '놀뭐 면접은 이맛이 안나더라 ㅠㅠ 역시 이 7인이 가장 재밌음 ㄹㅇㅋㅋ',
46: '가발 쓴 정준하를 맞설 수 있는 “룰을 이해한 박명수”',
47: '쩌리짱의 리액션은 기대를 저버리지 않아 ㅋㅋㅋㅋ',
48: '정준하 마지막에 쟁반 한번더 맞는거처럼 무도는 저런거 할때 뒤에 하는 사람에게 없던 이벤트 하나씩 더 추가 하는게 ㄹㅇ 웃김ㅋㅋ',
49: '도니형이 무도에서 아이디어 낸것도 다 성공하고 가요제도 성공하고 포지션도 딜탱힐 다 균형잡힌 거 보면 그냥 만능형 사기캐임ㅋㅋㅋㅋ'}
7. 댓글 데이터 프레임 형성 -> 앞서 만든 데이터 프레임과 합치기 -> 조회수 기준으로 내림차순 정렬 -> 조회수 100만 넘는 영상과 아닌 영상 나누기
'개인 프로젝트 > 유튜브 무한도전' 카테고리의 다른 글
| 유튜브 무한도전 오분순삭 시각화 (0) | 2022.03.31 |
|---|