본문 바로가기

전체 글

 (132)
웹크롤링과 데이터 시각화로 만들어본 유튜브 데이터의 bar chart race 유튜브 컨텐츠를 보던 도중 사람들이 개별 채널 뿐 아니라 유튜브 생태계 자체에도 관심을 갖는다는 사실을 깨달았다. 특정 카테고리 내에서 누가 지는 별인지, 신흥 강자인지 보여주는 컨텐츠에 사람들은 댓글로 저마다 자신만의 분석을 내놓았다. 카테고리별 유튜브 구독자 순위를 그래프를 이용해 보여주는 python 코드를 완성했다. 카테고리별 유튜버 top 50명의 목록을 받아와서 월별 구독자, 조회수 등 과거 데이터를 scraping 해올 수 있는 코드이다. 일단 데이터가 수집되면 이를 bar chart race로 표현하는건 쉽다. 완성된 동영상은 아래 링크에서 확인할 수 있다. https://youtu.be/jq8XBql6pAk 파이썬 코드
웹 크롤링 중 일어날 수 있는 오류들 정리 0. 당연히 가장 많이 발생하는 오류는 기본적인 문법을 틀려서일 것이다. 기초가 부족한 상황이라면 웹 크롤링의 개괄적인 내용을 먼저 이해하고 프로그래밍을 시작하는게 결과적으로 시간을 줄이는 길이다. 인터넷의 크롤링 관련 포스팅 중 가장 양질의 포스팅을 공유한다. 실제 코드를 예시로 들어 초보자도 이해하기 쉽게 차근차근 설명되어있다. https://book.coalastudy.com/data-crawling/ 1. 정적크롤링을 위한 Requests 라이브러리에서 발생할 수 있는 오류 import requests url = 'https://youngseokim.tistory.com' html = requests.get(url) soup = BeautifulSoup(html.text, 'html.parser'..
[교통공학] 최종 진학 결정시 고려할 점 원래 혼자 기록용으로 비공개로 발행했던 글인데 교통 공학을 전공하시는 분들이 종종 제 블로그에 찾아오시기 시작해서 유학을 준비하시는 분들에게 혹시나 도움이 될까 싶어 공개 발행합니다. 인터뷰 당시에 나눴던 이야기 중 MIT vs UC Berkeley vs Cornell 대학들의 교통 분야 학풍? 연구 분야? 에 관련된 대화를 기록해두었습니다. 나의 prospective 지도교수님과 스카이프로 50분간의 대화를 나눴다. 아직 다른 학교들에서는 어떠한 결정도 받지 않은 상황이지만 교수님은 만일 내가 가고싶은 대학에서 어드미션을 받을 경우를 가정하고 최종 결정에 필요한 정보가 더 있는지 물었다. 가장 먼저 궁금했던것은 그 교수의 teaching style. 1주일에 한번 개인 면담을 가진다고 한다. 항상 3-..
미국 대학 어드미션 이후 지원 가능한 장학금 목록 어드미션 이후 지원하는 장학금 인터넷 서칭을 꽤 많이 해봤는데 최근 박사 유학을 지원하는 장학금이 많이 줄어서 이정도 밖에 안남은 것 같습니다. *한국사 자격증이 필요한 국비 유학생은 목록에서 제외했습니다. 혹 해당장학금을 노리시는 분이 있다면 입학년도 기준으로 2월에 있는 한국사 시험을 보셔야 장학금 마감 전에 지원 자격을 갖출 수 있습니다. 선발 대상 지원 규모 지원 일정 태광그룹 일주 학술 문화재단 장학금 해외 대학원 입학 허가를 받은 학생 (조건부 입학 인정 x) 4년간 총 USD 120,000 교내 지원금에 따른 감액 규정 없음 서류 제출 4월 중순 관정 이종환 교육재단 장학금 특정 대학 (US ranking 이 높은 대학이 주를 이룸)에 입학 허가를 받은 학생 조건부 입학의 경우 국가별 공인 ..
Gradcafe 이용 방법 전세계 지원자들이 본인의 어플리케이션 현황을 올리는 gradcafe라는 사이트가 있어요~! 다들 존재는 아시는데 정확히 어떤 방법으로 보고 정보를 얻는지 정리된 글이 없어서 포스팅을 하게되었습니다. 구글 검색창에 'gradcafe 본인전공' 이라고 치시면 가장 상위에 뜨는걸로 들어가보세요. 그럼 이런 포스팅이 나올겁니다. 학교명과 학부이름, 석사인지/박사인지 (석,박에 따라 발표 시기가 다름) 표시되어있어요. F20 는 Fall 2020 즉 2020년 가을학기 지원자라는 의미입니다. 초록색은 합격발표난 사람, 빨간색은 리젝되었다는 의미고, notes로 본인 스펙이나 인터뷰 여부 등을 적어주는 사람들이 많습니다 ㅎㅎ. 여기서 ST는 status의 약자로 해당 지원자의 신분을 알 수 있어요. A U I O ..
gre 라이팅 3.0 탈출하기 (3)gre issue 작성법 오늘은 gre issue를 어떻게 작성해야하는지에 대해서 포스팅해보려고합니다~! 오늘은 gre issue 글 작성을 위해 브레인스토밍을 어떻게 해나가야하는지 step by step 으로 알려드릴게요~! Step 1. 본인의 입장을 정한다. 반대할까??찬성할까?? 고민하면서 시간을 보내는것 보다 무조건 반대하겠다고 마음먹는게 글을 편하게 쓸 수 있어요. 대부분의 gre issue 문항은 반대하는게 편하도록 설계되어있어요. 예시를 볼까요? Universities should require every student to take a variety of courses outside the student's field of study. 문제를 보시면 should require, every student 처럼 굉장..
풀브라이트 장학생되기 - (1)서류 준비 풀브라이트 장학금의 장점에 대해서는 다른 포스팅에 적어두었습니다. https://youngseokim.tistory.com/16?category=880548 박사 유학을 위한 사전 장학금 준비- 풀브라이트 장학생이 되야하는 이유 오늘은 박사 유학을 준비하고 계신분들에게 '풀브라이트'라는 장학금에 대해 소개해드리려고 포스팅을 하게 되었습니다 ^^! 유학 준비기간동안 워낙 이것저것 준비하느라 놓치시는 분들이 많을 것 같아서 이렇게.. youngseokim.tistory.com 오늘은 풀브라이트 장학재단에 지원하기로 결심하신 분들이 서류 준비를 하는 과정에서 도움이 될만한 글을 작성해보려고해요. 본격적인 서류 준비를 시작하기 이전에 어떤게 있는지 쭉 읽어보신 다음 준비하시면 훨씬 효율적으로 준비하실 수 있을거..
박사 유학을 위한 사전 장학금 준비- 풀브라이트 장학생이 되야하는 이유 오늘은 박사 유학을 준비하고 계신분들에게 '풀브라이트'라는 장학금에 대해 소개해드리려고 포스팅을 하게 되었습니다 ^^! 유학 준비기간동안 워낙 이것저것 준비하느라 놓치시는 분들이 많을 것 같아서 이렇게 좋은 장학금에 대해서! 널리알리고자 포스팅을 하게 되었어요. 제가 생각한 풀브라이트 장학금의 첫번째 장점은 정량적 평가 기준이 매우 낮다는 것이에요! TOEFL 88이상, GRE 는 미니멈은 없고 유효한 성적만 있으면 돼요! (단, 영문학, 언어학 전공자는 TOEFL 100점 이상) 학점은 만점 기준 별로 3.0/4.0, 3.225/4.3, 3.375/4.5이상이면 지원이 가능합니다! 다른 국가 장학금들이 학점 4점대의 고스펙 지원자들을 선호하는 것을 고려해보았을 때 굉장히 좋은 조건이에요. 사전 장학금의..

티스토리툴바