이전글
다음글| 공지 | 멜론 주간 차트를 유튜브 플레이리스트로 변환하였습니다. (플레이리스트 매주 갱신 예정) | | | 자유게시판 |
 |
2022.06.12. 21:33 |
안녕하세요. 오늘은 멜론 차트를 유튜브 뮤직 플레이리스트로 변환하는 방법에 대해서 글을 작성해볼까합니다.
nodejs로 멜론차트를 크롤링했다는 글을 2달전에 올렸었는데, 이제야 유튜브플레이리스트로 가져오는 코드를 다 만들었습니다.
nodejs를 이용한 멜론차트 크롤링
https://cafe.naver.com/mk802/46163
그리고 어제, 멜론 일간차트를 유튜브 플레이리스트로 가져왔다고 결과만 알려드렸었습니다.
(이미지 용량 주의) 22년 6월 10일 인기노래 유튜브 플레이리스트
https://cafe.naver.com/mk802/46563
오늘은 주간 차트를 크롤링해서 플레이리스트로 만들어보았는데, 완벽하게 100곡을 다 담아냈습니다.
유튜브: https://www.youtube.com/playlist?list=PLn_Pl3CGIaYGMJTra9H9p9clHJhSObMKD
유튜브 뮤직: https://music.youtube.com/playlist?list=PLn_Pl3CGIaYGMJTra9H9p9clHJhSObMKD
앞으로 매주 월요일마다 차트를 유튜브 플레이리스트로 변환 후에 텔레그램 채널에서 공지를 해드릴 예정입니다!!
플레이리스트 URL은 계속 고정되어서 갈 예정이지만, 업데이트 시간은 매번 달라질 것 같습니다. 월요일 오후이지 않을까 싶습니다.
멜론 차트를 유튜브에서 듣는게 어떻게 가능한지 알려드리겠습니다.
우선 멜론에서 차트를 크롤링해서 텍스트 파일로 저장을 합니다.
파이썬 프로그래밍 코드를 통해서 텍스트 파일의 각 라인을 읽어서 키워드 뒤에 lyrics를 붙이게 만들었습니다.
예를들어 검색하려는 노래가 아이브 - Love Dive라면
실제로 유튜브에서 검색하는 키워드는 아이브 - Love Dive lyrics 가 됩니다.
이제 검색을 해서 url을 추출하고, 그 url을 유튜브 플레이리스트에 넣으면 됩니다.
유튜브에서 키워드 검색을 해서 상위 검색 결과의 url을 얻어오려면 유튜브 API를 사용해서 검색을 할 것이라고 생각하겠죠.
그런데, 저는 유튜브 검색을 할 때 API를 사용하지 않았습니다.
이유는 유튜브 Data API V3의 할당량 때문입니다.
유튜브에서 제공해주는 API의 일 할당량은 10000입니다. 검색 한 번을 할 때마다 할당량 중에 100이 사라집니다.
즉, 검색을 100번하면 할당량인 10000을 채우기 때문에
플레이리스트에 항목 넣는 것이 불가능한 셈이 됩니다.
(플레이리스트에 넣는 것은 한번당 할당량 50을 소모하므로, 대충 200개의 곡을 플레이리스트에 넣을 수 있습니다. 중간에 오류만 안 난다면..)
검색할 때 API를 사용하지 않고 https://www.youtube.com/results?search_query=키워드 를 http로 요청한 후에 html내에 있는 json을 파싱해서 첫 번째 url을 알아내게 프로그램 코드를 만들었습니다.
youtubeSearcher.py 는 키워드를 넣으면 유튜브에서 검색 후 상위 검색 결과 url 불러와서, 공식 노래가 있는지 확인해서 존재하면 그 url을 반환하는 모듈입니다. 따라서 유명한 노래들은 뮤직비디오나 auto generated by youtube가 붙은 노래 링크가 추출됩니다.
가져온 url을 플레이리스트에 넣는 것은 nodejs언어로 만들어진 playlister 를 사용했습니다.
구글 클라우드 콘솔에서 Youtube Data API V3를 활성화 하시고, oauth 2.0 서비스 계정을 생성한 후에
클라이언트 id와 시크릿을 youtubeRouter.js에 넣고, node app.js로 서버 실행
이후 서버ip:8888 로 접속해서 youtube login 눌러서 플레이리스트를 생성할 유튜브 계정으로 로그인한 후에 앱 승인을 하시면 됩니다. 서버 실행시마다 youtube login을 진행하셔야합니다. 토큰을 받아오기 때문입니다.
한 번 승인 후에는 http://localhost:8888/youtube/login 로 같은 브라우저에서 접속하시면 자동으로 로그인 됩니다.
파이썬 파일은 main.py에서 위에서 4번째 줄까지 적당히 수정해주시면 될 것 같습니다. (플리이름, 플리설명, 노드서버 ip:포트, 파일 경로)
소스는 공개해놓았으니, 참고하시면 될 것 같습니다.
중요공지!
파이썬: pip3 install requests bs4 로 패키지 설치 필수
nodejs 폴더 안에서 npm i 로 패키지 설치 필수
node 서버 로그
파이썬 프로그램 로그
|
|
|||
답글 이전글 |
[펌링크] 순탠바이미 - 누구나 쉽게 만들 수 있는 이동식 DEX 터치 모니터 (USB C to DC 플러그 트리거 참조출연) ^^ [5] | 2022.11.09. | |
 다음글 |
아트릭스 랩독 신품이 아직 있네요 [5] | 2022.06.11. | |
