60 行代码,10000 个虎牙小姐姐视频来袭!
共 4901字,需浏览 10分钟
·
2021-05-30 10:40
文 | 某某白米饭
来源:Python 技术「ID: pythonall」
小编前几天已经写了用 Python 下载 B 站的小姐姐跳舞视频,今天用 Python 下载虎牙的小姐姐视频,大伙一起来看看吧。
获取播放列表
打开虎牙上星秀/颜值的视频地址 https://v.huya.com/g/all?set_id=31&order=hot&page=1
,我们可以看到看到一共 500 页,每页有 20 条视频,总共 10000 条小姐姐的视频。
通过观察 F12 控制台可知每个视频播放页超链接都在 li 标签下,获取到 li 标签就可以取到视频地址了。然后将视频名字和地址用 |
存入 txt 文本或者 list 变量中。
import requests
from bs4 import BeautifulSoup
import time
import random
import json
import re
url_file_name = 'D:\\url.txt'
def get_list():
for p in range(500):
html = requests.get('https://v.huya.com/g/all?set_id=31&order=hot&page={}'.format(p+1));
soup = BeautifulSoup(html.text, 'html.parser')
ul = soup.find('ul', class_='vhy-video-list w215 clearfix')
lis = ul.find_all('li')
for li in lis:
a = li.find('a', class_ = 'video-wrap statpid');
href = a.get('href')
title = a.get('title')
# 去掉文件名中的特殊字符
title = validate_title(title)
with open(url_file_name,'a',encoding = 'utf-8') as f:
f.write(title + '|' + href + '\n')
print("已经抓取了 {} 页".format(p + 1))
time.sleep(random.randint(1, 9)/10)
def validate_title(title):
rstr = r"[\/\\\:\*\?\"\<\>\|]"
new_title = re.sub(rstr, "", title)
return new_title
示例结果:
获取视频地址
下载视频只得到视频的播放页地址是远远不够的,还需要得到每个视频的真实播放地址。通过如下图观察 Network 面板可以发现视频播放地址在 https://v-api-player-ssl.huya.com/?r=vhuyaplay%2Fvideo&vid=510233425&format=mp4%2Cm3u8
的返回值中。
json 格式化后结果:
![](https://filescdn.proginn.com/8356d4872d2b4852c5e7737542ac4708/bc921447374593a16ef4f32b988762cd.webp)
def get_video_url():
urls_file = open(url_file_name, 'r', encoding='utf-8')
url_lines = urls_file.readlines()
urls_file.close()
video_urls = []
for line in url_lines:
# 视频名字 | 地址
infos = line.split('|')
video_id = infos[1].replace('.html\n', '').replace('/play/', '');
data = requests.get('https://v-api-player-ssl.huya.com/?r=vhuyaplay%2Fvideo&vid={}&format=mp4%2Cm3u8'.format(video_id))
data = json.loads(data.text)
url = data['result']['items'][0]['transcode']['urls'][0]
video_urls.append({'title': infos[0], 'url':url})
return video_urls
最后调用写文件函数保存视频。
def save_video(video_urls):
for item in video_urls:
title = item.get('title')
print('正在下载:{}'.format(title))
html = requests.get(item.get('url'))
data = html.content
with open('D:\\{}.mp4'.format(title), 'wb') as f:
f.write(data)
print('全部下载完成了')
示例结果:
总结
这个 Python 脚本比较简单,比 B 站的视频下载简单多了,有兴趣的小伙伴可以试着练练手。喜欢二次元小姐姐的小伙伴可以将星秀频道 url 换成二次元频道 url。
PS:公号内回复「Python」即可进入Python 新手学习交流群,一起 100 天计划!
老规矩,兄弟们还记得么,右下角的 “在看” 点一下,如果感觉文章内容不错的话,记得分享朋友圈让更多的人知道!
![](https://filescdn.proginn.com/07fc11deea8b9e326c1d8dff4ae36572/72b8b7b72b340284978d81de7273c142.webp)
![](https://filescdn.proginn.com/0e2f3fb9e044100f036a676b12838785/c855eb594ac58dbe6e0b137e15b62acc.webp)
【代码获取方式】