Python爬虫学习：爬取某音小姐姐视频！
前言
文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理。
前几年，创造101着实火了一把，问我pick哪位小姐姐，当然是唱歌老跑调，跳舞数拍子的杨超越了。其实在看创造101之前，就已经在抖音上关注了她，今天就来爬爬她的抖音视频（杨超越的抖音已经没有更新了），你的样子我都有~
本文主要讲解：
抖音视频爬虫
视频下载
PS：虽然很多网友骂她没实力，但别人运气是真的好~
抖音视频爬虫
这里依旧是通过fiddler抓包，现在的抖音有加密算法，之前网上的大部分代码都不能用了，我们先看看有哪些加密字段。
https://aweme.snssdk.com/aweme/v1/aweme/post/?iid=40337863888&device_id=35102252294&os_api=18&app_name=aweme&channel=App%20Store&idfa=11926ED5-C282-4BBC-AF01-0E8C18120647&device_platform=iphone&build_number=23101&vid=177A5A79-D6F6-4A03-9352-57C0681CDDDC&openudid=1ee725d39e05794bcdc14537f8c1f4220c7d6fd5&device_type=iPhone8,1&app_version=2.3.1&version_code=2.3.1&os_version=11.4.1&screen_width=750&aid=1128&ac=WIFI&count=21&max_cursor=0&min_cursor=0&user_id=58554069260&mas=01bf537030d65155897d6fd1d7c97862dbca9722fea8c96d2b68de&as=a1858817de104b87435065&ts=1534297870
这里主要是mas和as参数不知道咋构造，这里因为只是爬一个用户的数据，所以把整个url都copy到txt中，然后请求获取数据。
import requests
import json
f = open('2.txt','w+',encoding='utf-8')
headers = {
'Host': 'api.amemv.com',
'Accept': '*/*',
'Cookie': 'install_id=40337863888; login_flag=d6f29ec905af4bf1101199aa942c466f; odin_tt=a1e12dc3e4b92de77cccf6be1717377188f8aa7582f703c1391c8dc7d4a0df1b166119681af4277bd2cdc8aeb56000a7; sessionid=718df70f4e4964723cd1c8337c367b45; sid_guard=718df70f4e4964723cd1c8337c367b45%7C1534207148%7C5184000%7CSat%2C+13-Oct-2018+00%3A39%3A08+GMT; sid_tt=718df70f4e4964723cd1c8337c367b45; ttreq=1$ad10f98ec66ad6df5b86a7b1a613c77bb674236d; uid_tt=765536856bdc4f0f299b85dbc7338982',
'User-Agent': 'Aweme/2.3.1 (iPhone; iOS 11.4.1; Scale/2.00)',
'Accept-Language': 'zh-Hans-CN;q=1',
'Accept-Encoding': 'br, gzip, deflate',
'Connection': 'keep-alive'
}
def get_info(url):
res = requests.get(url,headers=headers)
json_data = json.loads(res.text)
datas = json_data['aweme_list']
for data in datas:
desc = data['desc']
download_url = data['video']['play_addr']['url_list'][0]
print(desc,download_url)
f.write(desc+','+download_url+'\n')
if __name__ == '__main__':
fp = open('1.txt', 'r')
for line in fp.readlines():
get_info(line.strip())
视频下载
在网上看说，这个链接只有10多分钟的有效期（没有验证），所以爬虫先把视频链接先保存下来，然后再同一下载。
import requests
def download_url(desc,url):
global i
res = requests.get(url)
if len(desc) == 0:
desc = str(i)
f = open('视频/'+desc+'.mp4','wb')
f.write(res.content)
i = i + 1
i = 1
fp = open('2.txt','r', encoding='utf-8')
for line in fp.readlines():
desc = line.split(',')[0]
url = line.split(',')[1].strip('\n')
print(url)
download_url(desc,url)
最后，祝大家也都能心想事成~
搜索下方加老师微信
老师微信号：XTUOL1988【切记备注：学习Python】
领取Python web开发，Python爬虫，Python数据分析，人工智能等精品学习课程。带你从零基础系统性的学好Python！
*声明：本文于网络整理，版权归原作者所有，如来源信息有误或侵犯权益，请联系我们删除或授权
评论