python批量下载抖音视频


Posted in Python onJune 17, 2019

本文实例为大家分享了python批量下载抖音视频的具体代码,供大家参考,具体内容如下

知识储备:博主是在Pycharm下进行的
文件夹:dou_ying

python批量下载抖音视频

1、在文件夹doy_ying下新建第一个文件:dou_ying_video_download.py

代码:

# coding=utf-8
"""
@author: jiajiknag
程序功能:批量下载抖音视频
"""
import requests
import bs4
import os
import json
import re
import sys
import time
# 如果一个对象没有实现上下文,我们就不能把它用于with语句。这个时候,可以用closing()来把该对象变为上下文对象。
# closing-将任意对象变为上下文对象,并支持with语句。
from contextlib import closing
# Urllib3是一个功能强大,条理清晰,用于HTTP客户端的Python库
# urllib3.disable_warnings()禁用urllib3警告的方法
requests.packages.urllib3.disable_warnings()
# 创建类Sipder()
class Spider():
 def __init__(self):
  # UA对照表:https://blog.csdn.net/time888/article/details/72822729
  self.headers = {
      # 用户代理:用于浏览器识别的,可以看出自己系统版本,浏览器,浏览器内核等
      'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.146 Safari/537.36'
      }
  # 输出信息-视频信息
  print('[INFO]:Douyin(抖音) App Video downloader...')
  print('[Version]: V1.0')
  print('[Author]: Jiajikang')

 # 创建函数run():外部调用运行
 def run(self):
  # 输入ID地址(爬去某人抖音视频的抖音号)
  user_id = input('Enter the ID:')
  try:
   # 因为抖音号是数字所以使用int()验证是否是数字
   int(user_id)
  # 输入错误时输出except下的语句
  except:
   print('[Error]:ID error...')
   return
  video_names, video_urls, nickname = self._parse_userID(user_id)
  # os.listdir()方法用于返回指定的文件夹包含的文件或文件夹的名字的列表
  if nickname not in os.listdir():
   # os.mkdir() 方法用于以数字权限模式创建目录
   os.mkdir(nickname)
  print('[INFO]:Number of Videos <%s>' % len(video_urls))
  for num in range(len(video_names)):
   # %d是一个占位符,标识一个字符串型的数据, %s也是一个占位符,标识一个字符串型的数据
   print('[INFO]:Parsing <No.%d> <Url:%s>' % (num+1, video_urls[num]))
   temp = video_names[num].replace('\\', '')
   video_name = temp.replace('/', '')
   # 调用函数_downloader()
   self._downloader(video_urls[num], os.path.join(nickname, video_name))
   print('\n')
  print('[INFO]:All Done...')

 # 创建函数_downloader()并含有参数:路径和视频的url-视频下载
 def _downloader(self, video_url, path):
  # 定义size并初始化为0
  size = 0
  # 定义一个变量download_url:利用函数_get_download_url()来获取视频url
  download_url = self._get_download_url(video_url)
  with closing(requests.get(download_url, headers=self.headers, stream=True, verify=False)) as response:
   chunk_size = 1024
   content_size = int(response.headers['content-length'])
   if response.status_code == 200:
    sys.stdout.write('[File Size]: %0.2f MB\n' % (content_size/chunk_size/1024))
    # 使用写入的方式打开,如果该文件已存在则将其覆盖。如果该文件不存在,创建新文件。
    with open(path, 'wb') as f:
     # 遍历获取数据
     for data in response.iter_content(chunk_size=chunk_size):
      # 向文件中写入指定的字符串data
      f.write(data)
      # 计算写入字符串的长度
      size += len(data)
      # flush() 方法是用来刷新缓冲区的,即将缓冲区中的数据立刻写入文件,同时清空缓冲区,不需要是被动的等待输出缓冲区写入。
      f.flush()
      sys.stdout.write('[Progress]: %0.2f%%' % float(size/content_size*100) + '\r')
      sys.stdout.flush()


 # 创建函数_get_download_url()并含有形参video_url:获得视频下载地址
 def _get_download_url(self, video_url):
  # 获取视频的下载地址
  # Requests 可以为 HTTPS 请求验证 SSL 证书,就像 web 浏览器一样。要想检查某个主机的 SSL 证书,你可以使用 verify 参数:
  # 定义变量res用来接收视频地址,verify 仅应用于主机证书
  res = requests.get(url=video_url, verify=False)
  # 将res.text 文件利用'lxml'解析成xml文件,了解lxml--https://blog.csdn.net/tanzuozhev/article/details/50442243
  soup = bs4.BeautifulSoup(res.text, 'lxml')
  # 使用find_all来获取网页中JavaScript中的script的变量;[-1]去除最后一个字符
  script = soup.find_all('script')[-1]
  # 定义变量date=正则表达式\[(.+)]\,[0]可以使其返回一个字典
  video_url_js = re.findall('var data = \[(.+)\];', str(script))[0]
  # 使用loads()下载
  html = json.loads(video_url_js)
  # 返回,使用[0]是返回一个字典
  return html['video']['play_addr']['url_list'][0]


 # 定义函数_parse_userID()且形参user_id;通过user_id获取该用户发布的所有视频
 def _parse_userID(self, user_id):
  # 获取所有视频
  video_names = []
  video_urls = []
  unique_id = ''
  # 当获取的id不是用户的id时:
  while unique_id != user_id:
   # 获取url-下载
   search_url = 'https://api.amemv.com/aweme/v1/discover/search/?keyword={}&count=10&type=1&aid=1128'.format(user_id)
   res = requests.get(url=search_url, verify=False)
   res_dic = json.loads(res.text)
   uid = res_dic['user_list'][0]['user_info']['uid']
   aweme_count = res_dic['user_list'][0]['user_info']['aweme_count']
   nickname = res_dic['user_list'][0]['user_info']['nickname']
   unique_id = res_dic['user_list'][0]['user_info']['unique_id']
  # 用户的url
  user_url = 'https://www.douyin.com/aweme/v1/aweme/post/?user_id={}&max_cursor=0&count={}'.format(uid, aweme_count)
  # 请求获取用户的url
  res = requests.get(url=user_url, verify=False)
  # 下载后去的url转换的文本
  res_dic = json.loads(res.text)
  i = 1
  # 遍历下载的文本
  for each in res_dic['aweme_list']:
   share_desc = each['share_info']['share_desc']
   if '抖音-原创音乐短视频社区' == share_desc:
    video_names.append(str(i) + '.mp4')
    i += 1
   else:
    video_names.append(share_desc + '.mp4')
   video_urls.append(each['share_info']['share_url'])
  return video_names, video_urls, nickname

""" 
if __name__ == '__main__':
 # 创建对象
 sp = Spider()
 sp.run()
"""

温馨提示: 有些库是要自己去下载,一般使用命令在提示符下输入:pip install 自己要下载的库,如下图是博主下载的。

python批量下载抖音视频

2、在文件夹doy_ying下新建第二个文件:run.py

代码:

# coding=utf-8
"""
@author: jiajiknag
程序功能: 测试抖音视频的下载
"""
from dou_ying_video_download import Spider
if __name__ == '__main__':
 # 创建类Spider()对象
 sp = Spider()
 # 运行开始下载
 sp.run()

3、结果

这是我在抖音中随便找的一个发布抖音视频比较少的来测试一下,以及我还下载了自己的抖音

python批量下载抖音视频python批量下载抖音视频

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持三水点靠木。

Python 相关文章推荐
python构建自定义回调函数详解
Jun 20 Python
Python实现JSON反序列化类对象的示例
Jan 31 Python
python中abs&amp;map&amp;reduce简介
Feb 20 Python
安装python时MySQLdb报错的问题描述及解决方法
Mar 20 Python
Python中正则表达式的用法总结
Feb 22 Python
python实现接口并发测试脚本
Jun 25 Python
HTML的form表单和django的form表单
Jul 25 Python
python实现宿舍管理系统
Nov 22 Python
pytorch中tensor.expand()和tensor.expand_as()函数详解
Dec 27 Python
python标准库os库的函数介绍
Feb 12 Python
如何用Python 实现全连接神经网络(Multi-layer Perceptron)
Oct 15 Python
Python机器学习算法之决策树算法的实现与优缺点
May 13 Python
Python基础学习之类与实例基本用法与注意事项详解
Jun 17 #Python
python文本数据处理学习笔记详解
Jun 17 #Python
python3+PyQt5 实现Rich文本的行编辑方法
Jun 17 #Python
Appium+python自动化之连接模拟器并启动淘宝APP(超详解)
Jun 17 #Python
python3+PyQt5 数据库编程--增删改实例
Jun 17 #Python
python3+PyQt5 创建多线程网络应用-TCP客户端和TCP服务器实例
Jun 17 #Python
python 应用之Pycharm 新建模板默认添加编码格式-作者-时间等信息【推荐】
Jun 17 #Python
You might like
8个必备的PHP功能实例代码
2013/10/27 PHP
php初始化对象和析构函数的简单实例
2014/03/11 PHP
用js代码改变单选框选中状态的简单实例
2013/12/18 Javascript
nodejs教程之异步I/O
2014/11/21 NodeJs
深入理解JavaScript编程中的原型概念
2015/06/25 Javascript
jquery实现页面虚拟键盘特效
2015/08/08 Javascript
使用Chart.js图表库制作漂亮的响应式表单
2015/10/28 Javascript
JavaScript数值千分位格式化的两种简单实现方法
2016/08/01 Javascript
JavaScript探测CSS动画是否已经完成的方法
2016/08/30 Javascript
javascript动画之磁性吸附效果篇
2016/12/09 Javascript
jQuery的ajax中使用FormData实现页面无刷新上传功能
2017/01/16 Javascript
js canvas实现QQ拨打电话特效
2017/05/10 Javascript
jQuery+ajax读取json数据并按照价格排序示例
2018/03/28 jQuery
vue-cli与webpack处理静态资源的方法及webpack打包的坑
2018/05/15 Javascript
解决vue项目nginx部署到非根目录下刷新空白的问题
2018/09/27 Javascript
layui实现数据表格table分页功能(ajax异步)
2019/07/27 Javascript
JS window对象简单操作完整示例
2020/01/14 Javascript
jQuery三组基本动画与自定义动画操作实例总结
2020/05/09 jQuery
pyqt5自定义信号实例解析
2018/01/31 Python
Python解决八皇后问题示例
2018/04/22 Python
详解Python3中的迭代器和生成器及其区别
2018/10/09 Python
jenkins配置python脚本定时任务过程图解
2019/10/29 Python
python3中的logging记录日志实现过程及封装成类的操作
2020/05/12 Python
分享29个基于Bootstrap的HTML5响应式网页设计模板
2015/11/19 HTML / CSS
动态密码技术
2012/10/18 面试题
软件测试工程师面试问题精选
2016/10/28 面试题
单位创先争优活动方案
2014/01/26 职场文书
司机职责范本
2014/03/08 职场文书
幼儿教师暑期培训方案
2014/08/27 职场文书
综治工作汇报材料
2014/10/27 职场文书
2015年新学期寄语
2015/02/26 职场文书
2015暑期爱心支教策划书
2015/07/14 职场文书
2016年国庆节67周年活动总结
2016/04/01 职场文书
详解解Django 多对多表关系的三种创建方式
2021/08/23 Python
前端使用svg图片改色实现示例
2022/07/23 HTML / CSS
box-shadow单边阴影的实现
2023/05/21 HTML / CSS