一: 运行代码需要的安装的模块:

import aiohttp
import requests
from lxml import etree
import re
import pyperclip
import asyncio
import aiofiles
import os
import os.path

二：运行的代码需要安装的外置工具:

     (1):cmd命令音频视频合成工具:ffmpeg

          下载网址： Download FFmpeghttp://www.ffmpeg.org/download.html    (2):解压到某个目录，并添加到环境变量中

     示例:

          解压到D盘根目录:

               D:/ffmpeg

          则需要添加环境变量:D:/ffmpeg/bin

三：需要在代码所在目录创建的文件夹:

    (1): bilibili视频

    (2):在"bilibi视频"这个文件夹下载创建下面两个文件夹:

            up视频

            电视剧视频

四：代码

import aiohttp
import requests
from lxml import etree
import re
import pyperclip
import asyncio
import aiofiles
import os
import os.path


def conbine(title_name, Class):
    title_new = title_name + 'c'
    if Class == 3:
        os.system(f'ffmpeg -i {title_new}.mp4 -i {title_new}.mp3 -c copy bilibili视频/电视剧视频/{title_name}.mp4')
    elif Class == 1 or 2:
        os.system(f'ffmpeg -i {title_new}.mp4 -i {title_new}.mp3 -c copy bilibili视频/up视频/{title_name}.mp4')


def delete(title_name):
    title_new = title_name + 'c'
    os.remove(title_new + '.mp4')
    os.remove(title_new + '.mp3')


async def download(i, url, title_name, headers2):
    title_new = title_name + 'c'
    async with aiohttp.ClientSession(headers=headers2)  as  session:
        async with session.get(url) as resp:
            data = await resp.content.read()
            if i == 0:
                filename = f'./{title_new}.mp4'
            elif i == 1:
                filename = f'./{title_new}.mp3'
            async with aiofiles.open(filename, mode='wb') as f:
                await f.write(data)  


async def asyncmake(video_url, audio_url, title_name, headers2):
    urls = [video_url, audio_url]
    tasks = []
    for i in range(0, 2):
        d = asyncio.create_task(download(i, urls[i], title_name, headers2))
        tasks.append(d)
    await asyncio.wait(tasks)


if __name__ == "__main__":
    url = str(pyperclip.paste())

    headers = {
        "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.114 Safari/537.36",
        "cookie": "_uuid=1A1B677B-6311-4E06-9BDA-D06081D8740275362infoc; buvid3=6E8BD183-ADF3-4D9B-8714-C157F73620CC34773infoc; sid=ab95r294; fingerprint=8f4236095f9ce06ad4c94e22f8be2c3a; buvid_fp=6E8BD183-ADF3-4D9B-8714-C157F73620CC34773infoc; buvid_fp_plain=1F0F89A8-01C5-4175-8F28-7E203E65FE7334767infoc; DedeUserID=306269459; DedeUserID__ckMd5=a7388eef56c50e08; SESSDATA=2833875d%2C1638683753%2C8d0ed*61; bili_jct=c6f37eedd1ca8195a83acf9076d81243; CURRENT_FNVAL=80; blackside_state=1; rpdid=|(k|)Yk|)|~l0J'uYkJuJu~Yu; CURRENT_QUALITY=80; LIVE_BUVID=AUTO8916234196752032; PVID=3; bp_video_offset_306269459=537685465433229330",
        "Referer": "https://www.bilibili.com/video/BV1jV411n7qa?p=4"
    }
    response = requests.get(url, headers=headers)
    data = response.text
    html_obj = etree.HTML(data)
    print("'1':表示bilibili up主视频\n'2':表示up主选集视频\n'3':表示电视剧类型")
    Class = int(input("请输入下载类型:"))
    if Class == 1:
        title_name = html_obj.xpath('//*[@id="viewbox_report"]/h1/span/text()')[0]
        url_str = html_obj.xpath('/html/head/script[5]/text()')[0]
        video_url = re.findall(r'video":\[{"id":\d+,"baseUrl":"(.*?)"', url_str)[0]

        audio_url = re.findall(r'audio":\[{"id":\d+,"baseUrl":"(.*?)"', url_str)[0]
        print(title_name + " 正在下载中!!!")
    elif Class == 2:
        title_name1 = html_obj.xpath('//*[@id="viewbox_report"]/h1/span/text()')[0]
        title_name2 = url.split('?')[1]
        title_name = title_name1 + title_name2
        url_str = html_obj.xpath('/html/head/script[5]/text()')[0]
        video_url = re.findall(r'video":\[{"id":\d+,"baseUrl":"(.*?)"', url_str)[0]
        audio_url = re.findall(r'audio":\[{"id":\d+,"baseUrl":"(.*?)"', url_str)[0]
        print(title_name + " 正在下载中!!!")
    elif Class == 3:
        title_name = html_obj.xpath("/html/head/title/text()")[0]
        title_name = title_name.split('_')[0]
        print(title_name + " 正在下载中!!!")
        url_str = html_obj.xpath('/html/body/script[3]/text()')[0]

        video_url = \
            re.findall(r'video":\[{"start_with_sap":\d+,"bandwidth":\d+,"sar":"\d+:\d+","backupUrl":\["(.*?)"',
                       url_str)[0]
        audio_url = \
            re.findall(r'audio":\[{"start_with_sap":\d+,"bandwidth":\d+,"sar":"","backupUrl":\["(.*?)"', url_str)[0]
    # 发送请求获取响应

    headers2 = {
        "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.114 Safari/537.36",
        "Referer": url
    }

    loop = asyncio.get_event_loop()
    loop.run_until_complete(asyncmake(video_url, audio_url, title_name, headers2))
    conbine(title_name, Class)
    delete(title_name)
    print("下载完成!!!")

五：使用方法步骤:

     (1):打开bilibili想要下载的视频,复制视频连接：

          如下图红框内链接:

     (2):运行代码:

        输入下载类型:

         1:表示bilibili up主视频

         2:表示up主选集视频，类似于各种教程选集视频

         3:表示电视剧，动漫视频，类似名侦探柯南，下载哪集复制哪集的链接 (vip视频暂时下载不                来,有更厉害的大佬能下载的话欢迎留言).

  六:运行代码,视频下载成功:

 七:查看视频:

        视频下载到了创建的up视频文件夹里了:

使用视频播放器进行播放就可以观看了!!!

八:观看视频: 

                               有大佬建议欢迎留言哦!!!

首先我们需要下载ffmepg，并且配置环境变量

• 把下载下来的文件中的bin文件夹的路径添加到Path中
  

• 然后打开Anaconda Prompt，使用命令conda install ffmpeg安装ffmpeg
  

• 使用 ffmpeg -version查看下载到的ffmpeg
  

• 在python代码中，我们使用subprocess开启一个cmd线程，然后执行ffmpeg将音频和视频合成在一起的指令

  COMMAND = f'ffmpeg -i {video_name}.mp4 -i {video_name}.mp3 -c:v copy -c:a aac -strict experimental {video_name}out.mp4 '
  subprocess.Popen(COMMAND, shell=True)
  
  

• 然而，有时候却输出不了合成后的视频，经过研究之后发现，原来是B站视频中有的视频标题最后会使用空格符号，使得cmd命令无法正确执行，因此，我在这里使用正则表达式将爬取到的视频标题当中的所有标点符号替换为空，此时就可以正确的输出合并后的视频

  # 使用正则表达式将标题当中的所有标点符号替换为空
   title = re.sub('\W+', '', title).replace("_", '')
  # 使用正则表达式将标题当中的所有标点符号替换为空，防止执行ffmpeg合并视频和音频时输出视频失败
   video_name = re.sub('\W+', '', video_name).replace("_", '')
  

• 爬取B站视频和音频并将视频和音频合并的源代码如下

  	import requests
  import re
  import json
  import pprint   # 格式化输出
  import subprocess
  import os
  
  # path = './videos'
  #
  # if not os.path.exists(path):
  #     os.mkdir(path)
  def get_response(html_url):
  headers = {
      'referer': 'https://www.bilibili.com/', # 防止反爬
      'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/92.0.4515.131 Safari/537.36 Edg/92.0.902.73'
  }
  response = requests.get(url=html_url, headers=headers)
  return response
  
  
  def get_video_info(html_url):
      response = get_response(html_url)
      title = re.findall(r'<h1 title="(.*?)" class="video-title">', response.text)[0]
      html_data = re.findall(r'<script>window.__playinfo__=(.*?)</script>', response.text)[0]
      # 正则匹配式匹配出来的数据是列表
      # 把字符串转为json数据
      json_data = json.loads(html_data)
      # pprint.pprint(json_data)
      # 数据解析
      audio_url = json_data['data']['dash']['audio'][0]['baseUrl']
      video_url = json_data['data']['dash']['video'][0]['baseUrl']
      video_info = [title, audio_url, video_url]
      return video_info
  
  
  def save(title, audio_url, video_url):
      # 保存数据
      # 使用正则表达式将标题当中的所有标点符号替换为空
      title = re.sub('\W+', '', title).replace("_", '')
      audio_content = get_response(audio_url).content
      video_content = get_response(video_url).content
      with open(title + '.mp3', mode='wb') as fp:
          fp.write(audio_content)
      with open(title + '.mp4', mode='wb') as fp:
          fp.write(video_content)
      print('视频内容保存完毕')
  
  def merge_data(video_name):
      '''数据的合并'''
      # 使用正则表达式将标题当中的所有标点符号替换为空，防止执行ffmpeg合并视频和音频时输出视频失败
      video_name = re.sub('\W+', '', video_name).replace("_", '')
      print('视频合成开始：', video_name)
      COMMAND = f'ffmpeg -i {video_name}.mp4 -i {video_name}.mp3 -c:v copy -c:a aac -strict experimental {video_name}out.mp4 '
      subprocess.Popen(COMMAND, shell=True)
      print('视频合成结束：', video_name)
  
  
  url = 'https://www.bilibili.com/video/BV1y541157e4'
  video_info = get_video_info(url)
  save(video_info[0], video_info[1], video_info[2])
  merge_data(video_info[0])
  

前言

本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,如有问题请及时联系我们以作处理。

B站是国内知名的视频弹幕网站,有最及时的动漫新番,ACG氛围,最有创意的Up主。站点中的视频数据分成了视频画面和音频数据。

今天带大家下载以及合并B站的视频。

Python 数据分析入门案例讲解

https://www.bilibili.com/video/BV1LX4y1u7VA

环境介绍：

• python 3.6
• pycharm
• requests
• re
• json
• subprocess

解析网页

目标网页分析

B站的视频和音频是分开的，音频url和视频url都在<script>window.__playinfo__=</script> 里面

提取数据

1、正则匹配提取数据

2、正则提取出数据为一个列表，通过列表取值，取出

3、字符串转json数据

4、通过字典取值的方式，提取视频url以及音频url

爬虫代码

导入工具

import requests
import re  # 正则表达式
import pprint
import json
import subprocess

请求头

headers = {
    'user-agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/84.0.4147.105 Safari/537.36'}

请求数据

def send_request(url):
    response = requests.get(url=url, headers=headers)
    return response

解析视频数据

def get_video_data(html_data):
    """解析视频数据"""

    # 提取视频的标题
    title = re.findall('<span class="tit">(.*?)</span>', html_data)[0]
    # print(title)

    # 提取视频对应的json数据
    json_data = re.findall('<script>window\.__playinfo__=(.*?)</script>', html_data)[0]
    # print(json_data)  # json_data 字符串
    json_data = json.loads(json_data)
    pprint.pprint(json_data)

    # 提取音频的url地址
    audio_url = json_data['data']['dash']['audio'][0]['backupUrl'][0]
    print('解析到的音频地址:', audio_url)

    # 提取视频画面的url地址
    video_url = json_data['data']['dash']['video'][0]['backupUrl'][0]
    print('解析到的视频地址:', video_url)

    video_data = [title, audio_url, video_url]
    return video_data

保存数据

def save_data(file_name, audio_url, video_url):
    # 请求数据
    print('正在请求音频数据')
    audio_data = send_request(audio_url).content
    print('正在请求视频数据')
    video_data = send_request(video_url).content
    with open(file_name + '.mp3', mode='wb') as f:
        f.write(audio_data)
        print('正在保存音频数据')
    with open(file_name + '.mp4', mode='wb') as f:
        f.write(video_data)
        print('正在保存视频数据')

数据的合并

def merge_data(video_name):
    print('视频合成开始:', video_name)
    # ffmpeg -i video.mp4 -i audio.wav -c:v copy -c:a aac -strict experimental output.mp4
    COMMAND = f'ffmpeg -i {video_name}.mp4 -i {video_name}.mp3 -c:v copy -c:a aac -strict experimental output.mp4'
    subprocess.Popen(COMMAND, shell=True)
    print('视频合成结束:', video_name)

效果图

合并视频与音频

这里使用到一个工具<ffmpeg>，FFmpeg是一套可以用来记录、转换数字音频、视频，并能将其转化为流的开源计算机程序。

下载之后解压即可，但是需要你设置环境变量。

1、我的电脑，鼠标右键点击属性

2、选择系统高级设置

3、选择环境变量

4、添加环境变量，复制文件路径，选择新建添加即可