Python 警惕伪装成著名软件包的恶意模块

2019年12月25日 Python实用宝典留下评论

本周早些时候，两个包含恶意代码的Python第三方模块被从官方软件库PyPI中删除。这两个恶意软件包通过使用非常相似的名字来迷惑安装者。

它们伪装成dateutil和jellyfish软件包（前者用于处理日期时间，后者用于字符串近似计算等），伪装命名为python-dateutil和jeIlyfish，如果安装包的时候并不熟悉这些模块，而且也没有看官方文档，那就非常有可能中招。

安装后， python-dateutil 和 jeIlyfish 与原始的软件包行为完全相同，但是它们会偷偷地将个人数据上传到服务器。但是正常使用的人恐怕无法发现恶意模块的这些行为。

Python库通常分为两种，一种是Python运行时自带的标准库，还有一种则是托管在PyPI上的第三方程序包，而上传第三方程序包到PyPI时，大部分程序包都不会被审核到。这就导致你进行pip安装的时候，如果不小心输错了单词，就有可能安装到恶意模块。

这引出了一个现在许多开软社区都非常头痛的问题：如何让人们能将自己的代码贡献到通用存储库（如PyPI），且不被不怀好意的人利用。

据说，Python软件基金会已经制定了保护PyPI免受滥用的计划，但要全面执行计划需要一些时间。此外，Python软件基金会中负责封装的工作组已经获得了Facebook Research的拨款，用于开发自动检测恶意上传第三方程序包的功能。

尽管如此，这些预防措施离上线还有很远，我们在选择使用第三方模块的时候一定要注意你的命令pip install的是不是那个真的模块，而不是一个冒牌货，这样才能将风险降至最低。

我们的文章到此就结束啦，如果你希望我们今天的Python 教程，请持续关注我们，如果对你有帮助，麻烦在下面点一个赞/在看哦有任何问题都可以在下方留言区留言，我们都会耐心解答的！

Python实用宝典 (pythondict.com)
不只是一个宝典
欢迎关注公众号：Python实用宝典

算法

Python 30秒就能学会的漂亮短代码(译2)

2019年12月23日 Python实用宝典留下评论

上上期，我们给大家带来了30秒就能学会漂亮短代码的第一部分，这些代码其实非常有价值，蕴含了许多python编程思维，应用领域非常广泛，而且学起来非常简单。今天给大家带来的是第二期内容。

1.”二维列表”

解读：根据给定的长和宽，以及初始值，返回一个二维列表。

def initialize_2d_list(w, h, val=None):
    return [[val for x in range(w)] for y in range(h)]

例：

>>> initialize_2d_list(2,2)
[[None, None], [None, None]]

>>> initialize_2d_list(2,2,0)
[[0, 0], [0, 0]]

2.函数切割数组

解读：使用一个函数应用到一个数组的每个元素上，使得这个数组被切割成两个部分。如果说，函数应用到元素上返回的值为True，则该元素被切割到第一部分，否则分为第二部分。

def bifurcate_by(lst, fn):
    return [
      [x for x in lst if fn(x)],
      [x for x in lst if not fn(x)]
    ]

例：

>>> bifurcate_by(['beep', 'boop', 'foo', 'bar'], lambda x: x[0] == 'b')    
[['beep', 'boop', 'bar'], ['foo']]

3.”交集点”

解读： 两个数组在被一个函数应用后，从第一个数组中提取出共有的元素的原元素组成一个新的数组。

def intersection_by(a, b, fn):
    _b = set(map(fn, b))
    return [item for item in a if fn(item) in _b]

例：

>>> from math import floor
>>> intersection_by([2.1, 1.2], [2.3, 3.4],floor)
[2.1]

4.最大值下标

解读：返回数组中最大值的下标。

def max_element_index(arr):
    return arr.index(max(arr))

例：

>>> max_element_index([5, 8, 9, 7, 10, 3, 0])
4

5.数组对称差

解读：找出两个数组中不同的元素，并合成为一个新的数组。

def symmetric_difference(a, b):
    _a, _b = set(a), set(b)
    return [item for item in a if item not in _b] + [item for item in b if item not in _a]

例：

>>> symmetric_difference([1, 2, 3], [1, 2, 4])
[3, 4]

原文： https://github.com/30-seconds/30-seconds-of-python

Python实用宝典 (pythondict.com)
不只是一个宝典
欢迎关注公众号：Python实用宝典

工具、生活智能化、解决方案

超方便的 Python 唤醒窗口自动截图脚本

2019年12月23日 Python实用宝典留下评论

利用Python自带的win32api和win32con、win32gui等模块，我们能执行许多windows下的自动化操作。比如两个窗口的自动点击操作，从软件中的窗口复制文本到txt中，甚至是截图操作。

截图的操作用途最为广泛，你可以用它配合定时工具，定时检测某个程序的运行情况；甚至可以根据截图做一些辅助性的决策，比如玩类似于《连连看》的游戏时，对相同类型的方块进行标记，辅助你玩游戏。

下面就讲讲如何使用 win32api 实现自动唤醒并截图的操作。

1.准备

开始之前，你要确保Python和pip已经成功安装在电脑上，如果没有，请访问这篇文章：超详细Python安装指南进行安装。

(可选1) 如果你用Python的目的是数据分析，可以直接安装Anaconda：Python数据分析与挖掘好帮手—Anaconda，它内置了Python和pip.

(可选2) 此外，推荐大家用VSCode编辑器来编写小型Python项目：Python 编程的最好搭档—VSCode 详细指南

Windows环境下打开Cmd(开始—运行—CMD)，苹果系统环境下请打开Terminal(command+空格输入Terminal)，输入命令安装依赖：

pip install pypiwin32
pip install pillow

1.获取窗口左上角及右下角坐标

通过 win32gui 的 FindWindow 函数，我们能轻易地找到任何进程的窗口：

import win32api, win32con, win32gui
def get_window_pos(name):
    name = name
    handle = win32gui.FindWindow(0, name)
    # 获取窗口句柄
    if handle == 0:
        return None
    else:
        return win32gui.GetWindowRect(handle)
x1, y1, x2, y2 = get_window_pos('暴雪战网')
print(x1,y1,x2,y2)

结果：

F:\push\20190929>python 1.py
(349, 83, 1549, 1013)

其中窗口信息(x1, y1, x2, y2)，(x1, y1)是窗口左上角的坐标，(x2, y2)是窗口右下角的坐标。我们可以利用这个信息配合PIL进行截图。但是在这之前，我们还要解决两个问题：

该窗口并不在当前的界面上，被其他的软件覆盖到底层中，这时候需要高亮窗口。
该窗口被最小化怎么办？

2.win32gui 高亮窗口

为了使得被叠在底层的窗口能放到最上层显示，我们需要拿到窗口的handle，对其执行高亮操作，其实很简单，我们刚刚获得坐标信息的时候已经得到handle了，只需要做一下简单的更改即可。

import win32api, win32con, win32gui
def get_window_pos(name):
    name = name
    handle = win32gui.FindWindow(0, name)
    # 获取窗口句柄
    if handle == 0:
        return None
    else:
        # 返回坐标值和handle
        return win32gui.GetWindowRect(handle), handle
(x1, y1, x2, y2), handle = get_window_pos('暴雪战网')
text = win32gui.SetForegroundWindow(handle)

这样就能将被覆盖到底层的窗口放到最上层，如下图所示。

3. 还原最小化窗口

还有一种特殊情况就是窗口被缩小了，这时候我们就需要还原最小化窗口，其实也非常简单，只要利用win32gui和win32con向该窗口发送一个信息即可。

import win32api, win32con, win32gui
def get_window_pos(name):
    name = name
    handle = win32gui.FindWindow(0, name)
    # 获取窗口句柄
    if handle == 0:
        return None
    else:
        # 返回坐标值和handle
        return win32gui.GetWindowRect(handle), handle
(x1, y1, x2, y2), handle = get_window_pos('暴雪战网')
win32gui.SendMessage(handle, win32con.WM_SYSCOMMAND, win32con.SC_RESTORE, 0)
# 发送还原最小化窗口的信息
win32gui.SetForegroundWindow(handle)
# 设为高亮

效果如图所示：

4.截图

有了PIL模块和窗口的坐标后，我们想截图可非常简单。PIL 模块安装：

pip install pillow

安装完就可以试一下我们的完整代码了，如下：

import win32api, win32con, win32gui

def get_window_pos(name):
    name = name
    handle = win32gui.FindWindow(0, name)
    # 获取窗口句柄
    if handle == 0:
        return None
    else:
        # 返回坐标值和handle
        return win32gui.GetWindowRect(handle), handle
(x1, y1, x2, y2), handle = get_window_pos('暴雪战网')
win32gui.SendMessage(handle, win32con.WM_SYSCOMMAND, win32con.SC_RESTORE, 0)
# 发送还原最小化窗口的信息
win32gui.SetForegroundWindow(handle)
# 设为高亮
from PIL import Image, ImageGrab
img_ready = ImageGrab.grab((x1, y1, x2, y2))
# 截图
img_ready.show()
# 展示

效果如下：

这个功能可好用了，比如说你需要监控一个窗口的运行状况，不可能时时刻刻都去观察它，你可以使用while循环不断调用这个窗口截图脚本，先截图进行保存。

你甚至可以配合定时任务做截图，见我们上篇文章：Schedule—简单实用的 Python 周期任务调度工具

截图后的图表信息还能够用于分析、辅助决策。举个游戏的例子：当你玩《连连看》的时候，可以截图检测每个方块是否相同，把相同的方块标记出来，提高你的连连看游戏效率。

我们的文章到此就结束啦，如果你喜欢今天的Python 实战教程，请持续关注Python实用宝典。原创不易，希望你能在下面点个赞和在看支持我继续创作，谢谢！

Python实用宝典 (pythondict.com)
不只是一个宝典
欢迎关注公众号：Python实用宝典

Python 爬虫、Python 数据分析

Python 一个超快的公共情报搜集爬虫

2019年12月19日 Python实用宝典留下评论

Photon是一个由s0md3v开源的情报搜集爬虫，其主要功能有：

1.爬取链接(内链、外链)。
2.爬取带参数的链接，如(pythondict.com/test?id=2)。
3.文件(pdf, png, xml)。
4.密钥(在前端代码中不小心被释放出来的)。
5.js文件和Endpoint(spring中比较重要的监视器)
6.匹配自定义正则表达式的字符串。
7.子域名和DNS相关数据。

你可以用它来干很多事，比如爬图片、找漏洞、找子域名、爬数据等等。而且提取出来的数据格式非常整洁：

不仅如此，它甚至支持json格式，仅需要在输入命令的时候加上json参数：

python photon.py -u "http://example.com" --export=json

为什么能用来做情报搜集呢？耐心往后看哦。

1.下载安装

你可以上photon的github下载完整项目：
https://github.com/s0md3v/Photon

或者关注下方Python实用宝典公众号在后台回复photon获得国内网盘下载地址。下载后解压到你想要使用的地方。如果你还没有安装Python，建议阅读这篇文章：超详细Python安装指南，进行Python的安装。

安装完Python后，打开CMD(windows)/Terminal(macOS)，下面简称这两种为终端，进入你刚解压的文件夹，然后输入以下命令安装Photon的依赖：

pip install -r requirements.txt

如图所示：

2.简单使用

注意，使用的时候要在Photon文件夹下。比如我们随便提取一个网站的URL试一下，在终端输入以下命令：

python photon.py -u https://bk.tencent.com/

结果如下：

它会在当前目录下产生一个你测试的域名的文件夹，比如在我这里是 bk.tencent.com：

嘻嘻，让我们看看里面有什么东西，有没有程序员留下的小彩蛋，打开external.txt，这是该网站的外链的存放位置。可以看到，这里不仅仅是只有网站页面，连CDN文件地址都会放在这里，所以external可能是个藏宝库哦。

还能一下找出该网站上链接的全部开源项目：

3.扩展

这个项目的价值，不仅在于能够快速拉取你想要得到的数据，还在于能够构建一个牛逼轰轰的情报系统~~（如果你技术够强的话）~~。因为它是能不断延伸下去的，比如从外链出发，你能找到很多和这个网站相关的讯息：

相比于搜索引擎搜索的结果，实际上这些信息更符合情报要求。因为不是所有的信息都能在搜索引擎搜索得到，而通过这个Photon，你可以顺藤摸瓜找到那些隐藏在互联网世界的它们。试想一下，如果你搜集了很多这样的网站…然后用正则表达式搭建一个属于你自己的搜索引擎，这样的感觉是不是很棒？

Python实用宝典 (pythondict.com)
不只是一个宝典
欢迎关注公众号：Python实用宝典

算法

Python 30秒就能学会的漂亮短代码(译1)

2019年12月17日 Python实用宝典留下评论

1.”夹数”

解读：如果 num 落在一段数字范围内，则返回num，否则返回离这个范围最近的边界：

def clamp_number(num,a,b):   
    return max(min(num, max(a,b)),min(a,b))

例：

>> clamp_number(2,3,10)
3
>> clamp_number(7,3,10)
7
>> clamp_number(124,3,10)
10

2.键值映射

解读：使用对象的键重新创建对象，并运行函数为每个对象的键创建值。
使用dict.keys()遍历对象的键，通过函数生成一个新的值。

def map_values(obj, fn):
   ret = {}
   for key in obj.keys():
       ret[key] = fn(obj[key])
   return ret

例：

>>> users = {
...   'fred': { 'user': 'fred', 'age': 40 },
...   'pebbles': { 'user': 'pebbles', 'age': 1 }
... }
>>> map_values(users, lambda u : u['age'])
{'fred': 40, 'pebbles': 1} 
>>> map_values(users, lambda u : u['age']+1)
{'fred': 41, 'pebbles': 2}

3.大小写转换

解读： 将英文单词的首字母大写改为小写。
upper_rest参数：设定是否将除首字母外的其他字母大小写转换。

def decapitalize(s, upper_rest=False):
    return s[:1].lower() + (s[1:].upper() if upper_rest else s[1:])

例：

>>> decapitalize('FooBar')
'fooBar'
>>> decapitalize('FooBar', True)
'fOOBAR'

4.同键求和

解读：对列表中的各个字典里相同键值的对象求和。

def sum_by(lst, fn):
    return sum(map(fn,lst))

例：

>>> sum_by([{ 'n': 4 }, { 'n': 2 }, { 'n': 8 }], lambda v : v['n'])
14

5.一行代码求出现次数

解读：求出列表中某个数出现的次数和。

def count_occurrences(lst, val):
    return len([x for x in lst if x == val and type(x) == type(val)])

例：

>>> count_occurrences([1, 1, 2, 1, 2, 3], 1)
3

原文： https://github.com/30-seconds/30-seconds-of-python

Python实用宝典 (pythondict.com)
不只是一个宝典
欢迎关注公众号：Python实用宝典

网站设计

Python Django快速开发音乐高潮提取网(3)

2019年12月15日 Python实用宝典留下评论

上一次我们成功地完成了简单版的高潮音乐提取网站的开发，但是离上线还远远不够，今天我们将会把它完善到能上线的程度。全站已经上传到github上：

https://github.com/Ckend/yinyue30

你也可以在公众号后台回复： 音乐高潮提取网 下载。

1. 完善前端开发

在网上有这么多现成免费模板的情况下，单页面前端设计是非常简单的。我这里选用了 tooplate 的一套免费音乐模板，加上部分我需要的更改，并去掉了一些我所不需要的部分。

其实改动不大，不过大家要注意，在使用模板的时候，静态文件要保存到根目录下的static文件夹，然后将所有静态文件都放入里面：

除此之外，还需要再settings.py中设定以下参数：

STATIC_URL = '/static/'

STATICFILES_DIRS = (
    os.path.join(BASE_DIR, 'static'),
)

在前端调用静态文件的时候，注意要这样调用：

<link rel="stylesheet" href="{% static 'css/bootstrap.min.css' %}">

前端部分就不细讲了，能讲的东西不多，套套模板改点东西而已，大家可以找自己喜欢的模板来做，效果如下：

2.完善后端错误处理

这是我们在前一篇文章中提到的第二个改进点，那就是出现错误的时候没有提示，非常不友好，而且处理的时候也缺少提示正在处理中，很容易让人以为没有提交成功。

现在就让我们来解决这个缺点，首先要修改response，当用户提交的文件格式不正确，或文件大小超过我们的限制时，在渲染页面的时候要返回一个错误信息：

return render(request, 'index.html', {'form': form, 'wrong': "请上传正确的文件：wav/mp3格式, 大小不超过10M"})

前端接收信息时做一个判断，检查是否有wrong变量的存在，如果有则输出信息：

{%  if wrong %}
    <div class="alert alert-danger" style="text-align: center;" role="alert">{{ wrong }}</div>
{% endif %}

效果如下：

另外一点，在处理提取音乐高潮部分的时候，用户会等待很长的时间，我们需要提示用户后端正在处理音乐，这个处理是纯前端代码就可以实现的，js部分：

   <script type="text/javascript">
    $(document).ready(function(){
      $('#file-upload').click(function(){
        $('#hidden').html('<div class="alert alert-info" role="alert">处理中, 完成后会自动下载，等待的时候要不...搜索关注一下 Python实用宝典 公众号</div>');
        $('#hidden').css('padding', '15px');
        $('#t_form').css('display', 'none');
      })
    });
  </script>

在你想要显示这条信息的地方编写如下代码：

<div id="hidden"></div>

即可实现该提示功能，效果如下：

3.网站上线

这一部分要注意，Django部署的时候需要uWSGI和Nginx一起使用，为什么不只用wsgi？因为它的性能不足以撑起大访问量，而且也不够安全。下面的教程需要你有一定的服务器经验，如果你不需要上线网站，那么下面的部分你并不需要阅读。

3.1 安装uwsgi

Ubuntu中输入以下命令安装uwsgi，centos将pip改成yum即可：

sudo pip install uwsgi –upgrade

安装时如果出现没有C编译器的情况请安装gcc编译器。然后输入以下命令运行项目：

uwsgi –http :8001 –chdir /path/to/project –module yinyue30.wsgi

–chdir是项目路径，yinyue30.wsgi是指项目里的wsgi文件。此外，可在命令前面加个nohup，让项目在后台运行：

nohup uwsgi –http :8001 –chdir /home/www/yinyue30 –module yinyue30.wsgi &

如果你希望以后能够自动化管理该进程，最好是安装supervisor，它能在进程挂掉的时候自动重拉进程，安装方法见：

https://code.ziqiangxuetang.com/django/django-nginx-deploy.html

3.2 配置Nginx

打开/etc/nginx/sites-available/default, 追加以下服务配置：

# mysite_nginx.conf

upstream django {
    server 127.0.0.1:8001; # for a web port socket (we'll use this first)
}

server {
    listen      8000;
    server_name example.com; # substitute your machine's IP address or FQDN
    charset     utf-8;

    client_max_body_size 75M;   # adjust to taste

    location /media  {
        alias /path/to/your/mysite/media;  # your Django project's media files - amend as required
    }

    location /static {
        alias /path/to/your/mysite/static; # your Django project's static files - amend as required
    }

    location / {
        uwsgi_pass  django;
        include     /path/to/your/mysite/uwsgi_params; # the uwsgi_params file you installed
    }
}

请根据需要修改成自己的配置。完成之后，输入service nginx reload，网站即可正常运行。

音乐相关教程：

Python 批量下载网易云音乐歌单

Python 制作音乐高潮副歌提取器

Python Django快速开发音乐高潮提取网(1)

Python Django快速开发音乐高潮提取网(2)

Python Django快速开发音乐高潮提取网(3)

Python 超方便超快速剪辑音乐

Python 提取音乐频谱并可视化

Python实用宝典 (pythondict.com)
不只是一个宝典
欢迎关注公众号：Python实用宝典

网站设计

Python Django快速开发音乐高潮提取网(2)

2019年12月13日 Python实用宝典留下评论

上次第一部分我们用Django搭建了一个简易的文件上传网站，今天让我们来完善这个网站，增加一些细节部分的调整，并加入音乐高潮提取的API.

如果你还没有阅读过第一部分，建议先从第一部分开始阅读哦：Python Django快速开发音乐高潮提取网(1)。

本文完整源代码，请在后台回复：音乐高潮提取网 获取

1.文件校验

首先，为了安全起见，同时也为了减小服务器的压力，我们必须确认用户上传的文件是正确的。因此需要在views.py接收用户请求时，对用户上传的文件判断格式和大小。

在上篇文章中，我们使用了 forms 类生成表单，后端使用 request.FILES[‘docfile’] 获得了文件，这个对象具备什么属性呢？能不能让我们获得文件的大小和格式呢？

在一番搜索后，我终于找到了它的属性，这是一个叫做UploadedFile的类文件对象，具备以下属性：

详细文档：https://docs.djangoproject.com/en/3.0/ref/files/uploads/

通过size属性能获得bytes单位的文件大小，通过content_type可以获得文件属性，太好了，接下来就可以编写我们的校验代码：

这里我们限定了文件大小为10M （从bytes到MB的计算方法：1024*1024*10 ），上传文件的格式限定为wav和mp3. 将这个函数用于校验，如图所示：

好了，现在你再试一下上传图片，会发现什么反应都没有，上传mp3格式的音乐会返回上传成功的提示。

2.提取音乐的高潮部分

这一部分其实很简单，不过如果你还没看过音乐的高潮部分提取的文章，建议阅读：Python 音乐高潮提取。

首先，引入我们所需要的包（安装方法在Python Django快速开发音乐高潮提取网(1)）：

from pychorus import find_and_output_chorus

然后要拿到音乐文件的路径，才能过进行音乐提取，还记得我们在上节的教程中，其实是用了一个模型来上传文件的吗：

现在这个模型派上用场了。我们仅需要在文件对象保存之后，通过“对象.file.path ” 的属性就能获得文件的绝对路径。

ilePath = newdoc.file.path

不过，我们还需要设定音乐高潮部分提取完成后的输出位置，我的设定方法是在同目录下保存一个后缀为_high的文件：

不过要注意的是，由于该模块用到了一个名为SoundFile的包，这个包在输出文件的时候仅支持以下格式，为了方便处理，我们默认输出格式为wav.

3.返回音乐高潮部分给用户

接下来要返回提取完成的音乐高潮部分的文件，我们希望将文件作为附件给用户下载，让用户自行选择软件播放音乐，而不是在网站上直接收听音乐。

Django能非常容易地实现这一点：

将文件以二进制的形式打开，然后作为HttpResponse返回，设定 content_type 和 Content_Disposition 即可。

好了，再次运行项目：python manage.py runserver 上传一个音乐试一下：

https://pythondict-1252734158.file.myqcloud.com/home/www/pythondict/wp-content/uploads/2019/12/2019121315094465.wav

这样，我们就能成功地完成用户上传——提取音乐高潮——返回用户下载的逻辑了。不过还有一些细节需要改进：

1.前端太丑了，能不能改进一下？
2.用户上传文件错误时没有提醒。
3.能不能多加点功能，比如其他用户的音乐分享？

下一次教程，我们就来完整地完成这个网站并上线！关注下方公众号，后台回复 音乐高潮提取网 获得本文全部源代码！

音乐相关教程：

Python 批量下载网易云音乐歌单

Python 制作音乐高潮副歌提取器

Python Django快速开发音乐高潮提取网(1)

Python Django快速开发音乐高潮提取网(2)

Python Django快速开发音乐高潮提取网(3)

Python 超方便超快速剪辑音乐

Python 提取音乐频谱并可视化

Python实用宝典 (pythondict.com)
不只是一个宝典
欢迎关注公众号：Python实用宝典

网站设计

Python Django快速开发音乐高潮提取网(1)

2019年12月10日 Python实用宝典留下评论

还记得我们上次做的一个高潮提取器吗：Python制作音乐高潮提取器。今天我们来把这个高潮提取器做成一个网站，让许多不懂技术的人也可以很方便地提取歌曲里的高潮/副歌部分。

其实这是一个非常简单的单页面网站，不需要数据库、不需要celery、不需要各种高深的后端技术。不过，如果适当地利用一些Python的Web开发框架，我们能更快地完成这个网站的开发，也能够顺便带大家入门一下Web开发框架。

因此我们将用Django来完成这个网站。不过由于我不想让文章篇幅变得冗长，我们将分为两部分来讲解，第一部分是建造一个简单的支持文件上传的网站，第二部分将基于第一部分完善文件上传功能，建造一个音乐高潮提取网。

1.准备

在开始之前，你需要先安装好Python，如果还没有安装Python，请看这篇文章：超详细安装Python指南。

打开CMD(windows)/Terminal(macos)，下文统一称这两者为终端，输入安装Django的命令：

pip install Django

看到终端结果显示类似如下则说明安装成功。

安装高潮提取器需要用到的项目：

pip install pychorus

2.新建Django项目

在你希望放置项目文件的目录下打开终端，输入以下命令：

django-admin startproject yinyue30

如果遇到未找到命令 Django-admin 这样的错误，则说明你需要配置Django的环境变量，详细可以看这篇文章的windows Django安装：

https://www.runoob.com/django/django-install.html

这个命令会新建一个Django项目，目录结构如下：

3.Django应用开发

新建了Django项目后，我们就可以开始应用开发了。使用终端在生成的yinyue30文件夹中，输入以下命令新建“extractor(提取器)”应用：

python manage.py startapp extractor

到这里，应用初始化就算正式完成了。让我们看一下现在的文件结构：

看起来有点复杂，但是不要紧，我们只需要管其中几个文件即可。在我们开始正式编写代码前，我想先解释一下Django的设计模式。

3.1 Django设计模式简析（你可以跳过这一部分）

传统的网站设计模型是MVC模型，即：

M 代表模型（Model）：负责对象和数据库的关系(ORM)。
V 代表视图 (View)：负责如何把页面展示给用户(html)。
C 代表控制器（Controller）：负责转发请求，处理请求等。

实质上Django也是类似的模型，不过有些许不同。Django更像是一个MVT模型，其中Controller的功能，被分担到了View和url转发器中。

在今天的教程中，我们重点关注的对象是View和Url转发器。

3.3 模型设计—编写models.py

尽管我们这个单页面应用可以不用到模型，但是使用模型能够帮助我们简化不少流程。而且代码非常简单：

文件将会被上传到“media/当前日期/ ” 的文件夹下，而且是和manage.py同级。如图所示：

之所以用Django自带的文件模型，不仅仅是因为这点方便，它还支持文件同名处理，当两个用户上传了相同文件名的文件时，第二个文件会被加一串md5作为区别。

除此之外，它还能限定文件上传的大小，具备用API作为代理访问基础文件等诸多方便的功能，如果你想了解更多的细节，可以阅读官方文档： https://docs.djangoproject.com/zh-hans/3.0/ref/models/fields/

3.4 视图设计—编写views.py

在views.py我们主要做以下几个事情：

1.渲染前端页面，允许用户提交文件。
2.获得用户请求时发送的文件。
3.对用户请求的文件进行音乐高潮提取。
4.提取完后返回音乐的高潮部分给用户。

其中，后端要校验文件大小（前端校验的话容易被绕过），然后提取音乐高潮的时候前端应该有“处理中 ” 的提示，等待提取完成返回结果后，前端直接显示下载按钮。

我们先来制作允许用户提交文件这一部分。

3.4.1 编写forms表单

Django有个我特别喜欢的特性：通过Form类能生成HTML代码，如果是做简单的页面开发，不需要用到前后端分离的情况下，这点实在非常方便：

在extractor文件夹下新建一个forms.py的文件，写入以下代码：

接下来，在在extractor文件夹下新建templates文件夹，并在里面新建一个index.html 编写前端代码，将表单引入进来：

可以注意到，我们直接将表单以 {{ form.docfile }} 的形式引入进来生成前端表单，与此同时， {{ form.docfile.label_tag }} 可以直接将我们在类中定义的属性引入进前端。还有一点需要注意的是 {% csrf_token %}，这是在Django表单中必带的，它会在请求中注入一段token，以防止跨站攻击。

3.4.2 编写views主逻辑

接下来，我们就来编写views的主逻辑，让它接受文件上传的POST请求并渲染前端页面：

它主要做这么几件事：

一是判断这个请求是否为POST请求，若是POST请求则进入文件上传保存的逻辑，判断用户上传的表单是否符合要求，若符合要求则保存文档，并返回HTTP回应：“上传成功！”。

二、如果不是POST请求，则说明是普通的访问，那么将生成一个空表单，渲染这个表单页面到前端，供用户提交文档。

3.5 配置路由

准备就绪了，接下来只要让我们把路由接上、再做一点简单的配置就能成功启动应用：

在extractor下新建一个urls.py文件，它将存放extractor即我们的提取器应用的所有路由（尽管我们就一个页面），配置如下：

它将能将直接访问域名的请求转发到views中的index函数，也就是我们刚在views.py中编写的主逻辑。不过这个是应用的路由，我们还需要修改Django项目的主路由：

将yinyue30文件夹下的 urls.py 修改如下：

这里需要在Django中引入include函数，然后在urlpatterns中，将所有直接指向域名的请求转发给我们刚刚编写的extractor的路由(extractor/urls.py)，这样就大功告成了！

3.6 配置和迁移

我们刚刚编写了一个简单的extractor应用，由于Django对APP是有着即插即用的特点，因此我们需要将这个应用“插入”到Django中。

插入的方法也很简单，打开yinyue30文件夹下的settings.py, 在 INSTALLED_APPS 数组中加入 ‘extractor.apps.ExtractorConfig’ 。

最后一步，Django中有许多自带功能需要用到数据库和表，还有我们刚刚新建的文件模型也需要用到数据库，因此得新建我们所需要的东西，所幸，Django本身自带了迁移功能，而且默认使用的是sqlite，这方便了我们这个简单应用的开发，因为我们甚至不需要去配置mysql，直接迁移。

在根目录（与manage.py同级）运行以下命令即可迁移完成：
python manage.py makemigrations
python manage.py migrate

第一句是生成迁移表，其实就是一些sql语句组成的文件。第二句是执行sql操作，即完成迁移功能。

4. 运行项目

接下来我们就能让项目跑起来了，在根目录（与manage.py同级）运行以下命令运行程序：

python manage.py runserver

运行后访问http://127.0.0.1:8000效果如下：

尝试上传, 上传成功：

顺便检查下是否真的传入，发现有文件在media下，放心了：

那么我们第一部分的任务就算顺利完成了！下一部分，我们将正式将音乐高潮提取器的部分加上去。敬请期待！关注下方公众号，后台回复 音乐高潮提取网 获得项目第一部分源代码！

音乐相关教程：

Python 批量下载网易云音乐歌单

Python 制作音乐高潮副歌提取器

Python Django快速开发音乐高潮提取网(1)

Python Django快速开发音乐高潮提取网(2)

Python Django快速开发音乐高潮提取网(3)

Python 超方便超快速剪辑音乐

Python 提取音乐频谱并可视化

Python实用宝典 (pythondict.com)
不只是一个宝典
欢迎关注公众号：Python实用宝典

解决方案

Python 使用VS Code进行调试

2019年12月6日 Python实用宝典留下评论

VS Code是一款非常好用的编辑器，现在我基本上所有的开发任务都在VS Code上完成。它的代码调试工具其实也非常强大，但是许多人都不知道该怎么用，今天就来学习怎么用它调试Python代码吧。

1.准备

既然是用VS Code调试Python代码，那当然你得先安装好Python啦，如果你还没有安装，可以看这篇文章：超详细Python安装指南

除此之外，确保你已经安装了最新版本的VS Code: https://code.visualstudio.com/ 。安装完成后，记得还要安装Python扩展，打开VS Code，如下图所示安装Python扩展：

2.配置调试环境

打开VS Code的DEBUG设置，先点击左边的虫子，再点击上面的齿轮：

点击后提示选择一种语言，选择Python。然后要指定相应的文件类型，可以看到，它支持许多种Python的调试方法，有Django, Flask, 甚至是 Pyramid. 由于下面我们要讲的只是单文件的代码调试，因此选择Python File.

然后会自动在当前文件夹的根目录/.vscode中生成一个launch.json的配置文件，打开后你会发现长这个样子：

下面是这些字段的说明：

1.name: 当前DEBUG配置的名称。

2.Type: 指什么语言。

3.request是最重要的参数，它能选择两种类型，一个是launch模式，一个是attach模式：

launch模式：由VS Code来启动一个独立的具有debug功能的程序。

attach模式：监听一个已启动的程序（其必须已经开启debug模式）。

大多数情况下，调试Python都是用launch模式。少数情况下，你无法通过新建独立程序来调试（如要与浏览器相结合的程序，launch模式会导致你大部分浏览器插件失效），这时候就需要attach模式。

4.program: 文件的绝对路径，一般不需要改动。

5.console: 终端的类型， integratedTerminal 指使用vscode终端。

当然，我们还可以设置其他参数，比如 stopOnEntry: true , 可以在进入程序的时候就暂停执行：

3.编写一段调试用的代码

我们先随便编写一串代码，来演示怎么查看变量的值：

import random
a = random.randint(0,100)
b = random.randint(0,100)
print(a*b)

打开debug面板，点击绿色的播放按钮，就会在代码块上方出现一个控制条，点击单步调试，就能够一行行地执行代码：

第二行执行完毕后，左边便会出现a变量相应的值：

这样，通过调试，你能清楚知道a*b的结果中，a和b分别对应的值。

但是，在工作生活中，我们自己写的模块、代码很少有需要调试的时候。只有当我们使用别的人框架或者别人的开源模块时，才时常会遇到问题，这时候调试工具才能发挥出最大的功效，比如下面这个例子：

import sys
f = open('20191206/myfile.txt')
s = f.readline()
print(s)

像这种编码问题，用调试工具是非常容易解决的：

先打一个断点：

进行调试，运行到报错的这一句话时，左边有f对象的详细信息，点击后可以看到encoding参数是cp936，而我们文件里的字符串本身是utf-8的，因此，我们在打开文件的时候要设置打开编码。

修改代码如下即可正常运行：

import sys
f = open('20191206/myfile.txt', encoding='utf-8')
s = f.readline()
print(s)

调试工具的强大还不止如此，VS Code还有监视和调用堆栈的查看功能，虽然整体上并不如pycharm，但是对于我们中小型项目的调试其实是完全足够了。

VsCode系列文章：

Python 使用VS Code进行调试

VSCode 设置中文

Python 编程的最好搭档—VSCode 详细指南

Python实用宝典 (pythondict.com)
不只是一个宝典
欢迎关注公众号：Python实用宝典

生活智能化

Python 将网易云歌单迁移到QQ音乐

2019年12月4日 Python实用宝典一条评论

最近，网易云音乐越来越多的歌曲变灰了，许多我以前喜欢听的音乐都消失在云端，非常可惜。最近我还是想听回以前的歌曲，于是只能使用有那些歌曲版权的QQ音乐，麻烦的是，QQ音乐没有我在网易云音乐的歌单，两个软件之间互相切歌也是在太麻烦了。

上网摸索了一段时间，终于找到一个基于Python的开源项目 Denon/syncPlaylist 这是一个使用爬虫技术搭建的两端同步软件，它可以从网易同步歌单到QQ音乐，也可以从QQ音乐同步歌单到网易云音乐，非常方便。

想要实现这样的同步功能，一般都需要提供账号密码，普通软件让人恨不放心，因为你不知道它会不会把你的账号密码上传到软件作者自己的服务器，从而窃取你的账号。但使用这个项目你就不需要有这个困扰，因为它是开源项目，源代码全透明公开，不存在上传账号密码的操作。下面我们直接基于项目的Python源代码进行迁移操作。

1.下载源代码

你可以在项目的原网站点击 Clone or download—Download zip 下载完整源代码。

如果网络不允许，没关系，关注文章最下方的Python实用宝典公众号，后台回复 网易QQ音乐迁移 即可获得完整源代码。

2.安全检查

为了让大家放心使用作者的源代码，我们要对他的代码进行简单的分析，确保没有任何的请求发送账号密码到任何除网易和QQ之外的服务器中。

检索源代码中所有的url，看看有没有非qq或者网易的域名：

发现了一个陌生域名，不过没关系，这个是作者放着用来下载phantomjs的链接，phantomjs是一个用于爬虫的无头浏览器，没有安全威胁。

这是作者用于QQ登录的逻辑（真的是一行注释都不写啊我X），看了XPATH，和现在的QQ官网依然对应正确，登录逻辑没有太大的问题。

再仔细瞧瞧其他的py文件，如果看到了任何奇怪的东西都要注意。我扫了一遍，非常安全，如果你不信的话可以自己多看看几遍。

3.迁移歌曲

接下来，我们基于这个项目的源代码演示如何将网易云音乐的歌曲迁移到QQ音乐上。注意，你得确保你的电脑已经安装了Python的运行环境，如果没有的话推荐阅读这篇文章（由于该项目用的是Python2，推荐安装anaconda，能够在Python2和Python3之间创建环境自由切换）：
https://blog.csdn.net/ITLearnHall/article/details/81708148