跳转至

python

  • 分类于 python
  • 需要 3 分钟阅读时间

python中Mixin混入类的用法

Mixin 在 python 中也不是什么新鲜的东西，只是一种编程思想的体现，利用其可以多继承的语言特点，从而达到一种灵活的编程方式。

最近在看sanic的源码，发现有很多Mixin的类，大概长成这个样子

  • 分类于 python, Go
  • 需要 3 分钟阅读时间

gin 、sanic、flask 读取 redis 并发对比

最近想要看下go与python的性能到底有多少差异，不比不知道，差距还是蛮大的，为了方便实验，两个后台服务都访问相同的redis服务器, 简单的使用get 命令,获取一个值, 再通过json 格式返回

  • 分类于 python
  • 需要 2 分钟阅读时间

redis中报too many connections错误的解决

最近在对系统中某个接口进行压力测试的时候发现，有个redis的查询接口大量的报错，于是查看后台日志，发现是aioredis 报了Too many connections, 起初我认为是由于在进行压力测试，由于这个接口需要访问redis数据，同一时间来了大量的请求，所以会对redis服务器造成大量的请求，redis服务器抗不住返回了Too many connections 错误，但是经过排查不是这样的。

  • 分类于 python
  • 需要 2 分钟阅读时间

使用ORM与原始SQL的性能对比

最近使用号称 python web 框架中性能最为强悍的框架 sanic , 搭建了项目的基础环境与项目框架,但是在是否使用ORM 的时候犯了选择困难综合症了,对于一个追求性能的框架,在使用了 ORM 以后必定会对性能有些影响,但是影响究竟有多大呢? ORM 的存在也是有它的理由的, 那么它的优点能否消除它在性能上的损耗呢?

  • 分类于 python
  • 需要 4 分钟阅读时间

使用selenium 操作 electron 应用

近期的自动化测试项目中有个关于测试内部IM通信软件的需求，在了解到各个客户端的相应技术栈实现以后，在mac中的应用使用的是electron 技术，我们也对相应的技术进行调研，此文记录一下在关于electron应用的自动化测试。

  • 分类于 python
  • 需要 4 分钟阅读时间

Tornado整合socketio(一)

最近在做的项目中，需要将手机中的视频流或者音频流发送给服务端，再由服务端转发给浏览器端，起初我使用redis作为中转，将数据发到redis中，再由redis的发布订阅功能，整体架构如下

image-20210519225715299

主要是利用了redis的pub/sub功能，这种方案也没有什么问题，但是整体的性能瓶颈受redis的影响。

最近接触到socketio，发现这种需求可以使用它来实现，但是网上查找了一些资料，在python的使用中，主要还是flask-socketio与原生的应用上，由于目前项目使用Tornado来构建，所以用了几天时间将socketio与Tornado的融合使用。

本教程会分几篇来介绍，主要以下几个章节

  1. socketio介绍与脚手架的搭建
  2. 定义消息处理事件
  3. 命名空间的使用
  4. 消息的发布与响应
  5. room的使用
  6. 前端vue中使用socketio与后端通信
  • 分类于 python
  • 需要 18 分钟阅读时间

aiomysql与sqlalchemy的使用

之前一直使用tornado做项目，数据库一直使用mongo与redis居多，凭借其优异的异步特性工作的也很稳定高效，最近的项目需要使用 mysql ，由于之前在使用mongo与redis时所使用的moto与aioredis来异步的执行数据库操作，所以在网上查询了异步操作mysql的库， 本文记录一下异步操作中所遇到的问题与相应的解决方案。

  • 分类于 python
  • 需要 6 分钟阅读时间

python 中日志异步发送到远程服务器

在python中使用日志最常用的方式就是在控制台和文件中输出日志了,logging模块也很好的提供的相应的类,使用起来也非常方便,但是有时我们可能会有一些需求,如还需要将日志发送到远端,或者直接写入数据库,这种需求该如何实现呢?

  • 分类于 python
  • 需要 2 分钟阅读时间

python 中的functools.partial用法

经常会看到有些代码中使用 functools.partial 来包装一个函数，之前没有太了解它的用法，只是按照别人的代码来写，今天仔细看了一下它的用法，基本的用法还是很简单的。

  • 分类于 python
  • 需要 2 分钟阅读时间

flask中跳转的同时设置cookie

最近在使用flask的时候，有一个比较麻烦的事情，在跳转网页的时候需要设置cookie，使用单独设置cookie与单独跳转都比较简单，

跳转网页

1
2
3
4
5
from flask import  redirect

@app.route("/redirect")
def redirecttest():
    return redirect("/test")

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
from flask import Flask,make_response

app = Flask(__name__)

@app.route("/set_cookie")
def set_cookie():
    #先创建响应对象
    resp = make_response("set cookie test")
    # 设置cookie  cookie名 cookie值 默认临时cookie浏览器关闭即失效
    # 通过max_age控制cookie有效期, 单位:秒
    resp.set_cookie("display","yangyanxing",max_age=3600) 
    return resp

可以看到，设置cookie的response 最后是通过return 回来的，但是上面的网页跳转则是通过redirect() 函数返回的，所以这两个没法同时的使用。

查看redirect() 的源码

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
def redirect(location, code=302, Response=None):    
    if Response is None:
        from .wrappers import Response

    display_location = escape(location)
    if isinstance(location, text_type):
        # Safe conversion is necessary here as we might redirect
        # to a broken URI scheme (for instance itms-services).
        from .urls import iri_to_uri

        location = iri_to_uri(location, safe_conversion=True)
    response = Response(
        '<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 3.2 Final//EN">\n'
        "<title>Redirecting...</title>\n"
        "<h1>Redirecting...</h1>\n"
        "<p>You should be redirected automatically to target URL: "
        '<a href="%s">%s</a>.  If not click the link.'
        % (escape(location), display_location),
        code,
        mimetype="text/html",
    )
    response.headers["Location"] = location
    return response

可以看到，其实redirect函数也是通过构造一个response最后再将这个resonse return 出去，所以我们是否可以构造一个类似于redirect函数中的response对象，然后设置好status code是不是就可以了呢？ 

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
from flask import Flask,make_response,escape
app = Flask(__name__)

@app.route("/test")
def test():
    response = make_response(
        '<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 3.2 Final//EN">\n'
        "<title>Redirecting...</title>\n"
        "<h1>Redirecting...</h1>\n"
        "<p>You should be redirected automatically to target URL: "
        '<a href="%s">%s</a>.  If not click the link.'
        % (escape("https://www.baidu.com"),
           escape("https://www.baidu.com")), 302)
    response.set_cookie('display',"yangyanxing")
    return respose

运行上面的代码，发现停留在/test 页面，显示上面的make_response的文字，并没有跳转，但是cookie中已经有display的cookie了，说明设置cookie成功了，跳转也成功了一半，只是它没有真正的跳转，还需要在网页上点击一下。

redirect函数中是通过 response.headers["Location"] = location 来设置的，在make_response 的返回响应对象中是通过response.location = 'xxxx' 来设置的

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
from flask import Flask,make_response,escape
app = Flask(__name__)

@app.route("/test")
def test():
    response = make_response(
        '<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 3.2 Final//EN">\n'
        "<title>Redirecting...</title>\n"
        "<h1>Redirecting...</h1>\n"
        "<p>You should be redirected automatically to target URL: "
        '<a href="%s">%s</a>.  If not click the link.'
        % (escape("https://www.baidu.com"),
           escape("https://www.baidu.com")), 302)
    response.set_cookie('display',"yangyanxing")
    `response.location = escape("https://www.baidu.com")
    return respose

这时就可以正常的跳转了