跳转至

python

  • 分类于 python
  • 需要 2 分钟阅读时间

pymongo中的并发问题

在写一个系统时不得不考虑高并发时数据库的写入准确性问题，拿mongodb来说，比如要插入一条数据，如果存在则更新，如果不存在则插入新数据，如果在多线程会有哪些问题呢？

  • 分类于 python
  • 需要 3 分钟阅读时间

python中自定义loggingHandler

最近在python中使用日志处理的时候有一个新的需求，将日志写入到数据库中，一开始比较懒，写一个循环，定时的去读本地日志文件，将里面的内容直接写到数据库中，很显然这种处理很low，后来又在外面写了一个服务，但本质上还是用循环读的方式将读出来的内容发个post请求然后入库，这两种方式本质上是一样的，而且第二种在发post请求的时候还遇到了内容过多导致服务解析失败的问题。

  • 分类于 python
  • 需要 3 分钟阅读时间

神经网络中常见激活函数的python表达

在神经网络最后的输出层，通常会使用激活函数将最后一层神经元得到的数据再进行计算，最终得到一个输出的结果，这里称该函数为激活函数，比对输出表达式为，当最后一层输出元得到的数据大于0，则输出1，小于0则输出0，这种称为阶跃函数，常见的激活函数有阶跃函数，sigmoid，ReLU，tanh函数

  • 分类于 python
  • 需要 4 分钟阅读时间

numpy中对于矩阵的基本操作

最近着手于机器学习，但是苦于已将数学知识还给了老师多年，看着满屏的数学公式尤为头疼。 还好看了一篇关于卷积神经网络的数学基础以后，发现慢慢的可以看懂一些东西了，这里也记录一下自己的所学，千里之行始于足下，先从最基础的开学学习。

  • 分类于 python
  • 需要 1 分钟阅读时间

python中使用虚拟环境

在进行python的开发过程中一直倡导使用虚拟环境来进行项目隔离，这样不会因为python的包不同而导致各种问题，但是以往为了图省事简单，安装包就一直使用pip install 进行全局安装，这样做其实很不好，最近也开始尝试使用虚拟环境来对项目进行隔离开发。

  • 分类于 python
  • 需要 1 分钟阅读时间

在python中使用注解函数

最近在看aiohttp的源码，发现一种没有见过的定义函数写法def __enter__(self) -> None ,函数后面还跟着一个->，这让一个以前受过C指针伤害过的人来说整个人都不好了，于是查了一下这个带箭头的用法，这里的->的指针没有半毛钱关系。

  • 分类于 python
  • 需要 9 分钟阅读时间

python中多线程与多进程中的数据共享问题

之前在写多线程与多进程的时候，因为一般情况下都是各自完成各自的任务，各个子线程或者各个子进程之前并没有太多的联系，如果需要通信的话我会使用队列或者数据库来完成，但是最近我在写一些多线程与多进程的代码时，发现如果它们需要用到共享变量的话，需要有一些注意的地方

  • 分类于 python
  • 需要 7 分钟阅读时间

使用aiomysql异步操作mysql

之前一直在使用mongo与redis，最近在项目中开始使用mysql数据库，由于现在的项目是全程异步的操作，所以在在网上查了下关于在python中异步的操作mysql，找来找去最后发现aiomysql的是实现最好的，现在简单介绍一下它的使用。

  • 分类于 python
  • 需要 4 分钟阅读时间

解决mysql服务器在无操作超时主动断开连接的问题

我们在使用mysql服务的时候，正常情况下，mysql的设置的timeout是8个小时(28800秒)，也就是说，如果一个连接8个小时都没有操作，那么mysql会主动的断开连接，当这个连接再次尝试查询的时候就会报个"MySQL server has gone away"的误，但是有时候，由于mysql服务器那边做了一些设置，很多情况下会缩短这个连接timeout时长以保证更多的连接可用。有时候设置得比较变态，很短，30秒，这样就需要客户端这边做一些操作来保证不要让mysql主动来断开。