Python通过loop.run_in_executor执行同步代码 同步变为异步

目录

• 背景
• 怎么做？
• Asyncer
• awaitable
• aioify

背景

在我们平时的FastApi工作中，经常会用到一些异步的操作，为了保持一致，我们一般会编写配套的异步代码。

但如果我们提供了类似jmeter BeanShell的可执行代码的功能给用户，那用户还能给你编写异步代码吗？那显然是不可能的事情。

还有一种情况，当我们引入第三方包，比如一些oss的库，里面天然是同步方法，有内置的requests请求，你想不阻塞整个fastapi服务，也是需要将他们异步化的。

怎么做？

这块先给我点时间去调研，我暂时还没有完全玩明白里面的内容。初步的设想是通过loop.run_in_executor执行同步代码，让他超乎三界之外，不让其阻塞事件循环。

由于还不是很确定，所以会在后面理解清楚了补充进来。那就没有现成的方案吗？答案是有的，想做这件事情的，不只是我哦！

为此我调研了几个库，它们都能很好地解决这个问题。下面我们来一一介绍。

Asyncer

先上地址: asyncer.tiangolo.com/

这是大名鼎鼎的FastApi的作者，休闲娱乐的时候写的一款工具，它不仅可以把同步代码异步化，还可以把异步代码同步化，我们来看看介绍。

简单看下，上面的同步方法（内部用了sleep）在asyncify的包裹下，变成了awaitable的方法，即异步化。不过由于我没有真实使用，看在作者的面上，给个推荐。

AnyIO.run，因为这个库基于AnyIO而编写的（又是个奇怪的知识点），我想应该和asyncio.run差不多疗效。

总之，既然作者的介绍是符合我们预期的，我们就推荐一下。

pip install asyncer

awaitable

这个库挺不错的，是一个乌拉老哥写的。里面充斥着我看不懂的俄语注释，但我试过功能比较完善，也很容易上手，不信咱们看看:

• 安装

pip install awaits

• 使用

和上面的区别在于，他只是把同步方法装饰起来，就可以当异步方法用了，是不是非常神奇！

我测试过，疗效不错。因为它也具备异步方法的其他特性，比如取消。具体可以参考下我对下面那个库介绍的图片示例代码。

aioify

这个是我接触过的第一个同步转异步的库，为此我还为它提过issue。图里面是我测试一个同步方法异步化以后，能不能做取消类似的操作。这个是我用来判断它是否阻塞的一个因素。

最开始我是发现，如果遇到time.sleep这样的同步方法，这个方法似乎没有起到作用，也就是依旧会阻塞，后面这个库的作者给我答复，大意是重新搞了一下，我可以按照预期去做了。不过我现在还没有尝试过，试着阅读过源码，无疾而终了。

pip install aioify

最后，我仔细阅读了awaitable的源码，比较简短，如果有时间我会仔细讲一下。更重点的是，我要去调研下开篇说的部分。大家也可以勇敢点尝试下文中介绍的几个库。