Python 多线程处理数据的问题

Answer 1

1.建议你把update数据，单独开一个进程处理，去消耗update队列；
2.python处理数据会受大锁控制，所以多线程没啥用，也可以多开几个数据处理进程，去消耗read队列，处理完了放到update队列里面；
3.数据读取可以用一个数据读取进程，放到队列里面,加入read队列；
4.总的来说就是用pub-sub模式，三个进程的通信可以利用消息传递系统，比较方便的方案有使用redis的pub,sub;