大信 发表于 2021-1-16 12:12
把一个大的ape文件，根据cue拆分为单曲的的ape ？
求数据结构。谢谢！

大信 发表于 2020-8-21 23:42
我明白你的意思了，但还是难以认同。我不过是吧self.ProcessPing当做参数传递给进程而已，不该对参数的类型作限制。
下面111楼提供的信息更进一步解释了问题原因。 我觉得这是的Python的无数坑之一.......

一个人在途上 发表于 2020-8-19 21:24
python我连二杆子都算不上
不过这个问题倒是有了提示：cannot pickle weakref object。弱引用带来的问题
网上搜到的：https://www_cnblogs_com/li-dp/p/5837823.html
另外，多线程几乎都是所有编程的难点所在，要有畏惧心理，常常会出现莫名其妙的错误或者结果

目前为止，我用过最舒服的多线程模型是Akka Actor，不过只有scala和java能用

benniewang 发表于 2020-8-19 22:25
恩，我就很畏惧多进程。所以现在只用pool而且还不用进程间通信。

大信 发表于 2020-8-19 10:04
麻烦各位帮我诊断下面这个问题。
我用一个实例变量列表(self.process)保存需要启动的进程，然后调用start()方法启动，报错。
代码及报错信息见图片。

问题就出在462行代码的self.process变量。如果不用实例变量而用内部变量，就没问题。
比如把这一段代码中的self.process变量改为myprocess列表，程序就能通过运行，不会报错。

请问为啥不能用实例变量呢？

@闲聊状态 @一个人在途上 @云的南方
请教各位。谢谢！

另外，如果用terminate()方法停止进程，效率如何？进程内部是while True死循环，会不会进程停不下来，或有其他问题?  —— 中途中断进程，不会导致资源被占用，死锁等问题。

大信 发表于 2020-8-19 10:04
麻烦各位帮我诊断下面这个问题。
我用一个实例变量列表(self.process)保存需要启动的进程，然后调用start()方法启动，报错。
代码及报错信息见图片。

问题就出在462行代码的self.process变量。如果不用实例变量而用内部变量，就没问题。
比如把这一段代码中的self.process变量改为myprocess列表，程序就能通过运行，不会报错。

请问为啥不能用实例变量呢？

@闲聊状态 @一个人在途上 @云的南方
请教各位。谢谢！

另外，如果用terminate()方法停止进程，效率如何？进程内部是while True死循环，会不会进程停不下来，或有其他问题?  —— 中途中断进程，不会导致资源被占用，死锁等问题。

大信 发表于 2020-08-19 02:04

麻烦各位帮我诊断下面这个问题。
我用一个实例变量列表(self.process)保存需要启动的进程，然后调用start()方法启动...

大信 发表于 2020-8-19 10:04
麻烦各位帮我诊断下面这个问题。
我用一个实例变量列表(self.process)保存需要启动的进程，然后调用start()方法启动，报错。
代码及报错信息见图片。

问题就出在462行代码的self.process变量。如果不用实例变量而用内部变量，就没问题。
比如把这一段代码中的self.process变量改为myprocess列表，程序就能通过运行，不会报错。

请问为啥不能用实例变量呢？

@闲聊状态 @一个人在途上 @云的南方
请教各位。谢谢！

另外，如果用terminate()方法停止进程，效率如何？进程内部是while True死循环，会不会进程停不下来，或有其他问题?  —— 中途中断进程，不会导致资源被占用，死锁等问题。

云的南方 发表于 2020-8-18 16:45
要操作ttjj的话，电脑端的网页操作不是要chromedriver，selenium，验证码识别之类的么，反倒不如usb接个旧手机简单，几十行代码完事。

一个人在途上 发表于 2020-8-16 21:44
termux android的终端仿真器

自动化操作放服务器上不好吗，为何要跑手机

大信 发表于 2020-8-16 16:02
Python 怎么在手机上运行？ 如果需要交易，券商提供Python接口？

一个人在途上 发表于 2020-8-16 21:44
termux android的终端仿真器

自动化操作放服务器上不好吗，为何要跑手机

大信 发表于 2020-8-14 22:39
花了不到一天的时间终于搞定。
我们行业不准用mysql，有版权风险。
上午研究一阵postgreSQL的二进制版本，摸索系统初始化、建库、建用户、建表。测试import psycopg2，可以连接访问。
下午集中精力把线程改成了进程方式（涉及到数据的保存方式的变化），下班前终于排除bug调试成功。

感受：在python上与多线程相比，多进程效率的确高很多。同样的进程/线程并发数量，1200个设备ping一圈线程平均1.3秒，进程只要0.3秒左右。而且进程还有1200次写数据库操作（线程只需要修改内存列表）。可见线程大部分时间都在等待获取GIL锁。
从操作系统监控画面观察，线程模式CPU占用率大概在30~40%，进程模式几乎100% —— Windows 7上面所有4个核心全部压上。改天在Windows 10上看看效果，看8个CPU是不是都跑起来了。

唯一不爽的是120个进程产生120个数据库连接（需要持续连接），感觉不够优化。

下一步就是研究信号量，看看怎么发号施令控制进程的退出。

最后谢谢楼上各位的热心指点！

补充更正一下，不是8CPU，是单CPU 8核。