pool相关内容

如何在多进程中启动100个工人?

我尝试使用python调用我的函数,my_function()100次。由于my_function需要一段时间才能运行,我希望将此进程并行化。 我尝试阅读https://docs.python.org/3/library/multiprocessing.html的文档,但找不到启动100个工作人员的简单示例。顺序并不重要;我只需要该函数运行100次。 有什么建议/代码提示吗? 推 ..

PYTHON多处理池:MaxtaskperChild

我一直在尝试使用Python的多处理库,尽管它提供了一个非常容易使用的API,但它的文档并不总是非常清楚。特别是,传递给Pool类的一个实例的参数‘MaxtaskperChild’让我感到非常困惑。 以下内容直接摘自Python的文档(3.7.2): MaxtaskperChild是工作进程在退出并替换为新的工作进程以释放未使用的资源之前可以完成的任务数。默认的MaxtaskperCh ..
发布时间:2022-04-10 19:11:05 Python

未关闭的连接 - 连接池调试 SQL Server

我们有一个可疑的应用程序使连接处于打开状态.只是想知道对此的调试工具,至于是否有人有任何好的工具来隔离这个,商业或其他. 我在 Google 上搜索过,但似乎只找到了描述问题的文章,而不是解决方案的步骤. 这个 是迄今为止我看到的最好的文章.- 欢迎其他人. 有人有任何产品可以隔离有问题的代码吗?执行此类事情的分析器,或任何其他要添加的建议? 解决方案 您可以随时检查 S ..
发布时间:2022-01-24 15:42:27 数据库

如何在 IIS 中监视 .NET MySQL 数据连接器的连接池

我对此进行了相当多的搜索,但无法找到确切的答案.我们在日志中看到以下错误: 超时.在获得一个之前的超时时间来自池的连接.这可能是因为所有汇集的连接正在使用中并且已达到最大池大小.堆栈跟踪:在MySql.Data.MySqlClient.MySqlPool.GetConnection() 在MySql.Data.MySqlClient.MySqlConnection.Open() 我可以 ..
发布时间:2022-01-24 15:17:16 C#/.NET

为什么我们需要在 ConnectionString 中设置 Min pool size

对于 SQL 连接池,为什么我们需要设置最小池大小?由于连接将保存在连接池中并重复使用,为什么我们需要保持最小池大小指定的活动连接?谢谢. 解决方案 打开和维护连接很昂贵,所以如果你知道你需要多个连接(总是)最好指定 MinPoolSize 因为然后确保这些连接可用. 另外,来自 MSDN: 如果 MinPoolSize 未在连接字符串中指定或指定为零,池中的连接将在一个不活动 ..
发布时间:2022-01-24 15:10:02 C#/.NET

urllib3 connectionpool - 连接池已满,丢弃连接

看到了 urllib3.connectionpool 警告 - 连接池已满,正在丢弃连接 意味着我实际上正在丢失数据(因为失去连接) 或 是否意味着连接被丢弃(因为池已满);但是,当连接池可用时,稍后会重新尝试相同的连接? 解决方案 没有数据丢失! 连接被丢弃在请求完成后(因为池已满,如前所述).这意味着这个特定的连接将来不会被重复使用. 由于 urllib3 Pool ..
发布时间:2022-01-24 15:09:54 Python

什么是 java.io.EOFException,消息:无法读取服务器的响应.预期读取 4 个字节,读取 0 个字节

这个问题已经在 SO 中被问过几次,在其他网站上也被问过很多次.但我没有得到任何令人满意的答案. 我的问题: 我有一个 java web 应用程序,它使用简单的 JDBC 通过 Glassfish 应用程序服务器连接到 mysql 数据库. 我在 glassfish 服务器中使用了连接池,配置如下: 初始池大小:25 最大池大小:100 池调整数量:2 空闲超时:300 秒 ..
发布时间:2022-01-24 14:58:12 Java开发

同步 Unix 池进程的简单机制是什么?

我需要限制并行执行的进程数.例如我想执行这个伪命令行: 导出 POOL_PARALLELISM=4对于 `seq 100` 中的 i ;做pool foo -bar &完毕pool foo -bar # 在前 100 个完成之前不会完成. 因此,尽管有 101 个 foo 排队等待运行,但在任何给定时间只有 4 个在运行.pool 将 fork()/exit() 并将剩余进程排队,直到完成. ..
发布时间:2022-01-21 12:19:30 服务器开发

Java中字符串池的底层机制?

我很好奇为什么不需要调用 new String() 就可以创建字符串,因为 API 提到它是 classObject/code> java.lang.String 那么我们怎样才能使用 String s="hi" 而不是 String s=new String("hi")? 这个post 澄清了 == 运算符的使用和 new 的缺失,并表示这是由于 interned 的 String ..
发布时间:2022-01-16 12:15:04 Java开发

Python中的类中的池

我想在一个类中使用 Pool,但似乎有问题.我的代码很长,我创建了一个小型演示变体来说明问题.如果您能给我下面的代码变体,那就太好了. 来自多处理导入池类系列实例(对象):def __init__(self):self.numbers = [1,2,3]定义 F(自我,x):返回 x * x定义运行(自我):p = 池()打印 p.map(self.F, self.numbers)ins = S ..
发布时间:2022-01-12 13:11:52 Python

Python 中的 ProcessPoolExecutor 和 Lock

我正在尝试将 concurrent.futures.ProcessPoolExecutor 与 Locks 一起使用,但出现运行时错误.(如果相关,我正在使用 Windows) 这是我的代码: 导入多处理从 concurrent.futures 导入 ProcessPoolExecutor进口时间def f(i, 锁):带锁:打印(我,'你好')时间.sleep(1)打印(我,'世界')定 ..
发布时间:2022-01-12 13:10:45 Python

分析 python 多处理池

我正在尝试在多处理池中的每个进程上运行 cProfile.runctx(),以了解我的源中的多处理瓶颈是什么.这是我正在尝试做的一个简化示例: 来自多处理导入池导入 cProfile定义方(i):返回 i*idef square_wrapper(i):cProfile.runctx("结果 = square(i)",globals(), locals(), "file_"+str(i))# Na ..
发布时间:2022-01-12 13:08:05 Python

如何终止多处理池进程?

我正在开发渲染农场,我需要我的客户能够启动渲染器的多个实例,而不会阻塞,以便客户端可以接收新命令.我的工作正常,但是在终止创建的进程时遇到问题. 在全局级别,我定义了我的池(以便我可以从任何函数访问它): p = 池(2) 然后我用 apply_async 调用我的渲染器: for i in range(totalInstances):p.apply_async(render, (al ..
发布时间:2022-01-12 13:04:03 Python

Python 多处理从不加入

我正在使用 multiprocessing,特别是一个 Pool 来分拆几个“线程"来完成我拥有的一堆慢速工作.但是,由于某种原因,我无法让主线程重新加入,即使所有的孩子似乎都已经死了. 已解决:看来这个问题的答案是只启动多个 Process 对象,而不是使用 Pool.目前尚不清楚为什么,但我怀疑剩余的进程是池的管理器,并且当进程完成时它并没有死亡.如果其他人有这个问题,这就是答案. ..
发布时间:2022-01-12 12:56:31 Python

守护进程内的Python多处理池

我针对这个问题提出了一个问题,但没有得到足够彻底的答案来解决这个问题(很可能是由于在解释我的问题时缺乏严谨性,这是我试图纠正的问题):python多处理守护进程中的僵尸进程 我正在尝试实现一个 python 守护程序,它使用一个工作池来使用 Popen 执行命令.我从 http://www.jejik.com/articles/借用了基本的守护进程2007/02/a_simple_unix_ ..
发布时间:2022-01-12 12:46:44 Python

多处理池是否为每个进程提供相同数量的任务,或者它们是否被分配为可用?

当您 map 一个可迭代对象到一个 multiprocessing.Pool 时,迭代会在开始时为池中的每个进程分成一个队列,或者是否有一个公共队列当进程空闲时从哪个任务中获取? def generate_stuff():对于范围内的 foo(100):收益 foo定义进程(moo):打印哞池 = 多处理.池()pool.map(func=process, iterable=generate_ ..
发布时间:2022-01-12 12:43:14 Python