cluster-computing相关内容

运行多个辅助守护程序SLURM

我想在一台机器上运行多个工作守护程序。根据 damienfrancois 的回答slurm群集的最小计算机数“> slurm群集的最小计算机数是多少可以做到。问题是当前我只能在一台计算机上执行1个工作守护程序。例如, 当我运行 sudo slurmd -N linux1- cDvv sudo slurmd -N linux2 -cDvv 当我运行linux2时, ..

slurm群集的最小计算机数量是多少

我想设置一个 SLURM群集。我最少需要几台机器?我可以从两台机器开始(一台是唯一的客户端,一台是客户端和服务器的主机)吗? 解决方案 您可以开始使用只有一台机器,但是2台机器将是最标准的配置,其中一台是控制器,另一台是“工作者”节点。使用此模型,您可以向群集中添加作为“工作”节点的机器。这样,服务器将不会执行作业,也不会受到作业干扰。 ..
发布时间:2020-10-03 02:32:25 其他开发

在集群中使用socket.io吗?

我很好奇我可以同时使用socket.io和Cluster。 我知道集群使用多核在具有多个工作程序的node.js上工作。 这意味着,如果我将cluster用于socket.io,则两个连接了 两个不同套接字的用户.io可能会导致它们无法相互通信的问题? 因此,宁愿不使用socket.io上的集群也是一个答案? 解决方案 结帐dshaw关于扩展Socket.IO的讨论 ..
发布时间:2020-10-03 02:31:19 其他开发

等待用户的所有作业完成,然后再将后续作业提交给PBS群集

我正在尝试调整一些bash脚本,以使其在( pbs )集群。 单个任务由几个脚本执行,而这些脚本由主脚本启动。 到目前为止,该主脚本在后台启动了多个脚本(通过添加& ),使它们可以在一台多核计算机上并行运行。 我想用 qsub s代替这些调用,以在整个群集节点上分配负载。 但是,有些工作要依靠其他工作才能开始。 到目前为止,这是通过主脚本中的 wait 语句实现的。 但是使用网 ..
发布时间:2020-10-03 02:31:15 其他开发

Socket.io,集群,表达和同步事件

我有一个大问题,这是1周。我尝试将node.JS项目实际上在单核上运行到带集群的多核上。 使用websocket,目前,我没有遇到任何问题,但是,对于xhr-polling或jsonp-polling,我在群集模式下使用socket.io遇到了大问题。 这是我的服务器配置: 00-generic.js “使用严格”; var http = require('http ..
发布时间:2020-10-03 02:31:14 其他开发

SQL Server故障转移群集-确定活动节点

是否可以通过编程方式确定SQL Server故障转移群集中的哪个节点是活动节点?或者至少确定当前计算机是否是活动节点? 我有一个Windows程序,该程序在故障转移群集中的两个物理节点上运行,但是根据不同的运行方式,它是否在活动节点上运行。 部分原因是该程序不应在非活动和活动节点上同时运行。 (我已经读了一些有关使得程序群集可以感知,但是对于这种简单情况而言,似乎显得过于矫kill过正 ..

自动选择节点集群中的领导者

在知道节点随时出现故障的情况下,在群集节点中选择一个主导节点的最佳方法/算法是什么?如果可以使用Java实现,那么它是一个加号。 解决方案 我以前在Java中实现过Paxos算法。这非常有用,而且非常简单。 (使用线程模拟服务器花了大约16个小时来演示它。那时我在线程方面也很糟糕!) 这无济于事您完全选择了领导者...但是它将要做的是允许各个节点就领导者达成一致。因此,您具有这种领导 ..
发布时间:2020-10-03 02:29:05 Java开发

使用mpi4py并行化计算群集上的“ for”循环

我以前从未使用过分布式计算,但是我正在尝试将mpi4py集成到程序中,以便并行计算群集上的for循环。 这是我要执行的操作的伪代码: 用于目录中的文件: 初始化类 运行类方法 集团结果 我已经看过堆栈溢出了,找不到任何解决方案为此。是否可以通过mpi4py来完成此操作,或者是否可以通过简单的安装和设置来完成此操作? 解决方案 为了使用MPI4Py实现for循环的并行 ..
发布时间:2020-10-03 02:29:01 Python

Kubernetes-错误上传小插曲:等待条件超时

我试图为具有1个主节点和2个工作节点的Kubernetes集群创建模板。我已经安装了所有必备软件,并在主节点上运行了kubeadmn init。但是,当我尝试运行作为初始化命令输出得到的kubeadmn连接时,出现错误。 [discovery]创建集群信息发现客户端,从“ https://10.31.2.33:6443”请求信息 [发现]从 请求信息“ https://10.31.2.3 ..
发布时间:2020-10-03 02:28:58 其他开发

运行具有多个节点的Slurm脚本,使用1个任务启动作业步骤

我正在尝试使用批处理脚本启动大量作业步骤。不同的步骤可能是完全不同的程序,并且每个步骤确实需要一个CPU。首先,我尝试使用对 srun 的-multi-prog 参数执行此操作。不幸的是,以这种方式使用分配给我的工作的所有CPU时,性能会大大降低。运行时间几乎增加到其序列化值。通过订阅不足,我可以对此有所改善。我在网上找不到有关此问题的任何信息,因此我认为这是我正在使用的群集的配置问题。 所 ..
发布时间:2020-10-03 02:28:54 其他开发

什么是套接字,内核,线程,CPU?

我目前正在自愿学习linux服务器,也对学习集群计算技术感兴趣。 在本实验中,他们有一个小型集群,其中一个头节点和两个计算节点。 当我在头上尝试lscpu命令时节点,计算节点1,节点2。单击链接以查看详细信息。 CPU-头中有24个CPU,computenode1和computenode2。 是指主板中的24个物理CPU吗? 插槽-2头,computenode1和compu ..
发布时间:2020-10-03 02:28:51 其他开发

如何在使用群集模块的Node.js应用程序中运行Cron Job?

我正在使用 node-cron 模块在Node.js应用程序中调度任务。我还想使用核心集群模块在多个进程中运行该应用程序。 在多个进程中运行应用程序最终会在每个进程中按计划执行任务(例如,如果任务是发送电子邮件,则电子邮件将被多次发送)。 > 与集群模块一起运行cron作业的最佳实践/可行方法是什么?我应该创建一些单独的进程来处理仅cron作业,而不接受任何请求。如果是,我该如何以正确 ..
发布时间:2020-10-03 02:27:48 其他开发

在SQL Server中使用镜像,日志传送,复制和群集的方案是什么

据我所知,SQL Server提供了4种技术以提高可用性。 我认为这些是主要的使用方案,总而言之:- $ b)复制 1)复制将主要适合在线-离线数据同步方案(笔记本电脑,移动设备,远程服务器)。 2)日志传送可用于具有手动切换的故障转移服务器,而 3)数据库镜像是一种自动故障转移技术 4)故障转移群集是数据库镜像的一种高级类型。 Am i是吗? 谢谢。 ..
发布时间:2020-10-03 02:27:46 数据库

如何在多台机器上集群Node.js应用

我正在使用 Express js 和 Node-cluster 以利用群集优势,我也在使用 PM2 用于进程和内存管理。对于单台机器,它可以正常工作,但是我的机器具有2个核心,并且我想提供更多核心。因此,我决定再加入3台计算机,现在所有4台计算机都使用LAN连接。我也可以在网络浏览器中使用IP地址访问其他机器。 现在,我想连接所有机器并希望共享它们的内核,这样我的应用程序最终将拥有2 + 6 ..
发布时间:2020-10-03 02:27:43 其他开发

Redis集群/负载均衡

Redis不支持主-主复制。 在redis教程中,我看到有一个配置,具有6个节点,3个主节点,3个从属, 任何人都可以告诉我这种配置的目的是什么(从站是为了进行故障转移,3个主设备的目的是什么?) 我的要求是减少从应用服务器到Redis的连接数。因此,我一直在寻找一种指向多个Redis节点的方法,因此,如果我从Redis节点1创建密钥,则可以从Redis节点2删除该密钥。 ..
发布时间:2020-10-03 02:26:29 其他开发

无法检索群集可用存储的物理大小

我的工作已经进行到一半,现在卡住了。 我正在尝试获取有关群集的可用存储设备的信息。 我能够获取可用存储设备的列表,但无法检索这些可用存储的物理磁盘,可用空间等。 我想要像这样。是否有任何命令可以从“群集磁盘名称”中获取物理磁盘名称,或者可以直接获取磁盘详细信息。 对于共享磁盘,我可以检索详细信息( Get-ClusterSharedVolume ),但不适用于非共享磁盘。 我想要 ..
发布时间:2020-10-03 02:25:26 其他开发

设置CouchDB 2.0集群

我正在尝试为边缘计算项目使用一些Raspberry Pi设置一个CouchDB集群。但是直到现在我所做的一切都没有成功。我没有使群集正常工作。 这就是我所做的: 我遵循了 http://docs.couchdb.org/en/2.0.0/install/unix。 html# 与以下内容结合使用: https://medium.com/linagora-engineering/s ..