Cluster的使用

Interactive Job on Comet

参考:http://www.sdsc.edu/support/user_guides/gordon.html,在http://www.sdsc.edu/support/user_guides/comet.html上没有.
Comet机器上compute队列的CPU配置是:
Processor Type Intel Xeon E5-2680v3
Sockets 2
Cores/socket 12
qsub -I -q shared -l nodes=1:ppn=16:native:noflash,walltime=00:30:00

Above may be a misslead command.
The follow are correct.

srun –partition=shared –nodes=1 –ntasks-per-node=6 -t 00:30:00 –pty –wait=0 /bin/bash
srun –partition=gpu-shared –nodes=1 –ntasks-per-node=6 –gres=gpu:1 -t 00:30:00 –pty –wait=0 /bin/bash

Interactive Job on Stampede

Would you like to know how much memory your code uses during execution? Try TACC’s remora tool:
moduleloadremora module help remora

Stampede

idev –help

Bridges

Bridges Regular Memory
interact -p GPU-shared -N 1 –gres=gpu:1

BlueWaters

2 CPUs with 8 Cores per Node, submit application for 2 nodes with 32 cores in XE Queue.
For XE node specification: #PBS -l nodes=1024:ppn=32:xe
For XK node specification: #PBS -l nodes=1024:ppn=16:xk
For both XE and XK: #PBS -l nodes=1024:ppn=32:xe+1024:ppn=16:xk
For XE/XK-non-specific (X-feature) node specification: #PBS -l nodes=1024:ppn=16:x
For XE large memory nodes: #PBS -l feature=xehimem
For XK large memory nodes: #PBS -l feature=xkhimem

qsub -I -l nodes=2:ppn=32:xe -l walltime=01:00:00

### JedisCluster 中 `mset` 方法的使用 在 Redis 集群模式下,`JedisCluster` 提供了与单机版类似的 API 接口来执行各种操作。其中,`mset` 是用于批量设置键值对的方法之一。为了确保数据能够正确分布到不同的节点上并满足一致性哈希的要求,在使用 `mset` 时需要注意 HashTag 的应用。 以下是基于 `JedisCluster` 实现 `mset` 方法的一个完整示例: ```java import redis.clients.jedis.JedisCluster; import java.util.HashMap; public class JedisClusterMSetExample { public static void main(String[] args) { // 初始化 JedisCluster 对象 JedisCluster jedisCluster = new JedisCluster( getRedisNodes(), // 自定义获取 Redis 节点列表的方法 2000, // 连接超时时间 5000 // 最大重试等待时间 ); try { // 创建一个 HashMap 存储多个 key-value 键值对 HashMap<String, String> keyValueMap = new HashMap<>(); keyValueMap.put("{user}:1", "Alice"); keyValueMap.put("{user}:2", "Bob"); keyValueMap.put("{user}:3", "Charlie"); // 执行 mset 命令 String result = jedisCluster.mset(keyValueMap); // 输出结果 System.out.println("MSET Result: " + result); // 可选:验证存储的数据 System.out.println("User 1: " + jedisCluster.get("{user}:1")); System.out.println("User 2: " + jedisCluster.get("{user}:2")); System.out.println("User 3: " + jedisCluster.get("{user}:3")); } finally { if (jedisCluster != null) { jedisCluster.close(); } } } private static java.util.Set<redis.clients.jedis.HostAndPort> getRedisNodes() { java.util.Set<redis.clients.jedis.HostAndPort> nodes = new java.util.HashSet<>(); nodes.add(new redis.clients.jedis.HostAndPort("192.168.230.131", 7000)); nodes.add(new redis.clients.jedis.HostAndPort("192.168.230.131", 7001)); nodes.add(new redis.clients.jedis.HostAndPort("192.168.230.131", 7002)); return nodes; } } ``` #### 关于 HashTag 的说明 上述代码中,所有的键都带有 `{user}` 的 HashTag[^2]。这使得这些键被映射到同一个 slot 上,从而可以安全地在一个事务或者多键命令(如 `mget`, `mset`)中一起处理。如果未使用一致的 HashTag,则可能导致不同键分布在不同的槽位甚至不同的物理机器上,进而引发错误或不可预期的行为。 #### 注意事项 - 如果不希望依赖特定的 slot 分配策略,请勿随意添加 HashTags。 - 当涉及跨槽的操作时,某些命令可能无法正常工作;因此建议合理规划 keyspace 和其对应的 slots 设计。
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值