def more():
core_content = '无锡超算官网 \n\t\t\t http://www.nsccwx.cn '
print '\n\t\t\t\t' + UseStyle(core_content, mode='bold')
content = '''\n * 官网上机指南中，有文档、视频、demo等多种形式的资料，建议使用前先查阅相关资料
'''
print UseStyle(content)
def run_error():
core_content = '1. plugin_load_from_file:dlopen(/usr/sw-slurm/slurm-16.05.3/lib/slurm/auth_munge.so):libmunge.so.2:cannont open shared object file: No such file or directory'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* 用户需要重新提交作业；联系管理员确认；需向管理员提供jobid，便于定位问题原因
'''
print '\t' + UseStyle(content)
core_content = '2. Transport endpoint is not connectd'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* 该节点文件系统传输断开，联系管理员确认
'''
print '\t' + UseStyle(content)
core_content = '3. ......'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* ......
'''
print '\t' + UseStyle(content)
core_content = 'sunway --help 获得更多帮助'
print '\n' + UseStyle(core_content, mode='bold')
others = '''
(更为详细的介绍，请查阅无锡超算官网“上机指南”中相关文档)
'''
print UseStyle(others)
def bsub_x86():
abstract = '前台作业提交:'
print '\n' + UseStyle(abstract)
core_content = '''
bsub -I -q q_x86_expr -n 1 ./a.out para1 para2
'''
print '\t' + UseStyle(core_content, mode='bold'),
content = '''
* -I 表示交互式提交，程序输出会打印到屏幕，屏幕关闭，作业会终止
* -q 队列名。队列名可通过 "qload -w" 命令查看
* -n 进程数
* ./a.out 可执行程序
* para1 para2 可执行程序所需的参数
'''
print '\t' + UseStyle(content)
abstract = '后台作业提交:'
print '\n' + UseStyle(abstract)
core_content = '''
bsub -q q_x86_expr -n 1 -o runlog ./a.out para1 para2
'''
print '\t' + UseStyle(core_content, mode='bold'),
content = '''
* 去掉 -I 选项即提交到后台
* -o 表示把程序输出打印到runlog文件中
'''
print '\t' + UseStyle(content)
notes_title = '其他事项:'
notes = '''
* q_x86_expr 队列为测试队列，只能运行1小时,只能使用16个节点，其中1个节点24核心，因可以运行16*24个进程
* 更多有关于bsub的使用说明，请查阅无锡超算官网->上机指南->"神威太湖之光系统快速使用指南"
'''
print '\n' + UseStyle(notes_title)
print '\t' + UseStyle(notes)
core_content = 'sunway --help 获得更多帮助'
print '\n' + UseStyle(core_content, mode='bold')
others = '''
(更为详细的介绍，请查阅无锡超算官网“上机指南”中相关文档)
'''
print UseStyle(others)
def memory():
core_content = 'online1 存储查询'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* lfs quota -h -u username /home/export/online1【查看用户的online1存储使用】
* lfs quota -h -g groupname /home/export/online1 【查看组的online1存储使用】
'''
print '\t' + UseStyle(content)
core_content = 'GPFS 存储查询'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* mmlsquota -u username【查看用户存储使用情况】
* mmlsquota -g groupname【查看组存储使用情况】
'''
print '\t' + UseStyle(content)
core_content = '查看家目录大小'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* 输入cd命令，回车，回到家目录
* 输入du -sh命令，回车，统计家目录大小
'''
print '\t' + UseStyle(content)
core_content = '注意事项'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* 测试账号磁盘限额为 1T
* 存储资源不仅包括磁盘限额（Block Limits），也包括文件数目（File Limits）
* 存储磁盘限额超额，必定会影响【文件操作】和【作业提交和运行】
* 超额之后，请删除废弃数据和旧数据，或联系商务洽谈存储收费扩容
'''
print '\t' + UseStyle(content)
core_content = 'sunway --help 获得更多帮助'
print '\n' + UseStyle(core_content, mode='bold')
others = '''
(更为详细的介绍，请查阅无锡超算官网“上机指南”中相关文档)
'''
print UseStyle(others)
def others_error():
core_content = '1. 登陆节点卡顿排查'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* ......
'''
print '\t' + UseStyle(content)
core_content = 'sunway --help 获得更多帮助'
print '\n' + UseStyle(core_content, mode='bold')
others = '''
(更为详细的介绍，请查阅无锡超算官网“上机指南”中相关文档)
'''
print UseStyle(others)
def bsub_sw():
abstract = '前台作业提交:'
print '\n' + UseStyle(abstract)
core_content = '''
bsub -I -b -q q_sw_expr -n 1 -cgsp 64 -share_size 4096 -host_stack 128 ./a.out para1 para2
'''
print '\t' + UseStyle(core_content, mode='bold'),
content = '''
* -I 表示交互式提交，程序输出会打印到屏幕，屏幕关闭，作业会终止
* -b 表示从核函数栈变量放在从核局部存储上，该选项为获取加速性能必须的提交选项
* -q 队列名，队列名可通过 "qload -w" 命令查看
* -n 进程数，使用主核数
* -cgsp 使用从核个数
* -share_size 指定核组共享空间大小，一般最大可以用到 7600MB
* -host_stack 指定主核栈空间大小，默认为 8M，一般设置为 128MB 以上
* ./a.out 可执行程序
* para1 para2 可执行程序所需的参数
'''
print '\t' + UseStyle(content)
abstract = '后台作业提交:'
print '\n' + UseStyle(abstract)
core_content = '''
bsub -b -q q_sw_expr -n 1 -o runlog -cgsp 64 -share_size 4096 -host_stack 128 ./a.out para1 para2
'''
print '\t' + UseStyle(core_content, mode='bold'),
content = '''
* 去掉 -I 选项即提交到后台
* -o 表示把程序输出打印到runlog文件中
* 其他选项与上述相同
'''
print '\t' + UseStyle(content)
others = '''
(更多有关于bsub的使用说明，请参考无锡超算官网->上机指南->"神威太湖之光系统快速使用指南)"
'''
print UseStyle(others)
core_content = 'sunway --help 获得更多帮助'
print '\n' + UseStyle(core_content, mode='bold')
others = '''
(更为详细的介绍，请查阅无锡超算官网“上机指南”中相关文档)
'''
print UseStyle(others)
def job():
core_content = 'bjobs -- 作业状态查询'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* 执行 bjobs 可以查询作业号以及运行状态
* bjobs -l 作业号 可查询更多详细信息
'''
print '\t' + UseStyle(content)
core_content = 'bkill + 作业号 -- 杀作业 '
print '\n' + UseStyle(core_content, mode='bold')
core_content = 'cnload -- 节点状态查询 '
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* cnload -c 节点号，如：cnload -c 1,2-10,20
* cnload -c 节点号 -l（小写L）
* bjobs回车，查看jobid占用的节点，复制cpuid，通过cnload -c jobid查看节点CPU，内存，负载状态
* 节点处于softft/hartft/down/boot为异常状态
* 节点处于N/A|BUSY|SBUSY|sleep|sleeping为正常状态
'''
print '\t' + UseStyle(content)
core_content = 'sunway --help 获得更多帮助'
print '\n' + UseStyle(core_content, mode='bold')
others = '''
(更为详细的介绍，请查阅无锡超算官网“上机指南”中相关文档)
'''
print UseStyle(others)
def hardware():
core_content = '国产计算平台'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* 峰值计算性能： 125PetaFlops， 适合有源代码的科学与工程计算
* 申威 26010 处理器个数： 40960（每个处理器 260 核,每个处理器含 4 个核组）
* 申威 26010 处理器核组数： 163840
* 一般情况下，一个核组可以运行 1 个进程和 64 个线程
* 1 个核组 = 1 个主核 + 64 个从核（基本收费单位）
'''
print '\t' + UseStyle(content)
core_content = '商用计算平台'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* 980 个普通计算节点：2路12核心 E5-2680V3 处理器,每个节点 128GB DDR4 内存
* 32 个胖计算节点：每个节点包含 8 路 16 核 E7-8860V3 处理器，主频 2.2GHz,每个节点 1024GB DDR4 内存
* GPU 节点,每个节点包含 2 路 8 核心 E5-2630V3 处理器（ 128GB DDR4 内存）,每个节点一块 K40 计算加速卡（ 具有 2880 个流处理器， 显存 12GB）
'''
print '\t' + UseStyle(content)
core_content = 'sunway --help 获得更多帮助'
print '\n' + UseStyle(core_content, mode='bold')
others = '''
(更为详细的介绍，请查阅无锡超算官网“上机指南”中相关文档)
'''
print UseStyle(others)
def software():
core_content ='软件列表查询及使用方法'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* 已安装软件列表请查询官网 http://www.nsccwx.cn/soft.php?word=soft&&i=47
* 部分软件使用方法请查询官网 http://www.nsccwx.cn/detail.php?word=process&&i=55&id=335
* 更多软件的使用方法请联系技术支持
'''
print '\t' + UseStyle(content)
core_content = '软件移植'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* 请先自行尝试移植所需软件，如遇到问题，可再与技术支持人员讨论交流
'''
print '\t' + UseStyle(content)
core_content = 'sunway --help 获得更多帮助'
print '\n' + UseStyle(core_content, mode='bold')
others = '''
(更为详细的介绍，请查阅无锡超算官网“上机指南”中相关文档)
'''
print UseStyle(others)
def contact():
core_content = '微信联系'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* 微信号： nsccwx_tech / 180 1235 0507
'''
print '\t' + UseStyle(content)
core_content = '超算官网及论坛'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* http://www.nsccwx.cn
'''
print '\t' + UseStyle(content)
core_content = 'sunway --help 获得更多帮助'
print '\n' + UseStyle(core_content, mode='bold')
others = '''
(更为详细的介绍，请查阅无锡超算官网“上机指南”中相关文档)
'''
print UseStyle(others)
def compiler_x86():
core_content = 'Intel基础编译器'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* Fortran: ifort
* C语言: icc
* C++： icpc
'''
print '\t' + UseStyle(content)
core_content = 'Intel并行编译器'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* Fortran: mpiifort
* C语言: mpiicc
* C++： mpiicpc
'''
print '\t' + UseStyle(content)
core_content = 'sunway --help 获得更多帮助'
print '\n' + UseStyle(core_content, mode='bold')
others = '''
(更为详细的介绍，请查阅无锡超算官网“上机指南”中相关文档)
'''
print UseStyle(others)
def queue():
core_content = '可用队列查询'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* 查询命令： qload -w
* q_sw_*** 表示国产计算平台队列
* q_x86_*** 表示商用计算平台队列
* CONFIG： 队列总节点个数； IDLE: 队列空闲节点个数；BUSY： 队列已占用节点个数；sleep: 队列休眠节点个数(可用)
'''
print '\t' + UseStyle(content)
core_content = '测试队列注意事项'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* q_sw_expr q_x86_expr 为测试队列
* 测试队列中的程序只能运行 1 小时，超过 1 小时系统会自动杀题
* q_sw_expr 只能使用 16 个节点，即 16*4 核心
* q_x86_expr 只能使用 3 个节点，即 24*3 核心
* 如需增加时长以及节点数，请联系商务购买正式计算队列
'''
print '\t' + UseStyle(content)
core_content = 'sunway --help 获得更多帮助'
print '\n' + UseStyle(core_content, mode='bold')
others = '''
(更为详细的介绍，请查阅无锡超算官网“上机指南”中相关文档)
'''
print UseStyle(others)
def download():
core_content = '数据上传下载'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* 支持采用ftp，rsync，scp等主流文件传输协议
* 协议地址为登陆地址，端口22，用户自己的账号密码认证。命令使用方式自行检索
* 上传数据的路径为用户根目录下的软链接online1/2或GPFS
* 用户需要将数据传输到账号根目录下的online1,online2或GPFS目录内，否则会因家目录大小限制而上传异常
'''
print '\t' + UseStyle(content)
core_content = '大量数据上传下载'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* 用户有大量数据上传下载时，可快递硬盘至无锡超算进行内网传输，内网传输速率为 100MB/s-120MB/s
* 快递地址：江苏省无锡市滨湖区吟白路1号。收件人和联系方式在技术支持群索取。无锡超算将数据寄回时均为【到付】
* 建议使用USB3.0移动硬盘，SATA接口硬盘，各类USB接口存储设备
* 移动硬盘或存储设备的文件系统可为Linux主流文件系统或NTFS文件系统，不支持ios文件系统
* 用户需要便签说明数据上传或者下载的【账号】和【路径】
'''
print '\t' + UseStyle(content)
core_content = '用户与用户之间数据传输与共享'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* 用户修改自己的目录为755，即可共享自己的目录或文件于他人
* 用户可使用scp实现账号之间的数据拷贝
* scp axx@psn002:~/online1/a.txt ./ 从axx账号拷贝文件到当前目录, psn002为登录节点名称，请根据实际登录情况选择相应登录节点
* 用户可通过创建软链接的形式实现数据共享
'''
print '\t' + UseStyle(content)
core_content = 'sunway --help 获得更多帮助'
print '\n' + UseStyle(core_content, mode='bold')
others = '''
(更为详细的介绍，请查阅无锡超算官网“上机指南”中相关文档)
'''
print UseStyle(others)
def access():
core_content = 'VPN登录'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* VPN登录遇到异常，请先检查电脑外网连接是否正常
* VPN有共有人数上限，如需提高上限，请联系技术支持
'''
print '\t' + UseStyle(content)
core_content = '主机登录'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* 超算平台有登录节点、计算节点之分；程序、数据等文件要放在 online1 或者 GPFS 目录，计算节点才能访问到
* 登录节点为用户提供一个登陆系统的平台，用户可以通过internet网络登录VPN，然后通过ssh终端登录到登陆节点上
* 登录节点用户可以进行软件编译与调试、环境变量配置作业提交、文件编辑、结果查看等操作
* 登录节点禁止用户直接运行计算程序
* 登录节点有三个 psn002 psn004 psn010，一般情况下重复登录三次可切换到另外一个登录节点
* 计算节点本身没有本地硬盘，挂载共享存储，具备软件运行所需的运行环境
* 用户程序、数据等文件要放在 online1 或者 GPFS 目录，计算节点才能访问到
* 计算程序需通过bsub作业管理系统提交到计算节点运行
'''
print '\t' + UseStyle(content)
core_content = 'sunway --help 获得更多帮助'
print '\n' + UseStyle(core_content, mode='bold')
others = '''
(更为详细的介绍，请查阅无锡超算官网“上机指南”中相关文档)
'''
print UseStyle(others)
def bsub_error():
core_content = '1. current cwd is "/home/export/base/xxx/yyy", canot submit job on fs base, job not submitted'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* 家目录无法提交作业，切换至全局文件系统(online1,online2,GPFS)的工作目录提交
'''
print '\t' + UseStyle(content)
core_content = '2. Disk quota exceeded'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* 家目录因存放大量文件导致磁盘限额超出1G出错
* 删除家目录下的文件【注：不要删除online1,online2,GPFS软链接】
* 清空隐藏目录.rmsbatch下的文件
'''
print '\t' + UseStyle(content)
core_content = '3. Job submit failed, Access/permission denied'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* 因无队列权限提交失败
* qload -w 查看具有权限的队列
* 查看提交命令中的队列名是否正确
'''
print '\t' + UseStyle(content)
core_content = '4. job submit failed, ret = -19, reason: No enough compute nodes'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* 查看是否将使用国产编译器编译的程序提交到q_x86_xxx，即x86架构处理的平台,或者反之
'''
print '\t' + UseStyle(content)
core_content = '5. job submit failed, ret = -40, reason: Exceed user avail resource quota.'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* 因超出队列资源限制提交失败
* 使用qlimit -l（小写L） 队列名 | grep 用户名 查看用户在该队列的资源限制
* 调整核心数，重新提交
'''
print '\t' + UseStyle(content)
core_content = '6. 交互式提交后长时间PEND或dispatch.'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* 超出队列可使用资源限制。执行bjobs -l jobid 查看原因为Pend reason<RMS_USER_QUOTA_ERROR>
* bjobs -l jobid 查看其他原因
* 用户查看队列可使用资源，见第5点
'''
print '\t' + UseStyle(content)
core_content = 'sunway --help 获得更多帮助'
print '\n' + UseStyle(core_content, mode='bold')
others = '''
(更为详细的介绍，请查阅无锡超算官网“上机指南”中相关文档)
'''
print UseStyle(others)
def sunway_help():
abstract = '欢迎使用无锡超算平台自助问答系统'
print '\n\t\t\t' + UseStyle(abstract)
abstract = '使用方法：'
print '\n' + UseStyle(abstract)
abstract = 'sunway [选项]; 例如: sunway access'
print '\n\t' + UseStyle(abstract, mode='bold')
abstract = '选项说明：'
print '\n' + UseStyle(abstract)
abstract = '01. hardware -- 无锡超算平台硬件资源介绍'
print '\n\t' + UseStyle(abstract),
abstract = '02. software -- 无锡超算平台软件资源介绍'
print '\t' + UseStyle(abstract)
abstract = '03. access -- 登录及基本使用方式'
print '\t' + UseStyle(abstract),
abstract = '04. contact -- 技术联系与反馈'
print '\t\t' + UseStyle(abstract)
abstract = '05. queue -- 计算队列查询与注意事项'
print '\n\t' + UseStyle(abstract),
abstract = '06. bsub_sw -- 提交作业到国产平台'
print '\t\t' + UseStyle(abstract, fore='red')
abstract = '07. bsub_x86 -- 提交作业到商用平台'
print '\t' + UseStyle(abstract, fore='red'),
abstract = '08. compiler_sw -- 国产平台编译器信息'
print '\t\t' + UseStyle(abstract)
abstract = '09. compiler_x86 -- 商用平台编译器信息'
print '\t' + UseStyle(abstract),
abstract = '10. job -- 作业状态查询与管理、节点状态查询'
print '\t\t' + UseStyle(abstract)
abstract = '11. download -- 数据传输与下载'
print '\t' + UseStyle(abstract),
abstract = '12. memory -- 存储查询'
print '\t\t\t' + UseStyle(abstract)
abstract = '13. bsub_error -- 作业提交时常见问题及解决方法'
print '\n\t' + UseStyle(abstract),
abstract = '14. run_error -- 程序运行时常见问题及解决方法'
print '\t' + UseStyle(abstract)
abstract = '15. others_error -- 其他问题及解决方法'
print '\t' + UseStyle(abstract),
abstract = '16. more -- 更多资料获取途径'
print '\t\t' + UseStyle(abstract)
def compiler_sw():
core_content = '基础编译器'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* c语言编译器：
主核: sw5cc -host
从核: sw5cc -slave
混合链接: sw5cc -hybrid
* c++编译器：
主核: sw5CC -host
从核: 不支持
混合链接: sw5CC -hybrid
* Fortran:
主核: sw5f90 -host
从核: sw5f90 -slave
混合链接: sw5f90 -hybrid
* 使用示例：
sw5cc -host -c master.c
sw5cc -slave -c slave.c (纯主核程序可省略该步骤)
sw5cc -hybrid master.o slave.o -o test
'''
print '\t' + UseStyle(content)
core_content = '并行编译器'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* C语言编译器: mpicc
* C++编译器: mpiCC
* Fortran编译器: mpif90
'''
print '\t' + UseStyle(content)
core_content = 'OpenACC编译器'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* C语言编译器: swacc
* Fortran编译器: swafort
'''
print '\t' + UseStyle(content)
core_content = '常用编译选择'
print '\n' + UseStyle(core_content, mode='bold')
content = '''
* -OPT:IEEE_arith=2 浮点异常
'''
print '\t' + UseStyle(content)
core_content = 'sunway --help 获得更多帮助'
print '\n' + UseStyle(core_content, mode='bold')
others = '''
(更为详细的介绍，请查阅无锡超算官网“上机指南”中相关文档)
'''
print UseStyle(others)
