超算小站 超算小站
首页
  • 注册账号
  • 登录系统
  • 熟悉系统
  • 配置环境
  • 数据管理
  • 作业管理
  • 集群软件环境:

    • 01.编译环境
    • 02.基础库
    • 03.应用软件
    • 04.工具软件
    • 05.常用语言环境
    • 06.使用进阶
  • 入门课程

    • 01.超算历史
    • 02.VPN登录
    • 03.Mobaxterm工具
    • 04.Linux基本命令
    • 05.Module环境变量管理工具
    • 06.Vim文本编辑器使用
    • 07.Slurm作业管理系统
HPC&AI
  • 01.登录问题
  • 02.编译问题
  • 03.作业问题
  • 04.存储和数据问题
  • 05.GPU问题
资料下载
归档
关于我
🚀试用
首页
  • 注册账号
  • 登录系统
  • 熟悉系统
  • 配置环境
  • 数据管理
  • 作业管理
  • 集群软件环境:

    • 01.编译环境
    • 02.基础库
    • 03.应用软件
    • 04.工具软件
    • 05.常用语言环境
    • 06.使用进阶
  • 入门课程

    • 01.超算历史
    • 02.VPN登录
    • 03.Mobaxterm工具
    • 04.Linux基本命令
    • 05.Module环境变量管理工具
    • 06.Vim文本编辑器使用
    • 07.Slurm作业管理系统
HPC&AI
  • 01.登录问题
  • 02.编译问题
  • 03.作业问题
  • 04.存储和数据问题
  • 05.GPU问题
资料下载
归档
关于我
🚀试用
  • 注册账号

  • 登录系统

  • 熟悉系统

  • 配置环境

  • 数据管理

    • 上传下载数据
    • 数据传输工具

    • 线下拷贝数据
      • 线下拷贝数据
    • 跨集群拷贝数据
  • 作业管理

  • 技术支持
  • 用户手册
  • 数据管理
zhenggang
2024-05-30
目录

线下拷贝数据

# 线下拷贝数据

在某些特定用户领域,如气候气象领域,用户的计算结果会产生大量的结果文件需要处理,当互联网络远程传输的速度无法满足需求时,可以考虑通过邮寄硬盘的方式进行线下的数据拷贝

超算中心针对有此类需求的用户,提供数据挂载服务,基本流程为:

说明如下:

  1. 联系:联系超算工程师,请说明使用集群、账号,提供硬盘品牌、规格、接口类型、是否需要供电等信息;并确认邮寄到超算中心的邮寄信息。
  2. 邮寄:邮寄到超算中心
  3. 检查:超算工程师进行用户确认,以及硬盘安全性检查
  4. 挂载:超算工程师联系系统管理员,挂载硬盘到指定数据拷贝节点,mount挂载到指定目录,提供给用户登录使用方式
  5. 拷贝:用户根据自身需求进行数据的上传下载
  6. 卸载:用户拷贝完成后,联系超算工程师进行硬盘卸载
  7. 邮寄:提供邮寄信息,由超算工程师进行寄回

拷贝速度

超算中心会将硬盘直接插到数据拷贝节点,理论上实现硬盘的读写性能上限。 通常拷贝速度还非常受文件大小的影响,当拷贝大量小文件时读写性能无法充分发挥。

命令行终端
跨集群拷贝数据

← 命令行终端 跨集群拷贝数据→

Theme by Vdoing | Copyright © 2015-2024 Zheng Gang | MIT License | 津ICP备2021008634号
  • 跟随系统
  • 浅色模式
  • 深色模式
  • 阅读模式
×