跳转至

数据存储

数据存储方案

平台提供了以下几种数据存储方案,可根据需要选择。

名称 目录 类型 作用 权限/随实例迁移 单价 保存期限
hy-tmp /hy-tmp 实例存储 训练数据 读写/否 每GB 0.0004元/小时 实例关机超过 24 小时后数据会被删除
nas /hy-nas 远程存储 私有存储 读写/是 每GB 0.0007元/小时 从欠费算起第 15 天中午 12 点会删除
个人数据 云盘 私有存储 读写/是 每GB 0.0004元/小时 从欠费算起第 15 天中午 12 点会删除
公共数据集 /hy-public 云盘 公共数据 只读/是 永久免费 无限

提示

如果数据使用空间产生收费,收费标准在不足 0.01 元的情况下,则会按照 0.01 元标准进行收取,超出 0.01 元标准,则按照实际价格进行收取。

nas为特定实例才具备的存储,如果您要使用nas存储,则在创建实例时选择具备 “共享存储”的实例,下图中展示具备和不具备nas存储的实例。

关于/hy-tmp警告

  1. /hy-tmp目录为临时存放训练数据目录,实例启动后,将训练数据上传或下载至该目录。
  2. 训练数据结束后,如果需要保存训练数据或训练结果,则将训练数据和训练结果通过OSS命令工具上传至个人数据;上传至个人数据后,请删除/hy-tmp/目录中的遗留数据。
  3. 数据训练后,实例的/hy-tmp目录将在关机24小时后自动清除。如果实例关机后被别人租用,则无法帮您恢复数据。
  4. 实例迁移过程中,不会自动迁移/hy-tmp目录,并且会清除实例中/hy-tmp/目录下的数据,迁移前则需要把实例中的/hy-tmp/目录中的数据通过OSS命令工具上传至个人数据空间。
  5. /hy-tmp目录为同一台服务器上的多个实例共享目录,具体可使用空间登录实例后可通过df -hT | egrep 'Avail|hy-tmp'命令查询。

数据存储建议

数据存储建议

  1. 个人数据: 数据都可以放到 个人数据 的云盘中,长期保存,成本偏低,“云端加密存储,安全可靠”。每GB 0.0004 元/小时。
  2. nas: 如果希望多个主机共享数据,可以将数据存到 /hy-nas 共享存储。每GB 0.0007 元/小时。(目前不是所有机器都支持NAS,需要选中支持共享存储的机器)。
  3. hy-tmp: 训练临时的数据,对速度要求最高,建议放到 /hy-tmp 里。
  4. 公共数据集: 公共数据集则是大家在平台论坛中所提出的数据集下载需求,平台下载后同步到公共数据集为大家使用。永久免费。

数据存储期限

数据保存期限

  1. 按量付费关机或包周包月到期后,超过 10 天后实例会自动被删除。
  2. 按量付费关机或包周包月到期后,超过 24 小时后实例中的 /hy-tmp 数据会被删除,但是平台提供了自动化上传训练数据的方案,来规避该问题,查看 执行训练并自动上传结果后关机了解。
  3. 如果发生欠费,从欠费算起第 15 天中午 12 点会删除 个人数据以及nas远程存储 /hy-nas 还有自定义镜像

数据存储安全

数据的安全性和高可用性

个人数据:

恒源云的个人数据云存储本身是非常安全的。提供端到端的安全服务。访问数据时,只有该存储的拥有者才能够访问,访问时需要提供访问账号密码,数据将存储在同一区域的多个不同 AZ。当某个 AZ 不可用时,仍然能够从其他 AZ 正常访问数据,适用于对可靠性要求较高的数据存储场景,可用性达到 99.99%

nas远程存储:

恒源云的nas远程存储具备高可用性和持久性,为海量的小文件、低延迟高IOPS型应用提供有力支持。该存储默认挂载到具备 "共享存储" 实例的/hy-nas目录,存储在/hy-nas目录中的数据也只有您自己有权访问。

tmp本地存储:

恒源云的tmp临时存储使用的磁盘都是在服务器本机由磁盘阵列RAID所组成的高效磁盘,读写效率最快。