分布式存储作为全新的存储架构,近些年来一直备受瞩目。随着大数据、云计算、高性能计算等新兴IT业务的应用越来越广泛,分布式存储又一次被推向了风口浪尖。
为了更好的服务用户,宏杉推出自主研发的分布式产品——MOFS分布式文件系统。MOFS分布式文件系统的定位是服务于企业数据化的基础平台,旨在帮助企业解决运营和生产过程中各类业务产生的非结构化数据的存储、共享、安全、扩展、性能、可管理性等实际需求;并为特定的行业用户提供完全自主可控的数据存储解决方案。MOFS的核心是全对称的分布式文件系统(不包含单独的元数据节点),通过自研的多协议中间件使业务系统可以同时使用不同的接口和协议存取全局统一命名空间中的数据。
宏杉MOFS分布式文件系统产品分为服务器架构和网关架构两种。两种架构分别适用不同的业务需求。
网关架构采用分布式文件系统与存储节点二者分离,由专属的网关硬件平台运行分布式文件系统,存储节点仅提供存储空间支持。这样的好处在于充分的利用硬件资源,可以保证整个分布式文件系统的工作效率。网关架构适合于性能要求较高、存储容量灵活扩展的场景,可以提供优秀的业务带宽保障性能需求,灵活支持SSD,SATA,SAS,NL-SAS中的一种或多种类型企业级硬盘。
服务器架构为全对称的分布式架构,采用通用的服务器架构与分布式软件相结合,为用户提供容量和性能可按需横向扩展的高可靠、高性能文件存储服务,用户业务系统在文件存储方面的性能和扩展瓶颈可以得到有效解决。其不仅具有巨大的横向扩展能力和超高的聚合性能、支持海量文件的并发访问,服务器架构适用于海量数据存储,业务本身对性能有一定要求,且能帮助客户实现高性价比的应用场景中。
MOFS分布式文件系统具备很好的并发性,每个物理节点都可以同时接入很多的客户端;这些客户端可以并发的进行文件访问操作;同时在关闭客户端和存储端都关闭TCP/IP的445和139端口的情况下,windows客户端仍能对文件存储进行正常访问。
MOFS为用户提供CIFS、NFS、FTP、私有POSIX、iSCSI、FC、SCSI over RDMA 、NDMP、S3、Swift、Http、RESTful等访问服务,让用户业务轻松接入存储系统,实现分布式系统服务。分布式系统服务对外提供NAS协议、块协议、对象多种访问方式;同时可以将共享资源池对外提供统一命名空间且可动态伸缩,提供存储协议访问等增值服务。
MOFS分布式文件系统具备强大的扩展能力,无论节点、存储阵列,都支持从小规模到大规模的平滑扩展、无缝升级。可按需通过增加节点或存储阵列扩展MOFS集群规模,增加整体容量或者性能。MOFS分布式存储系统的容量可以扩展到EB级别,支持在线扩容,扩容过程对业务系统完全透明,扩容后可立即获得更高的聚合性能和更大的容量。用户可以随时按需购买配置,这将大大降低用户的采购和使用成本。 MOFS整个系统具有良好的负载平稳性,既能在单文件单通道情况下发挥单通道最高性能,又能在多文件多通道情况下发挥聚合性能,可实现随着节点数量的线性增加,保证系统的聚合带宽性能呈线性增加趋势。
MOFS分布式文件系统支持集群高可用部署,在MOFS网关架构中,每两节点可实现两两互备,当某一个节点故障时,其对端节点会自动接替故障节点所承载的数据IO,实现自动接管,保证数据不丢失,上层业务不中断。
MOFS各个节点的缓存在提供数据加速的基础之上,也具备相关的可靠性设计,在缓存出现读写错误、硬件故障、电源掉电的情况下,依然能够保证数据的可靠和安全。
MOFS按照既定的数据分布均衡策略将文件分布在MOFS集群的各个节点中。即便集群中存在存储介质或节点失效,MOFS的数据分布策略依旧可以自动重建所需的数据,每TB重建时间小于15分钟。MOFS通过Erasure Coding或副本来实现文件的数据保护。EC和传统RAID有很多相似之处,RAID和EC都要将文件数据进行切片,不同分片存储到不同盘上实现错误隔离。支持N+M纠删冗余模式,最大可支持4个节点同时失效而不丢失数据。同时支持基于目录的多副本冗余模式来保证数据的高可靠。MOFS还可以将数据写入任意两套或多套存储中,实现数据多份保存的目的,任意一份数据丢失或损坏,业务不中断,数据不丢失。MOFS的硬件架构均采用冗余设计,在业务存取过程中发生某种硬件故障时,MOFS的硬件冗余设计可确保对应的业务请求被正确处理、从而支持业务无中断地可靠运行。MOFS软件支持防病毒功能,有效保护数据安全。
MOFS分布式存储是超大规模的集群式文件系统,总体的多节点构成统一的一个整体文件系统,提供百亿级的文件数量支持和数千GB的访问带宽,单节点带宽高达10GB/s。
MOFS分布式存储具备良好的大文件系统支持能力。单一卷/文件系统的支持容量无上限,每个文件系统内部已验证支持超过2000亿个文件及目录。整个支持的最大的管理容量达到EB级。
以网关架构部署的MOFS后端空间可同时支持SAN和分布式文件系统使用,构建统一资源池,可同时提供SAN+高性能、海量文件读写访问功能,同时,后端存储可利旧宏杉原有存储,帮助用户节约采购成本,最大化利用存储资源。
以网关架构部署的MOFS后端存储空间拥有统一缓存池,并可同时支持SAN和分布式文件系统使用,构建统一资源池,可同时提供SAN+高性能、海量文件读写访问功能,同时,后端存储可利旧宏杉原有存储,帮助用户节约采购成本,最大化利用存储资源。
MOFS分布式存储支持跨平台文件共享支持,支持的操作系统包括Windows、Linux、Mac OS、VMWare ESX、ESXi、XEN、Hyper-V、KVM等。通过跨平台的数据共享,不仅避免了信息孤岛,还提高了空间的利用率。
MOFS分布式存储对外提供 CIFS、SMB、 NFS、 FTP、SNMP 等接入功能,并提供统一命名空间,让用户业务轻松接入存储系统。访问时支持集群节点间负载均衡及管理功能。在这些功能特性基础上,由于全对称的架构设计使得每个节点都可以对外提供全局的业务访问,且任何单节点故障时可自动切换。
MOFS分布式存储可以与宏杉先进的CloudSAN解决方案全面融合,将SAN和NAS两个云平台架构完全融合,既为用户提供了非结构化数据管理的文件系统平台,又可以利用CloudSAN的优秀特性对结构化数据进行全面管理,最终实现在统一的平台上实现对结构化数据和非结构化数据的全面管理。同时MOFS分布式存储支持双活访问功能,支持NAS和SAN一体化双活。双活功能集成到分布式存储软件系统中,无需配置类似网关的额外硬件设备。
滑动查看完整规格
一体化架构 | |||||||
---|---|---|---|---|---|---|---|
节点类型 | MSmart3012G2 MOFS3012G2 |
MSmart3036G2 MOFS3036G2 |
MOFS3012-HG | MOFS3036-HG | MOFS3012-FT | ||
节点数量 | 3~10000 | ||||||
CPU | X86 CPU | 国产多核处理器 | |||||
单节点缓存 | ≥32GB | ≥32GB | ≥32GB | ||||
单节点最大带盘数 | 18 | 42 | 16 | 40 | 12 | ||
单文件最大尺寸 | EB级以上 | ||||||
单一文件系统大小(单一命名空间) | 256PB | ||||||
支持文件最大数量 | 无上限,已验证超过2000亿 | ||||||
集群支持最大容量 | EB级以上 | ||||||
客户端数量支持 | 100000台 | ||||||
单一文件大小 | 无上限 | ||||||
单一目录支持 | 无上限 | ||||||
支持块存储接口 | FC、iSCSI、SCSI over RDMA、增强型块协议 | ||||||
支持文件系统 | CIFS、NFS、HDFS、FTP、私有POSIX协议、增强型文件协议 | ||||||
支持对象接口 | S3、OpenStack Swift | ||||||
自定义API接口 | Restful API | ||||||
支持操作系统 | Windows、Linux、Unix | ||||||
虚拟化支持 | VMware、Citrix、KVM、Hyper-V、vSphere | ||||||
容器支持 | 基于Docker技术,支持K8S平台 | ||||||
域管理接口 | AD、LDAP、NIS、高级权限接口 | ||||||
管理方式 | GUI(web)/CLI,可视化系统性能、状态监控,支持邮件、SNMP告警,远程管理和事件通知 | ||||||
高级功能 | 多副本(2~8副本)、纠删码、小文件聚合、自动精简、智能分层存储、自动数据迁移、性能监控、WORM、回收站、快照、复制、镜像、双活、异构数据迁移、服务质量控制(QoS)、多租户、重复数据删除、数据压缩、GPU Direct等 |
该文档专属用户才能查看下载。