中国土地勘测规划院主要开展土地资源调查与评价及有关技术标准研制工作,承担全国土地资源调查、监测专项计划的组织实施任务。中国土地勘测规划院为满足第三次全国国土数据处理工作的需求,亟待解决原有文件系统存在带宽及检索性能不足的问题,扩充现有的文件管理系统和数据库管理系统的存储能力,提高数据存取、检索和处理效率,提升业务的自动化能力。
根据客户提出的数据存取速度慢、检索效率低等痛点,宏杉科技提出了全对称分布式文件存储,其采用特有的内存预留技术将预留内存空间用于文件IO,管理方式简单高效,也不会被计算组件回收和占用,通过自有的隔离技术将多处理器的性能充分发挥,从而获得更好的数据转发和处理能力。
另外,宏杉科技分布式文件采用数据通道与元数据通道分离的形式实现,且元数据与数据存储节点可动态进行扩容,从而加大元数据服务器检索能力,与数据传输的性能,也就是说在高并发访问情况发生时,元数据服务器可迅速的检索到数据元数据信息,然后让数据存储端与访问端直接建立数据通道,进行并发数据读取,从而提升高并发访问效率。
宏杉科技分布式文件采用高可靠的后端网络高冗余技术,当单台后端网络交换机故障、主机后端口故障时,均可以通过数据传输机制完全处理,无需再交换机上做任何特殊设置,同时可并发的使用多台交换机,将硬件投资利用率最大化。
宏杉科技分布式文件 Windows命名空间原生支持通过一个独有的索引树来索引该目录下所有的目录项,任何一个大小写不敏感的查找操作,可以在近似常数阶时间复杂度上完成。解决了内存中加载所扫描目录的全部目录项、逐个进行大小写不敏感的字符串匹配。扫描大量目录项时效率低下的问题。