HyperFS - enterprise File System

HyperFS는 SAN / Block 및 Scale-Out NAS 통합 환경에서 비디오 및 기타 대용량 미디어 파일 작업을 위해 특별히 제작된 통합 스토리지 파일 시스템을 제공합니다. HyperFS는 방송, Film Post, VFX 팀등 비디오 및 기타 대용량 Media-centric 영상 후반 작업을 위해 특별히 제작되었으므로 미디어 환경 중심의 기업의 요구 사항을 해결할 수 있는 Scale Logic inc.의 enterprise File System 솔루션입니다.

Optimized for video production workflows

데이터는 지속적으로 끊임없이 증가하고 있으며, 파일 크기가 HD에서 4K에서 8K로 이동함에 따라 파일 크기가 점점 커지고 있습니다.
방송, 영화, OTT 제작 환경등 증가하는 스토리지 요구를 수용하기 위해 초기의 작은 용량의 Storage Pool을 요구에 따라 확장 할 수 있어야만 합니다. 이와 관련해 또 다른 측면은 “Scale-out” 입니다, 점점 더 많은 고속, 실시간 사용자가 스토리지에 액세스 할 수 있도록하는 기능이 절대적으로 필요합니다. 조직의 규모나 스토리지 요구 사항에 상관없이 HyperFS는 다른 어떤 Enterprise 파일 시스템보다 효율적으로 확장 가능하고 고속으로 “Scale-out” 처리 ​​할 수 ​​있습니다.

The alternative file system for SAN and Scale-Out NAS

- Better TCO than the competition
- Complete set-up through easy-to-use GUI
- Compatible with most media-centric applications
- US-based support with software engineers
HyperFS의 enterprise File System 기능은 방송, 영화 업계 다양한 어플리케이션의 인증, Big-size 단일 파일시스템에 대한 Boack-level 및 File-level 동시 액세스 지원, Mac, Windows,및 Linux 클라이언트에서의 해당 파일 시스템 동시 액세스를 통해 Workflow 작업의 편의성을 보장합니다.

We live in a world in which more data has been created in the last 5 years than in the aggregate of prior human history.

미디어 및 엔터테인먼트 산업은이 놀라운 성장 곡선의 주된 촉매제이며 데이터 생성은 다른 산업보다 더 빠르고 더 빠르게 진행됩니다

YouTube는 평균적으로 사용자가 매분마다 300시간 분량의 동영상을 업로드한다고 말합니다. 저장 공간 측면에서 볼 때 YouTube는 매분마다 사용자당 수 테라 바이트의 데이터가 저장공간을 확보 해야합니다.

분산 파일 시스템(Distributed file systems)은 1980 년대에 개발되어 이후 발전해 왔지만 초기 목표는 같았습니다. 시스템을 사용자가 작동 원리를 이해하지 않아도 사용하기 쉬워야하고, 하드웨어 구성품에 불량이 발생하더라도 데이터를 온전하게 유지할 수 있는 Fault-tolerance를 갖춰야합니다.

또한 필요에 따라 storage 용량 크기를 확장할 수 있어야 합니다.

정리하면, 분산 파일 시스템은 투명(Transparent )해야하며, 내결함성(Fault-tolerance) 및 용량 확장성이 뛰어나야 합니다.

그러나 실제로는 투명성은 실제 사용상 뒤죽박죽이 되는 경우가 허다합니다. 파일 시스템은 하나의 OS 에서는 작동하지만 다른 OS 시스템에서는 작동하지 않을 수도 있고, 서로 다른 운영 체제들에서 작동 할 수도 있지만 한 번에 한 명의 사용자만이 파일/폴더/볼륨을 볼 수 밖에 없는 경우도 있습니다.

사용자가 공동 작업하기 위해 사용하는 다양한 OS 시스템, 즉 대부분의 비디오 및 그래픽 편집 기능을 포함하는 범주에서 이러한 파일 시스템은 사용자가 파일에 액세스 할 수 있는지 또는 그 파일을 열어 사용하는 사람이 다른 누구인지를 생각하도록 요구합니다. 이러한 걱정은 사용자의 창의적인 노력에 집중하지 못하고 공유 스토리지 파일 시스템에 신경을 쓰이게 합니다. 결국 투명하지 않은 것입니다

또한 그 분산 파일 시스템이 얼마나 확장성과 Fault tolerance 및 Scale-out 를 갖추고 사용자와 함께 작동하는지에 관계없이, 대부분의 경우 관리의 복잡성(administrative complexity) 측면을 들 수 있습니다. 사용자의 관점에서 볼 때 잘 작동하지만 시스템 관리자 측면의 기술적 인 노하우와 작업 시간은 실로 엄청납니다. 대부분의 경우 대용량 분산 파일 시스템 튜닝 작업은 예술 형식이며 쉽게 획득 할 수 없습니다.

HyperFS is a distributed file system.

내결함성과 관련하여 HyperFS의 강점은 장애 발생시 Performance 성능에 있습니다. HyperFS는 하드웨어의 일부가 실패 할 경우에도 시스템을 최대 용량으로 실행하는 Failover and Failback plans 을 가지고 있습니다. HyperFS는 Symantec 미러링 및 데이터 보호 응용 프로그램과의 긴밀한 통합을 포함하여 데이터 보안을 위한 다양한 옵션을 제공합니다. 전체 미러링이 옵션이지만 HyperFS는 미러링을 메타 데이터만으로 제한 할 수 있습니다.

여기에 용량 확장시에 사용되는 프로세스와 동일한 과장을 통해 불량 드라이브를 신속하게 진단하고 교체 할 수 있는 기능이 추가되어 있습니다. HyperFS는 장애 상황에서 작업을 계속 유지하고 신속하게 복구 할 수 있는 뛰어난 fault-tolerant 내결함성 솔루션입니다.

HyperFS는 많은 주요 OS 시스템에 환상적인 성능을 제공합니다. 동일 Storage Pool에 대한 완벽한 이 기종 크로스 플랫폼 액세스를 제공합니다. 우리의 파일 시스템은 비디오 및 기타 대용량 미디어 파일 작업을 위해 특별히 제작되었으며, 미디어 환경 중심의 기업에서 요구하는 솔루션입니다.

투명성 측면에서 HyperFS는 사용자 및 관리자 관점에서 모두 작동합니다. 다양한 시스템에서의 파일 사용 및 액세스는 200 개가 넘는 영상제작 응용 프로그램에서 작동하도록 인증된 시스템에 의해 자동으로 처리됩니다.

관리자는 몇 주, 몇 달이 아닌 몇 시간 내에 HyperFS를 배울 수 있습니다. 사용 편의성의 큰 부분은 HyperFS가 CLI 인터페이스만큼 강력한 GUI를 가지고 있으며 모든 OS 시스템에서 쉽게 배울 수 있다는 것입니다. 또한 관리자가 하나의 시스템에서 배운 내용은 HyperFS 클라이언트가 Windows, Mac 및 Linux는 물론 웹 GUI에서도 동일한 모양과 느낌을 갖기 때문에 다른 시스템에 적용 할 수 있습니다.

HyperFS 파일 시스템의 확장은 시스템을 사용하거나 관리하는 것처럼 간단합니다. HyperFS GUI는 사용 가능한 LUN을 검색 할 수 있으며, 몇 번의 마우스 클릭만으로 스토리지 풀에 추가하거나 제거 할 수 있습니다. 단지 Stroage 용량 크기만 추가 할 수 있는 것은 아닙니다.

“Scale-out” Processing power 확장 처리 또한 스토리지 용량 추가하는 것 만큼 간단합니다. Performance 학장 기능은 조직이 필요로하는 만큼으로 즉시 그리고 incremental 확장 할 수 있습니다.

HyperFS는 미디어 및 엔터테인먼트 산업을 위해 설계, 제작되었습니다. HyperFS는 200 개가 넘는 미디어 응용 프로그램에서 인증을 받았지만 미디어 및 엔터테인먼트 워크플로에 대한 최적화를 넘어, Admin 관리를 단순하게 유지하고, 거의 모든 OS 플랫폼에서 액세스를 허용하고, 쉽게 용량, Performance를 확장하고, Failure 발생 상황에서도 성능을 유지할 수 있는등 고객의 입장에서 모든 것을 계속합니다. Transparent, Fault-tolerant, and Scalable !!! HyperF는 이 모두를 고려한 완전한 분산 파일 시스템(Distributed file systems) 패키지입니다.

Features

• Windows/Linux/Mac cross-platform file sharing 

• File change notification for supporting growing files 

• Easy-to-use WebGUI/CLI 

• FLFI: File level fault isolation and file system uptime during single LUN failures 

• File Locking 

• Storage strategy support 

• Intelligent fault detection 

• SMTP email Alerts 

• System expansion on-the-fly supporting online HW migration 

• Capacity quota (Directory & User or Group)

• ACL support, AD/LDAP user integration 

• Log for performance analysis with Windows clients 

• Active anti-fragmentation 

• Support for data migration interface 

• Data & Metadata LUN Mirror 

• Auto load balance and fault isolation for Scale-Out NAS 

• Native multipath support 

• ICAP for anti-virus 

• SNMP monitoring 

• Single IP address and FQDN

HyperFS improved features include

SAN clients and LAN clients simultaneously access the same data either by file level (via Scale-Out NAS) or block level (via SAN) using 8Gb/16Gb Fibre Channel, 1Gb / 10Gb Ethernet, or ISCSI. 

This provides Windows, Mac, or Linux SAN-based editing clients with a way to share files with Windows, Mac, or Linux LAN clients using standard SMB, CIFS, or NFS protocols leveraging SLI’s integrated application server platform as a gateway to deliver Scale-Out NAS performance, and enabling file-based workflows for LAN clients. 

Dynamic Scale-Out, reconfiguration, and migration of storage means that your storage can scale as your usage grows. Thanks to the strong scalability, it supports a ZB-level storage capacity, files larger than 2 PBs, and more than one billion directories and files. 

By increasing storage devices, the system can expand its storage capacity and performance while online. 

The software is designed with client and MDC default diagnostic and performance counting functions. Therefore, it enables users to analyze causes of failures and to optimize the system’s performance by analyzing IO characteristics. 

The embedded anti-fragment distribution allocation algorithm and online de-fragment tool can help users reduce and clear fragments caused during continuous operating of the system.

Straight-forward data flow of HyperFS

HyperMDC 200D - Case Study _ Grupo Televisa

The Problem

• Televisa’s “Archivo Digital” department came to HDS for a new solution.
• They needed a way to migrate from their aging and closed architecture and increased support costs for updating Stornext 4.7 to 5.0
• Evolving infrastructure required Televisa to seek a media centric Scale-Out NAS based solution.

The Solution

• Already proven to be an exceptional solution for broadcast video workflows at many major networks worldwide, HDS proposed a HyperFS-based solution on HDS storage and servers with Scale- Out NAS to provide the flexibility to connect either high-speed SAN clients, or multiple LAN clients with high aggregate performance requirements.

HyperMDC 200D - Case Study _ HDS Workflow

The Solution

• ABC required a SAN-NAS hybrid solution to support diverse workloads and accessibility needs.
• With on-site editing booths and post-production rooms as well as affiliated station traffic, ABC wanted to ensure highest performance and availability for video files, data and metadata.
• Using Scale Logic HyperFS and Scale-out NAS Gateway(SONG), ABC worked across numerous industry applications and systems on Windows® and Apple Mac.
• For intelligent and centralized storage, ABC selected Hitachi Virtual Storage Platform (VSP) G series.
• This cohesive storage solution allows users to access the same files through SAN and NAS, with on-the-fly capacity and performance scaling, and robust high-availability access to billions of files, folders and objects.