상품을위한 최고의 분산 파일 시스템 Linux Storage Farm [폐쇄
https://stackoverflow.com/questions/269179
-
06-07-2019 - |
italiano
english
français
española
中国
日本の
العربية
Deutsch
한국어
Português
Russian문제
수백 명 (수백 명)을 놓고있는 여분의 인텔 리눅스 서버가 많이 있으며 웹 호스팅 및 파일 공유 환경에서 분산 파일 시스템에 사용하려고합니다. 이것은 HPC 응용 프로그램을위한 것이 아니므로 고성능이 중요하지 않습니다. 주요 요구 사항은 고 가용성입니다. 한 서버가 오프라인 상태가되면 하드 드라이브에 저장된 데이터는 여전히 다른 노드에서 사용할 수 있습니다. TCP/IP를 통해 실행되고 표준 POSIX 파일 권한을 제공해야합니다.
다음을 보았습니다.
광택http://wiki.lustre.org/index.php?title=main_page) : 온다 진짜 닫히지 만 노드의 데이터에 대한 중복성을 제공하지 않습니다. RAID 또는 DRBD를 사용하여 데이터 HA를 만들어야합니다. 태양과 오픈 소스에 의해 지원되므로 잠시 동안 주변에 있어야합니다.
gfarm (gfarm)http://datafarm.apgrid.org/) : 중복성을 제공하지만 복잡성과 유지 보수 비용으로 보입니다. 광택만큼 잘 지원되지는 않습니다.
이들 또는 다른 시스템에 대한 경험이 있습니까?
해결책
또한 확인하십시오 Glusterfs
편집 (2012 년 8 월) : 세프 마침내 준비하고 있습니다. 최근에 저자가 형성되었습니다 잉크 탱크,이를 위해 상업적 지원을 판매하는 독립 회사. 일부 발표에 따르면, Mountable Posix Compliant Filesystem은 최상위 계층이며 아직 테스트되지 않았지만 하위 층은 현재 한동안 생산에 사용되고 있습니다.
흥미로운 부분은라도 레이어로, librados 라이브러리 (여러 언어에 사용할 수 있음) 및 Amazon S3 호환 RESP API. 어느 쪽이든 웹 서비스에 대규모 스토리지를 추가하기에 적합합니다.
이 비디오 철학, 건축, 기능 및 현재 상태에 대한 좋은 설명입니다.
다른 팁
제 생각에는 Linux의 최고의 파일 시스템은 Moosefs입니다. 아주 새롭지 만 Ceph 및 Luster와 비교할 수있는 기회가 있었으며 Moosefs가 가장 좋은 것이라고 확신합니다.
Gluster는 현재 많은 압박을 받고 있습니다.
누군가가 당신이 그것을 사용하도록 강요하지 않는다면, 나는 또한 광택 이외의 것을 사용하는 것이 좋습니다. 내가 다른 사람들로부터 듣는 것과 꽤 오랫동안 악몽을 준 것에서, 모든 종류의 상황에서 광택이 매우 쉽게 분해된다는 사실입니다. 그리고 시스템의 단일 클라이언트 만 고장 나면 일반적으로 중요한 글로벌 잠금 장치를 유지하면서 일반적으로 끝없는 do_nothing_loop 모드에 들어갑니다. 따라서 다음에 다른 클라이언트가 동일한 정보에 액세스하려고 할 때도 매달릴 것입니다. 따라서, 당신은 종종 전체 클러스터를 재부팅하게됩니다. 이것은 당신이 정상적으로 피하려고 시도하는 것 같아요;)
FHGFS (http://www.fhgfs.com)와 같은 최신 병렬 파일 시스템은 여기에서 더 강력하며 동일한 시스템에서 서버 및 클라이언트 구성 요소를 실행하는 것과 같은 좋은 일을 할 수 있습니다 (내장 HA 기능이 여전히 아래에 있지만 여전히 아래에 있습니다. 팀의 누군가가 나에게 말했듯이 개발은 내가 들었던 것에서 그들의 구현은 정말 대단할 것입니다).
Luster는 우리를 위해 일하고 있습니다. 완벽하지는 않지만 우리가 시도한 유일한 것은 부하를 통해 고장났습니다. 우리는 여전히 LBUG를 때때로 얻고 100TB + 파일 시스템을 다루는 것은 결코 쉽지 않지만 광택 시스템은 작동하고 성능과 가용성을 모두 증가 시켰습니다.
세프 아레나에 유망한 새로운 입장으로 보입니다. 이 사이트는 아직 생산을 사용할 준비가되지 않았다고 주장합니다.
나는 분산 파일 시스템에 대해 많이 읽었으며 FHGF가 최고라고 생각합니다.
시도해 볼 가치가 있습니다. 자세한 내용은 다음과 같습니다.
