대한CNI / 대한몰드

Windows 환경에서 Ceph 스토리지를 네트워크 드라이브로 연결해 사용하는 사용자들에게 획기적인 성능 향상을 제공을 위해 SMB Multichannel 을 제공하게 되었습니다. 1. SMB 멀티채널이란? 기존의 SMB(Server Message Block) 연결은 클라이언트와 서버 사이에 단 하나의 네트워크 연결(TCP 연결)만 생성했습니다. 반면, SMB 멀티채널은 다음과 같은 방식을 사용합니다.다중 경로 활용: 클라이언트와 서버 사이에 여러 개의 네트워크 인터페이스 카드(NIC)가 있다면, 이를 동시에 모두 사용하여 데이터를 전송합니다.단일 NIC 내 다중 연결: NIC가 하나뿐이라도 다중 RSS(Receive Side Scaling) 대기열을 지원한다면, 여러 개의 TCP 연결을 생성해 CPU..

Ceph의 차기 버전인 'Tentacle' 릴리스에서 도입된 객체 게이트웨이(RGW) 속도 제한(Rate Limiting) 기능의 강화에 대한 내용에 대해 알아보겠습니다. 1. 배경 및 문제점 기존의 Ceph RGW의 속도 제한은 주로 읽기(GET/HEAD)와 쓰기(PUT/POST) 작업, 그리고 대역폭에만 집중되어 있었습니다. 이로 인해 다음과 같은 한계가 있었습니다.목록 조회(LIST) 부하: 수백만 개의 객체가 포함된 버킷을 조회하는 작업은 인덱스 스캔을 유발하여 클러스터에 큰 부하를 주지만, 기존에는 이를 일반 읽기 작업과 분리해서 제한할 수 없었습니다.삭제(DELETE) 관리 부족: 대규모 삭제 작업이 클러스터 성능에 영향을 주거나 사고로 이어질 수 있음에도, 기존에는 일반 쓰기 예산 내에서만 ..

MinIO 라는 SDS(Software Define Storage) 설치 방법에 대해서 소개하고자 한다. 간단하게 설치 사용할 수 있는 장점이 있어 테스트 및 소형으로 운영이 가능할 것으로 보인다. 본 내용은 Single-Node에 설치하는 방법에 대하여 설명하였다.  1. OS 설치MinIO는 RHEL 또는 Debian/Ubuntu 계열에 대하여 지원하고 있으며, 설치 테스트를 위하여 Ubuntu 22.04.4  LTS 설치하였다.   2. Network 설정모든 서버의 네트워크 설정은 고정 IP을 사용하도록 한다.minio:~$ sudo vi /etc/netplan/00-installer-config.yaml# This is the network config written by 'subiquity'n..

IBM 에서 Ceph Storage 을 이용한 Appliance 장비가 출시되었습니다. 두가지 종류의 Node 타입을 제공되고 있으며 사용 용도에 따라 선택적으로 사용 가능합니다. 하드웨어 장비 스펙 및 이미지를 선택하시는데 참고하시기 바랍니다.  Specifications Storage Ceph NodeStorage Ceph NVMe Flash NodeProcessorIntel Xeon Silver 4313Intel Xeon Gold 6438N# of Processors22RAM256GB512GBOS Disks2 x 240GB Raid 1 SSD2 x 480GB Raid 1 SSDData Acceleration Disks2 X 3.84TB SSDN/ARack Height2U2UWidth482 mm (1..

Ceph 은 구조적으로 Disk 결함이 발생하여도 데이터를 유실되지 않고 성능 저하 상태에서 동작할 수 있습니다. 장애가 발생한 드라이브의 데이터를 자동으로 다은 OSD에 저장된 데이터의 추가 사본을 클러스터의 다른 OSD로 자동으로 백필(backfill) 됩니다. 이러할 경우, 결함 OSD 드라이브를 교체하고 OSD를 수동으로 교체합니다.  1. Ceph 클러스터에서 OSD 제거1.1. cephadm shell 로그인 [root@host01 ~]# cephadm shell 1.2 장애 OSD 확인[ceph: root@host01 /]# ceph osd tree | grep -i downID CLASS WEIGHT TYPE NAME STATUS REWEIGHT PRI-AFF..

Ceph Storage의 Block Device (RBD) 에 대한 성능 테스트 방법입니다.  1. pool 생성rbd을 지원하는 pool 생성 또는 기존 pool에 rbd 타입을 추가한다.  2. pool 에 image 생성 3. image 쓰기 성능 테스트 [ceph: root@cnode1 /]# rbd bench --io-type write image01 --pool=testbenchbench type write io_size 4096 io_threads 16 bytes 1073741824 pattern sequential SEC OPS OPS/SEC BYTES/SEC 1 6256 4850.97 19 MiB/s 2 6448 3178.13..

Ceph storage에 대한 기본적인 성능 테스트에 대해서 확인해 보도록 합니다. Ceph storage는 rados becnh 라는  벤치마크 툴을 기본적으로 제공하고 있습니다. 읽기와 쓰기에 대한 성능 테스트 방법에 대하여 소개하도록 하겠습니다.  모든 파일 시스템 cache 삭제[ceph: root@cnode1 /]# echo 3 | sudo tee /proc/sys/vm/drop_caches && sudo sync3 테스트 pool 생성 (testbench)[ceph: root@cnode1 /]# ceph osd pool create testbench 100 100pool 'testbench' created dashboard 에서 testbench pool 생성 확인이 가능하다.  1. pool..

다음은 IBM Storage Ceph Object S3-Select 기능을 활성화 하여 Trino 에서 수행한 벤치마트 테스트 결과에 대한 내용입니다. 1TB 와 3TB 기준TPC-DS 벤치 마크 쿼리를 사용하여 진행되었으며 평균 2.5배 성능이 향상되었으며 S3-Select 기능을 비활성화 하였을 때 보다 네트워크 데이터 처리량이 144TB 감소하여 최대 9배 이상 향상된 것을 볼 수 있었습니다. Trino 란? 사용자가 단일 SQL 문을 사용하여 여러 소스의 데이터를 쿼리할 수 있는 분산 SQL 쿼리 엔진입니다. 테스트 방법 다양한 테스트를 위하여 1TB, 2TB, 3TB 세 가지 스케일 팩터에서 72개의 TPC-DS쿼리 를 실행하여 테스트를 진행하였습니다. 데이터는 압축되지 않은 CSV 형식으로 진..

IBM Storage Ceph 7.0 에서 개선 사항 중, 하나인 NVMe over TCP Storage Gateway에 대한 추가 및 설정 방법에 대하여 알아보도록 하겠습니다. 다음 내용은 Tech Preview Code 로 참고만 하시는게 좋을 것 같습니다. NVMe over TCP 는 데이터 센터에서 사용되는 고대역폭, 저지연 광 네트워크를 활용하여 NVMe 드라이브의 성능 및 집약도, 병렬성을 확보하도록하는 네트워크 전송 기반 스토리지 프로토콜 입니다. 이러한 방식을 이용하여 증가하고 있는 대규모의 데이터 센터, 컨테이터 및 가상 머신에 대하여 효율적인 고성능 솔루션을 제공할 수 있습니다. NVMe Gateway 서비스와 리스너를 구성하여 NVMe namespace를 Ceph RBD 이미지와 연결..

안녕하세요. 대한씨앤아이 입니다. ARA S3 Drive 서비스를 오픈하게 되었습니다. 휴대폰 및 태블릿의 데이터를 저장 및 백업을 지원해 드립니다. Ceph Storage 의 3중 복재를 통한 데이터 보호 및 Object 분산 방식을 통한 빠른 업/다운 로드를 지원하고 있습니다. 계속적인 업그레드를 통하여 보다 좋은 서비스를 지원해 드리도록 하겠습니다. http://araspace.co.kr ARA S3 Drive - 모든 콘텐츠에 대한 저장 및 백업 Download App Now ARA S3 드라이브는 안드로이드 및 iOS 용 핸드폰 및 휴대기기에서 원활하게 사용할 수 있습니다. araspace.co.kr