손쉬운 데이터 복구를 위한 놀라운 4가지 팁

In 지난번 블로그에서는 오픈 소스 데이터 추출 도구에 대해 이야기했습니다. "ETL 도구"의 주요 목적은 조직 전반에 걸쳐 다양한 데이터베이스 또는 운영 시스템의 콘텐츠를 수집하고 이 모든 데이터를 중앙 집중식 데이터베이스로 이동/복사/전송하는 것입니다. 이 "중앙 데이터베이스"는 종종 "데이터 웨어하우스"로 명명됩니다. 또는 ETL 도구를 사용하여 간단한 SQL 문을 사용하여 수행하기 어려운 복잡한 데이터 변환을 수행할 수도 있습니다.

일부 상용 ETL 도구 목록은 다음과 같습니다.

• IBM INFOSPHERE 데이터 스테이지 –

ETL 도구이며 IBM 정보 플랫폼 솔루션 제품군 및 IBM InfoSphere의 일부입니다. 그래픽 표기법을 사용하여 데이터 통합 ​​솔루션을 구성합니다. 고성능 병렬 프레임워크를 사용하여 여러 시스템에서 데이터를 통합하고 확장된 메타데이터 관리 및 엔터프라이즈 연결을 지원합니다. 확장 가능한 플랫폼은 분산 및 메인프레임 플랫폼에서 유휴 빅 데이터(Hadoop 기반) 또는 이동 중인 빅 데이터(스트림 기반)를 포함하여 모든 유형의 데이터를 보다 유연하게 통합합니다.

• 마이크로소프트 SQL 서버 통합 서비스(SSIS) –

Microsoft SSIS는 Microsoft의 SQL Server 데이터베이스에 내장된 엔터프라이즈 데이터 통합, 데이터 변환 및 데이터 마이그레이션 도구입니다. 데이터 분석 및 정리, 데이터 웨어하우스 업데이트를 위한 추출, 변환 및 로드 프로세스 실행과 같은 다양한 통합 관련 작업에 사용할 수 있습니다.

• ADEPTIA ETL 스위트 –

Adeptia는 쉽고 직관적인 인터페이스와 결합된 전체 ETL 기능을 제공합니다. 사용자에게 다양한 파일을 변환할 수 있는 기능을 제공합니다. Adeptia ETL Suite는 IT 전문가가 아닌 사람도 사용할 수 있도록 설계되어 비즈니스 사용자가 실시간으로 데이터에 액세스하고 자신의 데이터를 작업에 맞게 변환할 수 있는 권한을 제공하는 동시에 IT가 프로세스를 관리하고 데이터가 안전하게 관리되고 있는지 확인할 수 있도록 합니다. 올바르게.

• Informatica Powercenter –

Informatica Power Center는 엔터프라이즈 데이터 웨어하우스 구축에 널리 사용되는 추출, 변환 및 로드 도구입니다. Informatica PowerCenter의 주요 구성 요소는 클라이언트 도구, 서버, 리포지토리 서버 및 리포지토리입니다. Power Center 서버와 리포지토리 서버는 ETL 처리를 완료하는 ETL 레이어를 구성합니다.

• IBI IWAY 데이터마이그레이터 –

Data Migrator는 데이터 웨어하우스, 데이터의 생성, 유지 관리 및 확장을 포함하여 추출, 변환 및 로드(ETL) 프로세스를 대폭 단순화하도록 설계된 강력하고 포괄적인 자동화 도구입니다. 마트 및 운영 데이터 저장소. 직관적인 인터페이스를 통해 서로 다른 컴퓨팅 플랫폼에서 이기종 데이터 구조를 포함하는 종단 간 ETL 프로세스를 빠르게 생성할 수 있습니다. 또한 변경 데이터 캡처 기능은 변경된 레코드만 데이터 소스에 로드하여 데이터를 새로 고치는 데 필요한 시간을 크게 줄이고 거의 실시간 데이터 웨어하우스를 촉진합니다.

• 엘릭서 데이터 ETL –

Elixir Data ETL은 기업 수준의 데이터 처리 요구 사항뿐만 아니라 비즈니스 사용자를 위한 주문형 셀프 서비스 데이터 조작을 제공하도록 설계되었습니다. 시각적 모델링 패러다임은 모든 응용 프로그램 처리, 기업 보고 및 성능 측정, 데이터 마트 또는 데이터 웨어하우징 이니셔티브에 중요한 프로세스인 데이터 추출, 집계 및 변환을 설계, 테스트 및 구현하는 데 필요한 시간을 크게 줄입니다.

• SYNCSORT DMX –

Syncsort DMX는 모든 데이터 변환을 고성능 인메모리 ETL 엔진으로 가져옵니다. 변환이 즉시 처리되므로 비용이 많이 드는 데이터베이스 스테이징 영역이 필요하지 않거나 변환을 수동으로 데이터베이스에 푸시할 필요가 없습니다.

• SAS 데이터 관리 –

SAS Data Management를 사용하면 비즈니스 사용자가 데이터를 업데이트하고, 프로세스를 수정하고, 결과를 직접 분석하여 다른 프로젝트에 사용할 수 있습니다. 또한 기본 제공되는 비즈니스 용어집, SAS 및 타사 메타데이터 관리 및 계보 시각화 기능을 통해 모든 사람이 같은 페이지를 볼 수 있습니다.

• SAP 데이터 서비스 –

프로젝트 또는 기업 수준에서 데이터를 통합, 변환 및 개선하는 데 도움이 됩니다. 데이터 통합, 데이터 품질, 데이터 프로파일링, 텍스트 데이터 처리를 위한 단일 엔터프라이즈급 솔루션을 제공하여 사용자가 데이터를 통합, 변환, 개선 및 제공할 수 있도록 합니다.

• ORACLE 데이터 통합기 엔터프라이즈 에디션 –

이기종 시스템에서도 성능을 개선하고 데이터 통합 ​​비용을 줄이는 E-LT(Extract Load and Transform) 기술을 제공합니다. 고성능 및 낮은 TCO, 엔터프라이즈 데이터 통합을 위한 이기종 플랫폼 지원 및 최적화된 개발자 생산성 및 확장성을 위한 지식 모듈을 제공합니다.

• 메타 스위트 –

Meta Suite는 빠른 가치 실현 시간, 확장성, 지원되는 다양한 소스 및 대상 파일과 데이터베이스 유형을 제공합니다. 운영 데이터를 추출, 로드 및 병합하는 일반적인 작업 외에 데이터를 통합 및 합리화하고 마스터 데이터 관리를 지원하는 데 사용할 수도 있습니다.

• PERVASIVE의 데이터 통합자 –

이제 Actian의 일부입니다. 소프트웨어가 매우 사용하기 쉽고 전문 기술이 필요하지 않지만 복잡한 통합 작업을 수행합니다. 풍부한 기능은 스티커 쇼크 없이 디자인, 배포 및 관리를 위해 매우 직관적이고 구성 가능합니다. 온 프레미스 및 클라우드 버전 모두에 사용되는 것과 동일한 전체 기능을 갖춘 웹 UI가 있습니다.

• Sagent 데이터 흐름 –

이질적인 소스의 데이터를 수집하는 강력하고 유연한 통합 엔진입니다. Pitney Bowes Software에서 설계했으며 비즈니스 가치를 향상시키는 포괄적인 데이터 변환 도구 세트를 제공합니다. 비즈니스 이해를 돕기 위해 정보를 분석하고 의미 있는 보고서를 생성할 수 있습니다.

또한 읽기:2017년 상위 15대 빅 데이터 도구

소프트웨어나 도구를 선택하는 것은 어떤 유형의 요구 사항이 있고 비즈니스마다 다른지에 따라 결정됩니다. 통신 비즈니스는 의류 소매점에 비해 처리해야 할 크고 복잡한 데이터가 있습니다. 따라서 통신 사업자는 복잡한 데이터를 처리할 수 있는 기능이 있는 도구를 선택합니다. 반면 소매점은 프로그래밍 기술과 기술적 배경이 없기 때문에 덜 복잡하고 사용하기 쉬운 도구를 선택합니다.

다음 블로그에서는 참조 아키텍처의 다음 계층에 대한 도구를 나열하겠습니다.