データ前処理を得意とする統合プラットフォーム
Qlik Talend
ETL処理をはじめデータ準備に必要な機能を揃え、データガバナンスを実現
Talend Data Fabricとは

Talend Data Fabricとは
企業のデータ利活用を効率化する統合データマネージメントプラットフォームです。データ統合、データ整合性、データガバナンスを一元化されたプラットフォームへと集約し、健全なデータを実現します。 大きく分けて3つの要素で成り立っています。
・データ統合
・アプリケーションおよびAPI統合
・データ整合性およびガバナンス
なお、上記に加えてあらゆるデータセットの信頼性をスコアリングする「Talend TRUST SCORE」を利用すれば、データの健全性を把握でき企業のタイムリーな意思決定をサポートします。

Talend Data FabricはData Health(データの健全性)を高め、お客様のビジネス課題の解決をサポートします。
※Data Health(データの健全性)とは、企業が保有するデータがビジネスの目標をどれだけサポートしているかを示す指標です。
データ統合
- IoTの実現
センサーなどIoTデバイスからのデータの収集、分析に時間がかかってしまうと、ダウンタイムなどのタイムリーな予測が困難です。Talendは、データの収集、分析を短時間で実現することで、障害が発生する前に、タイムリーなダウンタイム予測と調整を行うことができます。 - マーケティング分析・販売予測
社内の保有データだけでなく、オープンデータ(公開情報)やネットからのクローリングデータ、センサーログ(IoT)など、多種・大量のデータを素早く収集・整形・統合し、マーケティング・インテリジェンスに生かすことが可能です。 - AWSのサービスと多種多様なデータソースを連携
AWSのサービスと多種多様なデータソースを連携することができます。Talendは、RDSやEMR、Redshiftなどのデータソースにアクセスするための専用のコンポーネントを各種取り揃えています。EC2インスタンス上にTalendを構築することも可能です。 - 散在化したデータの統合
社内に散在するファイルやデータベースなど、様々なデータソースのデータを統合するデータマートの構築と運用を実現するETL基盤を実現します。異なるデータ構造を持つデータを高速に整形・加工・集計してデータ統合を実現します。
アプリケーションおよびAPI統合
Talendがハブとなり多種多様なシステムを連携、データフローを最適化
- RESTやSOAPなどの標準によるシステム連携を効率よく開発可能です。データ統合と同じ開発環境を使用し、バッチ開発のノウハウをそのまま適用可能です。
- ルーティングやメディテーションなど複数システム間でのメッセージ処理を実現します。※Camelによる堅牢性と効率性を両立
- システム間でリアルタイムに情報を交換するESBの実装が可能です。ESBの適用は順次拡大していくこともできるので、スモールスタートしつつ、計画的な拡張が可能です。
SOA/データ仮想化を実現する「Talend Data Services Platform」の詳細を見る
データ整合性およびガバナンス
データカタログ

活用イメージ
・データカタログはデータマネージメントに関する各システムのメタデータをカタログ化し、企業が保有するデータの一元管理をサポートします。
・散在する多種多様なシステムのメタデータとビジネス用語集の一元管理や、ブラウザを使用した簡易な操作でカタログ情報の参照や検索が可能です。
・メタデータやビジネス用語集は自動で収集し、カタログ化されます。
・DB、CRM、ファイル、ETLツール、BIツールなど250を超えるデータソースからの収集が可能です。
データカタログ機能詳細:検索機能
カタログに登録された多種多様なメタデータを横断的に検索可能です。物理名だけでなく論理名なども検索対象とし、目的とする情報へのアクセスを迅速化します。
検索条件の例
- キーワード検索
- ・部分一致/完全一致
- ・システム横断
- ・AND/OR検索
- カテゴリー検索
- ・用語集、DB、ETL、BI
- フィルター検索
- ・最終更新日
- ・コメントの有無
データカタログ機能詳細:データリネージ/インパクト分析
・データリネージ:参照しているデータがどこから来ているかの来歴を確認します。
・インパクト分析:参照しているデータがどこで使用されているかを確認します。
データプレパレーション
・データ分析前のデータ準備を見慣れた表形式のUIで提供。
・Talend・DWHとBIツールの間を埋める、ビジネスユーザ向けデータ加工ツール。
・データの異常や欠損を自動判別し可視化、対処すべきデータを容易に判別。
・プロファイリングだけではなくカラムの追加/削除などの多彩な加工が可能。
・データ準備の結果は保存し他ユーザーと共有可能、更にデータ統合(ETL)と連携することによりバッチ処理化も実現。
データスチュワードシップ
・データ分析前のデータ準備を見慣れた表形式のUIで提供。
・Talend・DWHとBIツールの間を埋める、ビジネスユーザ向けデータ加工ツール。
・データの異常や欠損を自動判別し可視化、対処すべきデータを容易に判別。
・プロファイリングだけではなくカラムの追加/削除などの多彩な加工が可能。
・データ準備の結果は保存し他ユーザーと共有可能、更にデータ統合(ETL)と連携することによりバッチ処理化も実現。
製品コンセプト/設計思想と基本技術・基本性能

他社が真似できないTalendの優位性
オープン性・情報ソースへのコンポーネントが豊富(1,000以上)
・ソースコード生成型モデルであるためコードに透明性・信頼性がある
・多くのデータ活用ベンダー(技術)でも接続可能
・コミュニティの支持によりコードの信頼性(製品の信頼性)が高い
先進性
・クラウドやSaaSなどの先進技術への対応
・先進的な情報ソース:Spark・NoSQL・DWH・インメモリーコンピューティングなどへのアクセス
・バージョンアップサイクルが短く、最新技術への対応が早い
ビジネスモデル
・開発者単位でのライセンス
・顧客は最小限のライセンスを支払えば良く投資対効果が高い
・サブスクリプションライセンス
・顧客は年単位でプロジェクトを見直してライセンスコストの最適化を図れる
・ソースコード生成型で分散処理環境に
設計思想・基本機能
- ビッグデータのデータガバナンスを実現する統合プラットフォーム
Talendはひとつのプラットフォーム上でETL(Extract・Transform・ Load)とESB(Enterprise Service Bus)を実現する業界初の製品です。
1つのプラットフォームでApache Hadoop・Apache Spark・Spark StreamingおよびNoSQLデータベースを運用し、シンプルなユーザインタフェースを使用してビッグデータ統合を行います。 - 本格ETL・ESBをワンストップで開発・運用
グラフィカルな統合開発環境を使用して、ETLによるデータ統合およびESBによるリアルタイムのアプリケーション連携を実現できます。 - 高いコストパフォーマンス
高額なETLツールと同等の機能を安価に提供します。 高度なGUIの採用により、スクラッチによるデータ統合より5倍から10倍、開発効率が上がります。
製品ラインナップ
Talend プラットフォーム製品
要件に合わせて選択できるQlik Talend製品の機能の比較です。
| 製品機能 | Data Management Platform | Data Service Platform | Big Data Platform | Talend Data Fabric |
|---|---|---|---|---|
| データインテグレーション機能 | ○ | ○ | ○ | ○ |
| メタデータ機能 | ○ | ○ | ○ | ○ |
| マルチスレッドパラレル機能 | ○ | ○ | ○ | ○ |
| フェールオーバー・ロードバランシング機能 | ○ | ○ | ○ | ○ |
| データクレンジング機能 | ○ | ○ | ○ | ○ |
| データマッパー機能 | ○ | ○ | ○ | ○ |
| エンタープライズサービスバス(ESB)、Rest API、Web Service機能 | – | ○ | – | ○ |
| Hadoop、NoSQL用コンポーネント | – | – | ○ | ○ |
| ビッグデータバッチジョブ開発機能 | – | – | ○ | ○ |
| ビッグデータクレンジング機能 | – | – | ○ | ○ |
| ビッグデータストリーミング機能 | – | – | – | ○ |
オンプレミス版とクラウド版の比較
Talend製品のそれぞれのエディションにはソフトウェアダウンロードを行うオンプレミス版と、クラウドサービス版が用意されています。オンプレミス版は様々な管理をご自分で行っていただく必要があります。
| オンプレミス版 | クラウド版 | |
|---|---|---|
| 導入後の管理 | すべて必要 | ユーザ管理とジョブのデプロイ・スケジューリング設定のみ |
| インストール | すべて必要 | クライアントツールおよび、オンプレミス用ジョブ実行エンジンのみ |
| バージョンアップ | 手動で実施 | 自動で実施 |
| 修正パッチの適用 | 手動で実施 | 自動で実施 |
