教育新闻网日立有限公司和企业数据云公司Cloudera宣布已采用日立的“ Pentaho”数据集成和分析平台(日立Lumada产品组合的核心)和“ Cloudera Enterprise Data Hub”。最近开始运营的东京证券交易所的新数据利用平台(“平台”)。
该平台标准化了整个日本交易所集团的数据管理，并简化了后台办公操作(例如表单创建和交易费用计算)以及扩展信息业务的基础。通过结合Pentaho和Cloudera Enterprise Data Hub，该平台实现了有效的数据集成和简单的可视化，同时还大大提高了处理性能，例如通过缩短处理时间。
第一步，TSE合并了基于各种数据(例如交易)创建表格的系统以及每次每次交易或付款时都会计算佣金的系统。展望未来，计划将平台逐步扩展为日本交易所集团的通用基础设施，包括从各个角度分析和生成交易数据报告的系统。
TSE在典型的一天中处理超过千万笔交易，而在繁忙的日子中处理超过一亿笔交易。为了应对将来将要扩大的交易量，TSE面临着加速数据处理和开发可利用数据的环境的挑战。此外，考虑到将来使用云服务的可能性以及采用范围的扩大，需要不依赖于特定供应商的开放技术。
Pentaho与Hadoop / Impala环境具有高度的亲和力，并且能够提供一个一致的环境，该环境不仅可以收集而且可以分析和利用数据，包括集成数据的可视化和多维分析。同时，Cloudera受保护和受管的数据平台可实现多功能分析，从而消除了孤岛，并加快了数据驱动见解的发现。在开源创新的推动下，它具有真正的混合功能，可支持公共云，多云和本地部署。
在全球市场上，包括金融机构在内的许多客户都引入了“ Pentaho”和“ Cloudera Enterprise Data Hub”的组合。
最近开始运营的平台利用了Pentaho的Pentaho数据集成(数据集成和表单创建)和Pentaho业务分析(可视化和分析)组件，以及由Tosho System Service Co.，Ltd构建的Cloudera Enterprise Data Hub * 1。 。利用无编码数据集成功能，Pentaho能够轻松，快速地开发，同时重新利用TSE现有业务系统的处理程序。
具体来说，Pentaho用于合并以前分散在各个业务系统中的数据，例如用于表单创建和费用计算的数据，并且对数据集成处理进行了标准化。这极大地简化了数据准备工作，这尤其需要在数据分析过程中花费大量时间和精力，并且可以轻松地在不同系统之间交叉引用数据。
Cloudera提供的并行分布式处理和SQL引擎Impala还加快了批处理的速度，从而显着减少了处理时间，并确保可扩展性以处理将来的数据增长。
展望未来，Hitachi和Cloudera不仅将通过增强TSE的系统处理能力来提供稳定的企业级运营，还将通过提供允许创建利用累积数据资产和服务的新服务的环境来支持数字化转型。为正在进行的业务改革和发展做出贡献。
东京证券交易所有限公司IT开发部信息系统部经理Takashi Kamikura表示：“近年来，与市场有关的数据量一直在显着增加，这已成为亟待解决的问题。”在Cloudera Enterprise Data Hub的最新采用中，我们显着提高了数据处理能力，我们很高兴获得稳定的运行。此外，我们能够通过Pentaho提供的基于GUI的直观操作，快速，轻松地开发利用Cloudera Enterprise Data Hub所需的应用程序，该操作与Hadoop环境高度兼容。将来，我们的目标是扩展到云并利用数据来创建新业务。”
