微软与WANdisco合作将本地数据湖转移到Azure云
Microsoft在WANdisco复制软件的帮助下为Azure准备了一个数据湖迁移服务。
两种WANdisco服务可供有限的客户预览。它们是用于Azure的LiveData Migrator(执行数据的一次扫描迁移),以及用于Azure的LiveData Plane(用于捕获任何数据更改并将其应用于目标站点以确保数据一致性)。它们协同工作以在位置之间建立active:active数据平面。
WANdisco的LiveData Platform服务和计费已集成到Azure客户门户中,该公司表示计划提供更多的交钥匙Azure服务。
WANdisco首席执行官兼董事长Dave Richards表示:“ LiveData Platform服务[]是WANdisco与Microsoft之间的联合工程工作的结晶,目的是创建环绕数据移动和数据一致性的新本机Azure服务。”
微软公司Azure存储,媒体和边缘业务副总裁Tad Brockway表示:“客户有很大的机会通过将其本地数据湖移至云来优化成本并扩展分析和见解功能。WANdisco Live Data Migrator和LiveData Plane是首批为客户提供完全集成且完整的体验的产品,可将客户无缝地将Hadoop数据迁移到Azure Data Lake Storage中,而不会造成业务中断。”
两家公司都计划使用WANDisco的LiveData Platform技术将PB级数据湖从本地数据中心迁移到Azure。这种迁移需要时间,并且数据湖在此过程中处于活动状态。如果将数据发送到Azure,然后在源站点上进行更新,则我们将获得不可靠的数据-事实的两个版本。WANdisco的分布式协调引擎(DConE)使用共识技术来解决此数据版本差异。
微软和WANdisco最初正在寻求50多家拥有200-300 EB本地数据并可以迁移到Azure云的客户。他们的市场规模超过10亿美元。