公安交通管理大数据迁移融合处理应用场景及解决方法

本文针对公安交通管理信息系统开发建设中遇到数据处理、融合、迁移的需求,从跨网段数据批量处理、多源数据融合、结构化数据向分布式大数据平台迁移三个应用场景着手,分别介绍Spring Batch批处理框架、Kettle Etl工具及Sqoop数据迁移工具,并结合具体场景介绍其优势。旨在为同样面临数据批处理、数据迁移融合需求的应用提供一种解决方式。