海量数据处理,创新应用框架
珠海万达商管集团覆盖2000+会计主体,公司业务数据量庞大,客商档案数量达到百万级别,本次新旧系统迁移的业务数据量超过7000多万行。鉴于大数据量的特点,用友开发了与其适配的数据迁移工具和数据核对工具,数据迁移具备强大的数据抽取、转换和加载(ETL)的功能,数据核对工具按照分层级、分模块的策略,对核心业务数据表进行重点核对,确保关键数据的准确性,然后逐步扩展到其他相关数据表的核对。基于数据迁移和数据工具建立的大数据处理框架,5个工作日完成了历史档案和业务数据的迁移,有效应对了替换过程中大数据量带来的挑战,高效、准确的实现了海量数据的迁移和应用处理。