专利名称:在HIVE中数据迁移方法、装置及终端设备专利类型:发明专利发明人:陶胜
申请号:CN201710432592.8申请日:20170609公开号:CN107301214A公开日:20171027
摘要:本发明涉及数据处理领域,具体涉及一种在HIVE中数据迁移方法、装置及终端设备,所述方法包括步骤:将源数据库的数据文件通过Hive映射为源表;判断源表的预设分区是否存在数据记录;当所述源表的预设分区存在数据记录时,获取所述源表的预设分区的所有字段的数据记录;将所述源表的预设分区的数据记录写入目标数据库的目标表的对应分区中。发明通过HIVE将源数据库的数据文件映射为源表,利用HIVE的分区属性通过写查询语言的方式将数据从源表一部分一部分地写入目标表中,以完成源数据库的数据迁移至目标数据库,操作简单,逻辑清晰明了。
申请人:广州虎牙信息科技有限公司
地址:511442 广东省广州市番禺区南村镇万博二路79号万博商务区万达商业广场北区B-1栋28层10单元
国籍:CN
代理机构:北京市立方律师事务所
更多信息请下载全文后查看
因篇幅问题不能全部显示,请点此查看更多更全内容