将mongodb 数据指定字段导出,然后指定字段导入mysql 实例 及相关问题解决
admin
2023-02-06 09:20:04
0

需求:将mongodb 数据指定字段导出,然后再指定字段导入mysql  表中




直接上图吧,


最后 会将遇到几个问题及解决方案贴出,以便遇到类似问题可以迅速解决(期间所用命令具体用法不在本文详解之内)



  1. 将mongodb 数据指定字段导出,所用命令Mongoexport ,具体查阅官方文档;

将mongodb 数据指定字段导出,然后指定字段导入mysql 实例 及相关问题解决


导出指定二级字段 Mongodb 

/opt/mongodb/bin/mongoexport  --host yourip  --port yourport   -d app_form -c application_data  --csv  --out export2.csv  --fields   applicant.name,applicant.id_card_num,applicant.cell_phone_num,applicant.home_addr


将mongodb 数据指定字段导出,然后指定字段导入mysql 实例 及相关问题解决





2. 在mysql 机器上 rsync 传输过来,rysnc 用法就不讲了,带过

rsync -chavzP --stats yourusername@yourip:/home/mongodata/export.csv   /data/mysql/





3.导入mysql,这里有两种情况,一种是导入全新的表,另一种则是导入已存在的表,但是需要指定该表具体字段


  1. 新表:

  2. LOAD DATA INFILE '/data/mysql/export2.csv'  INTO TABLE temp_test  CHARACTER SET utf8  FIELDS TERMINATED BY ',' ENCLOSED BY '"';


  1. 老表指定字段:

  2. LOAD DATA INFILE '/data/mysql/export2.csv'  INTO TABLE temp_test2  CHARACTER SET utf8mb4 FIELDS TERMINATED BY ',' ENCLOSED BY '"' (name,idcard,tellnumber, address);


结果验证:

将mongodb 数据指定字段导出,然后指定字段导入mysql 实例 及相关问题解决

导入成功;






4.疑难杂症1:mongo 导出时二级字段的正确导出方法


将mongodb 数据指定字段导出,然后指定字段导入mysql 实例 及相关问题解决





4.疑难杂症2:mysql导入时 ERROR 1366 (HY000): Incorrect string value: '\xF0\xA5\x8C\x93\xE5\x85...' for column 'address' at row 45293 解决 方法

这个问题很难解决,一般是认为utf8mb4 所导致,具体原因看下面,需要修改表的默认字符集,并以指定utf8mb4 导入;


将mongodb 数据指定字段导出,然后指定字段导入mysql 实例 及相关问题解决


将mongodb 数据指定字段导出,然后指定字段导入mysql 实例 及相关问题解决


ALTER TABLE temp_test2  CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci;  修改即可1





4.疑难杂症3:mongo 导入时ERROR 1262 (01000): Row 1066659 was truncated; it contained more data than there were input columns 解决方法,sql_mode 的问题,需要修改;

将mongodb 数据指定字段导出,然后指定字段导入mysql 实例 及相关问题解决






5.其他问题,比如主键重复,字段大小不满足要求,等等小问题自行琢磨解决


最后正常的结果显示:

将mongodb 数据指定字段导出,然后指定字段导入mysql 实例 及相关问题解决




百度内搜到的帖子能解决此类问题的很少,并且都不是完整的实例,这里贴出完整的整个操作实例,希望对大家有帮助;





相关内容

热门资讯

成都深入实施“人工智能+”行动 成都深入实施“人工智能+”行动 到2027年实现人工智能核心产业规模突破2600亿元 华西都市报讯(...
原创 中... 说真的,看到欧洲科学家一本正经拿粪水浇菜做研究,最后还得出了个“安全无害、肥力充足”的结论,我第一反...
小米智能手环11 Active... IT之家 7 月 23 日消息,科技媒体 WinFuture 昨日(7 月 22 日)发布博文,分享...
胡塞武装袭击红海油轮,特朗普威... 据路透社报道,当地时间7月23日,也门胡塞武装表示已在红海袭击两艘沙特油轮,并称这两艘油轮违反该组织...
刚签就要黄了?特朗普:核能协议... 据彭博社报道,当地时间7月23日,美国总统特朗普表示,美国与沙特阿拉伯的民用核能合作协议能否落地,将...
原创 宇... 可观测宇宙的范围远远超出了以光年为单位的其年龄,因为在遥远光线传播的过程中,空间本身已经膨胀了。然而...
我国研发出具有“电子共振”结构... 【我国研发出具有“电子共振”结构的钙钛矿光伏电池】财联社7月22日电,苏州大学李耀文、陈先凯与东南大...
我国牵头制定,智能制造用例国际... 国际电工委员会智能制造系统委员会(IEC/SyC SM)近日发布《智能制造用例模板》国际标准。该标准...
一文看懂三星Z系列三款折叠新机... 【CNMO科技消息】近日,三星正式发布Z Fold8 Ultra、Z Fold8以及Z Flip8三...
4位菲尔兹奖得主有3位会说中文... 当地时间7月23日,2026年国际数学家大会在美国费城开幕,国际数学联盟在开幕式上正式公布第二十一届...