pt-archiver
admin
2023-05-16 19:22:24
0

pt-archiver 是 pt-toolkit 中的一个工具,用于归档,传送数据至下线数据库,或者其他数据库


Examples

Archive all rows from oltp_server to olap_server and to a file:

pt-archiver --source h=oltp_server,D=test,t=tbl --dest h=olap_server \

--file '/var/log/archive/%Y-%m-%d-%D.%t' \

--where "1=1" --limit 1000 --commit-each

Purge (delete) orphan rows from child table:

pt-archiver --source h=host,D=db,t=child --purge \

--where 'NOT EXISTS(SELECT * FROM parent WHERE col=child.col)'


示例:


root@python-develpment:~# pt-archiver --source h=192.168.134.186,P=3306,u=pt-archive,p=123456,D=pcik_log_dep,t=t_user_login --where='logintime<"2017-05-05"' --file='a.txt'  --statistics --charset=utf8  --no-delete --progress=500 --limit=2000 --optimize=ture --txn-size=20000



--source 源数据库,后面的参数用‘,’隔开

--where 过滤数据

-statistics 执行完成后显示统计信息

    

    Started at 2017-08-10T12:14:36, ended at 2017-08-10T12:14:39

    Source: A=utf8,D=pcik_log_dep,P=3306,h=192.168.134.186,p=...,t=t_user_login,u=pt- archive

    SELECT 50281

    INSERT 0

    DELETE 0

    Action          Count       Time        Pct

    select             27     0.8560      24.15

    print_file      50281     0.3907      11.02

    commit              3     0.0014       0.04

    other               0     2.2968      64.79

--file 归档到本地(文件格式和select into outfile 一样,导入时使用load data infile 默认即可)

--no-delete 默认是会删除源数据库数据的,加上此参数后将不删除源数据库数据,

--progress 每完成多少行数据就会给出提示

    TIME                ELAPSED   COUNT

    2017-08-10T12:14:36       0       0

    2017-08-10T12:14:36       0     500

    2017-08-10T12:14:36       0    1000

    2017-08-10T12:14:36       0    1500

    2017-08-10T12:14:36       0    2000

--limit 指定select 每次查询的数量(改变此值可优化速度)


--txn-size=20000 当 --file时 不能用 --commit-each ,可设置此值加快速度


归档并传送至其他服务器


 pt-archiver --source h=192.168.134.186,P=3306,u=pt-archive,p=123456,D=pcik_log_dep,t=t_user_login --where='logintime<"2017-05-05"' --file='a.txt'  --statistics --charset=utf8  --no-delete --progress=500 --limit=20000 --optimize=ture --txn-size=20000 --dest h=192.168.134.186,P=3308,u=root,p=123456 --bulk-insert


--bulk-insert 加快dest 服务器插入数据速度




相关内容

热门资讯

大疆、影石的“师父”,撑不下去... 一则出售消息,让沉寂已久的GoPro股价突然暴涨。北京时间5月12日一早,这家美国运动相机厂商宣布,...
13岁女孩被闺蜜胁迫卖淫,父亲... 2022年6月,魏潇(化名)从得知时年13岁的女儿遭胁迫卖淫开始,便踏上了维权之路。4年来,胁迫其女...
苹果突然官宣!降到史上最低价! 近日 iPhone手机降价的消息刷屏了 网友纷纷发帖称 “零点确定降价了” “苹果坚挺了8个月终于降...
石化机械获得实用新型专利授权:... 证券之星消息,根据天眼查APP数据显示石化机械(000852)新获得一项实用新型专利授权,专利名为“...
小区2.82亩绿地“被交易”变... 近日,西安市世纪颐园小区业主向华商报大风新闻反映,小区西侧一块原本规划为公共绿地的土地,在多年前被开...
黄仁勋喝蜜雪冰城,品出了什么味... 每经评论员 朱成祥黄仁勋近期到访北京,被拍到在胡同喝豆汁、吃炸酱面、举着蜜雪冰城饮料。他表情轻松,与...
力箭系列率先实现民商火箭“百星... 来源:滚动播报 (来源:千龙网) 昨天(15日)12时33分,中科宇航力箭一号遥十三运载火箭在东风商...
B站独家直播中科院公众科学日:... 央广网北京5月16日消息(记者 殷雨婷)5月16日至17日,中国科学院第22届公众科学日在全国一百余...
飞沃科技获得实用新型专利授权:... 证券之星消息,根据天眼查APP数据显示飞沃科技(301232)新获得一项实用新型专利授权,专利名为“...
段永平的“本分”哲学,被OPP... 短短几十字的母亲节宣传文案,把OPPO推上了风口浪尖。 5月8日,手机品牌OPPO的官方微博、小红书...