mysql数据同步的问题

hive2mysql，每天1点执行，执行前会先truncate mysql中的table，然后从hive查询后插入mysql中，完成同步过程大概2分钟，如果在这2分钟内，mysql table被多次请求，数据不完整怎么办？
有更好的方法解决吗？尽量使用到新数据，无新数据时使用旧数据而不是返回空数据
#Java工程师#
全部评论
这个我之前搞过，只能批量调度
点赞 回复 分享
发布于 2018-12-29 16:51
比较简单的方法：两个mysql，一个支撑服务，另一个用来做hive2mysql，倒完数据后直接切流，基本就搞定了。
点赞 回复 分享
发布于 2018-12-29 16:55
我不知道是不是理解错了，但是hive是一次写入的吧?前面是请求不到的
点赞 回复 分享
发布于 2018-12-29 18:33
不能做增量插入嘛，最近被Hive
点赞 回复 分享
发布于 2018-12-29 19:02
不能做增量插入嘛，最近被Hive折磨
点赞 回复 分享
发布于 2018-12-29 19:02

相关推荐

02-17 12:10
南京技师学院 Java
腾讯s3事业线 一面凉经
2月17号9.30（这个时间段我就觉得希望不大。面试官周一刚上班，谁都不想面一个笨蛋。但是也还是认真准备了）除了java有没有学过其他语言(C，python，go)算法题: 两个数组模拟整数相加八股：java的基本数据类型double使用的时候有什么需要注意的大数的底层实现如果没有到大数级别，可以用什么代替(long)常见集合类ArrayList是线程安全的吗（不是）有安全的吗concurrentHashMap底层java内存区域java内存回收机制项目中选一个亮点介绍一下大概就是这些，有些给忘了，反正面试官中间笑了几次，我以为是嘲笑我，给我整不自信了，毕竟好久没面了，2025第一面，然后他说...
查看10道真题和解析
点赞 评论 收藏
分享
不愿透露姓名的神秘牛友
02-12 18:14
秋招分手的前女友找我过情人节
RT，这周五就是情人节了，前女友给我发了消息，我该不该回？
Yoswell：原则上来说让她滚，但是本着工作很累下班想吃瓜的心态，我觉得你可以回一下
点赞 评论 收藏
分享
02-06 16:38
南京工程学院 嵌入式软件开发
莫名有点搞笑
如题
起名字真难233：人家只有找猴子的预算，来个齐天大圣他们驾驭不住呀😂😂
点赞 评论 收藏
分享
02-14 13:42
沈阳化工大学 Java
实在智能日常一面（全程高能，无八股）
日我介绍Java和Go的主要区别点给你一个需求应该怎么做，怎么分析呢（说的不好）问一点Java基础相关的（.........后面全是高能一点也不“基础”）completableFuture和直接new Thread的区别（说的不好，completableFuture有对应的回调方法以及一些更细致的操作需要配合线程池使用，new Thread会简单的创建一个线程，在调用.start()会异步执行）（上个问题说new Thread会阻塞主线程执行，但是其实不会）一个代码首先主线程打印A、B然后创建一个new Thread打印1,2 ，主线程在打印C、D最后的输出结果是什么样子的（先会输出ABCD，...
26加瓦鼠鼠：不会来接替我的hhh，今天lastday
查看17道真题和解析
点赞 评论 收藏
分享
评论
点赞
收藏
分享

招聘动态

查看更多

26届实习生双选会报名开启

26届实习软件笔试必刷题单

京东 TET管培生

全站热榜

更多

创作者周榜

更多
正在热议
更多
# 读研or工作，哪个性价比更高？ #
24643次浏览 333人参与
# 如果重来一次你还会读研吗 #
154707次浏览 1701人参与
# 科大讯飞求职进展汇总 #
258964次浏览 2595人参与
# 秋招感动瞬间 #
11010次浏览 103人参与
# 阿里巴巴创始人马云回国 #
14265次浏览 87人参与
# 职场新人生存指南 #
195870次浏览 5398人参与
# 你最满意的offer薪资是哪家公司？ #
11967次浏览 109人参与
# 长光卫星求职进展汇总 #
27606次浏览 184人参与
# 文科生还参加今年的春招吗 #
3433次浏览 29人参与
# 追觅科技求职进展汇总 #
8548次浏览 58人参与
# 选择和努力，哪个更重要？ #
42355次浏览 472人参与
# 招聘要求与实际实习内容不符怎么办 #
41609次浏览 469人参与
# 打工人的工作餐日常 #
24750次浏览 221人参与
# 机械制造岗投递时间线 #
19332次浏览 324人参与
# 小红书求职进展汇总 #
40465次浏览 346人参与
# 影石Insta360求职进展汇总 #
107723次浏览 969人参与
# 如果再来一次，你还会学硬件吗 #
102856次浏览 1236人参与
# 机械人选offer，最看重什么？ #
68630次浏览 433人参与
# 机械人怎么评价今年的华为 #
180369次浏览 1485人参与
# 滴！实习打卡 #
554940次浏览 6009人参与
牛客网
牛客企业服务