多台 mysql 中用的 相同表名,自增 ID ，现在要合并到一个库中， ID 冲突如何解决呢？
wuwukai007 · 2020-12-27 13:31:20 +08:00 · 5093 次点击这是一个创建于 1461 天前的主题，其中的信息可能已经有所发展或是发生改变。
- 多台服务器上有相同的库，相同的表结构
用的都是自增 ID，现在要 合并到一个 mysql 中， 会出现 ID 冲突，有没有成熟的工具可以做这个？
第 1 条附言 · 2020-12-27 21:30:14 +08:00
感谢各位回复
- 现在采用 ： 新库重新建表 + insert 去掉 id 字段
- 表有关联的，我已经在新的库重新建表了，insert 把自增id 删了，晚上挂在跑，明天看看有没有问题
 |
1
yulitian888 2020-12-27 13:39:14 +08:00
上策：另立新 ID，好像并不需要什么特别的工具哦！
中策：给每个不同的源库加上不同的前缀数字，比如 A 库来的叫做 32000xxxx，B 库来的叫做 98000xxxx，补以适当的补位数即可。好像，也不需要什么特别的工具哦！ 下策：发个问题，坐等别人介绍工具 |
 |
2
roundgis 2020-12-27 13:40:39 +08:00 via Android
如果沒有 unique index
你如何判斷該記錄是不是相同的呢 |
 |
3
encro 2020-12-27 13:42:38 +08:00
没有，如果做了表关联的话。
|
 |
4
wuwukai007 OP @yulitian888 表太多了，几百张表，数据量也比较大，好几台服务器，自己弄估计费劲！
|
 |
5
buhi 2020-12-27 13:49:26 +08:00
不合并不就完事了, 首先合并是图啥
|
|
6
wuwukai007 OP @roundgis 有一个类似产品 ID 的 字段，和创建时间可以锁定唯一，
|
 |
7
notejava 2020-12-27 14:03:38 +08:00
重新生成分布式 ID，再将相关联表的 ID 离线重新绑定。
|
 |
8
xiaofan2 2020-12-27 14:04:59 +08:00  2
大家都是数据量太大了做拆分 你这反而给他合并起来了 这就是传说中的分久必合？
|
|
9
wuwukai007 OP @xiaofan2 上面要求，硬着头皮干呗。
|
 |
10
loading 2020-12-27 14:19:54 +08:00 via Android
前面加一位不就好了
例如 100000 数 012345 200000 字 012345 |
|
11
yulitian888 2020-12-27 15:07:49 +08:00
@wuwukai007 不管多少张表，在不借助其它工具的情况下，操作基本只考虑一种 sql 句式了
insert into 目标表 select 字段 1,字段 2... from 源表 然后，加一个变量进去很复杂？ insert into 目标表 select 前缀+字段 1,字段 2... from 源表 表再多也不过就是把前缀做成变量而已。用工具不是一样道理吗，将一个如上查询结果集作为导出范围，一模一样啊 |
 |
12
wangsongyan 2020-12-27 15:20:09 +08:00 via iPhone
自己写工具，合并表时生成新的 id 同时更新关联 id 。话说之前帮别人写了个工具，工具写完人联系不上了😂
|
 |
13
opengps 2020-12-27 15:27:47 +08:00 1
你们最初拆分的时候就不合理，应当用不一样的起始种子和步长，现在要合并，就直接按照库做分段吧，比如 A 库占用 1-100000，B 库占用 10001-20000，这样来融合
|
 |
14
alonehat 2020-12-27 16:00:41 +08:00
是都从 1 开始自增的？有关联关系吗，没有的话直接数据库对拷或者写个批量插入工具不插 ID 继续自增就是了；有关联关系的话那考虑到关联也只能新加几个个字段区分，改成组合外键
|
 |
15
mmdsun 2020-12-27 17:05:43 +08:00 via Android
批量 insert 不插入 ID 字段不就可以了么。
难道说表关联也是用的自增 ID ？ |
 |
16
elintwenty 2020-12-27 20:22:07 +08:00
这个问题难道不是先要看有没有关联的情况吗？没有关联就随意处理了
|
 |
17
fox0001 2020-12-27 23:23:52 +08:00 via Android
建立新库，新增两个字段：
1 ）新建新的主键字段，标记数据唯一。 2 ）新建机器编号字段，标记数据来自哪个机器。 这样，涉及关联的话，就用旧 ID 与机器编号去关联现有数据 |
 |
18
mingl0280 2020-12-27 23:43:07 +08:00
并库不并表，表加前缀。
|
 |
19
we3613040 2020-12-28 07:31:49 +08:00
连表都合并了？那当初为啥要拆。。。。。
|
 |
20
nano91 2020-12-28 08:57:29 +08:00
@wuwukai007 你有没有考虑过这么大的数据量合并完了以后，你的服务还有可用性吗？
|
 |
21
wangritian 2020-12-28 09:20:10 +08:00
上面要求？兄弟这种不合理的要求一定要据理力争啊，到时候查询扛不住再分库分表你不是白干了
|
|
22
wuwukai007 OP @nano91 @wangritian 之前是分库+ 分表，发现 分表就可以满足了，现在调整成 把多个库 合并，在分表。
|
 |
23
prodcd 2020-12-28 16:44:26 +08:00
新建一个表，使用新的自增 id，增加 2 个字段，old_server 、old_id 备用，等啥事都没有了可以考虑删掉
不过你这需求真奇葩。 |
Select Language