mysql批量插入数据2000条只要289ms

218 阅读1分钟

1.创建表

DROP TABLE IF EXISTS user;

CREATE TABLE user
(
	id BIGINT(20) NOT NULL COMMENT '主键ID',
	name VARCHAR(30) NULL DEFAULT NULL COMMENT '姓名',
	age INT(11) NULL DEFAULT NULL COMMENT '年龄',
	email VARCHAR(50) NULL DEFAULT NULL COMMENT '邮箱',
	PRIMARY KEY (id)
);

2.编写java代码


思路,将 插入数据 部分在代码中拼接好,将sql传入代码执行

例如:

INSERT INTO `mybatis_plus_demo`.`tmp_user`(`id`, `name`, `age`, `email`)

select 11,'wang',18,'1021@qq.com' 
union
select 22,'wang',18,'1021@qq.com' 

mysql可以直接select,如果是oracle则要  from dual


java 代码


@RequestMapping("batch")
    public Object get(){
        List<User> list = new ArrayList<>();
        for (int i = 1; i <= 2000; i++) {
            User user = new User();
            user.setId(i);
            user.setAge(i);
            user.setEmail("102@qq.com  " + i);
            user.setName("王某人  " + i);
            list.add(user);
        }
        StringBuilder stringBuilder = new StringBuilder();
        list.forEach(item -> {
            stringBuilder.append("select");
            stringBuilder.append(" ' "+item.getId()+" ', ");
            stringBuilder.append(" ' "+item.getName()+" ', ");
            stringBuilder.append(" ' "+item.getAge()+" ', ");
            stringBuilder.append(" ' "+item.getEmail()+" ' ");
            stringBuilder.append(" union ");
        });
        String sql = stringBuilder.toString();
        sql = sql.substring(0,sql.lastIndexOf("union"));
        return userService.batchUser(sql);
    }

service省去

    <insert id="batchUserBySql" parameterType="string">

        INSERT INTO tmp_user ( id, name, age, email)
        ${batchSql}
    </insert>

3.结果只要 289ms

 

4.批量update

思路:将需要批量更改的数据先批量入库,采用上面的方式,需要建一张与主表字段一致的临时表,必须要有唯一键能对应上;然后通过联表更新语句实现

4.1创建临时表

DROP TABLE IF EXISTS tmp_user;

CREATE TABLE tmp_user
(
	id BIGINT(20) NOT NULL COMMENT '主键ID',
	name VARCHAR(30) NULL DEFAULT NULL COMMENT '姓名',
	age INT(11) NULL DEFAULT NULL COMMENT '年龄',
	email VARCHAR(50) NULL DEFAULT NULL COMMENT '邮箱',
	PRIMARY KEY (id)
);

插入数据可采用上面的代码.....

4.2联表更新

UPDATE user s
SET s.name = (
  SELECT b.name FROM tmp_user b WHERE s.id = b.id 
),
s.age = (
  SELECT b.age FROM tmp_user b WHERE s.id = b.id 
)
WHERE EXISTS (
  SELECT 1 FROM tmp_user b WHERE s.id = b.id
)

仅用72ms

 

 

开发者涨薪指南

48位大咖的思考法则、工作方式、逻辑体系