首頁 > 軟體

利用Mysql定時+儲存過程建立臨時表統計資料的過程

2023-03-19 06:01:50

1.mysql定時任務簡單介紹

mysql的定時任務是使用event(事件)來實現的,自mysql5.1.6版本起,增加了這個功能 - 事件排程器(event scheduler),它可以精確到每秒鐘執行一個任務,在一些對資料實時性要求比較高的場景非常使用,接下來我將用mysql的event事件來實現定時統計資料。

2.準備工作

(1)檢視定時策略是否開啟

show variables like '%event_sche%';

執行結果如下

ON表示處於開啟狀態,如果是OFF則表示處於關閉狀態,假設處於關閉狀態,使用下面sql語句開啟和關閉就行。

--開啟定時排程策略(下面兩個語句都可以)
set global event_scheduler=1;
set global event_scheduler = on;
 
--關閉定時排程策略(下面兩個語句都可以)
set global event_scheduler=0;
set global event_scheduler = off;

關閉定時排程策略sql執行結果:

開啟定時排程策略sql執行結果:

(2)執行使用者資訊表和使用者訂單表sql指令碼

# 使用者資訊表
CREATE TABLE `user_info` (
    `id` INT ( 11 ) NOT NULL AUTO_INCREMENT COMMENT 'ID',
    `name` VARCHAR ( 30 ) NOT NULL COMMENT '使用者名稱',
    `phone` VARCHAR ( 11 ) NOT NULL COMMENT '手機號',
    `status` TINYINT ( 1 ) NULL DEFAULT NULL COMMENT '使用者狀態:停用0,啟動1',
    `create_time` datetime NOT NULL COMMENT '建立時間',
    PRIMARY KEY ( `id` ) USING BTREE 
) ENGINE = INNODB AUTO_INCREMENT = 10001 CHARACTER 
SET = utf8mb4 COLLATE = utf8mb4_general_ci COMMENT = '使用者資訊表';
 
# 使用者訂單表
CREATE TABLE `user_order`  (
  `id` int(11) NOT NULL AUTO_INCREMENT COMMENT 'ID',
  `order_num` varchar(30) CHARACTER SET utf8mb4 COLLATE utf8mb4_general_ci NOT NULL COMMENT '訂單編號',
  `user_id` int(11) NOT NULL COMMENT '使用者ID',
  `create_time` datetime NOT NULL COMMENT '建立時間',
  PRIMARY KEY (`id`) USING BTREE,
  UNIQUE INDEX `idx_order_num`(`order_num`) USING BTREE COMMENT '訂單編號唯一'
) ENGINE = INNODB AUTO_INCREMENT = 10001 CHARACTER SET = utf8mb4 COLLATE = utf8mb4_general_ci COMMENT = '使用者訂單表';

(3)執行插入測試資料sql指令碼

# 向用戶資訊表中插入三條測試資料
INSERT INTO `user_info` (`id`, `name`, `phone`, `status`, `create_time`) VALUES (10001, '張三', '13900669010', 1, '2023-03-14 17:01:42');
INSERT INTO  `user_info` (`id`, `name`, `phone`, `status`, `create_time`) VALUES (10002, '李四', '13900669111', 1, '2023-03-14 17:01:42');
INSERT INTO  `user_info` (`id`, `name`, `phone`, `status`, `create_time`) VALUES (10003, '王五', '13900669876', 1, '2023-03-14 17:01:42');
 
# 向用戶訂單表中插入八條測試資料
INSERT INTO  `user_order` (`id`, `order_num`, `user_id`, `create_time`) VALUES (10001, 'dingdan001', 10002, '2023-03-14 17:03:40');
INSERT INTO  `user_order` (`id`, `order_num`, `user_id`, `create_time`) VALUES (10002, 'dingdan002', 10003, '2023-03-14 17:03:40');
INSERT INTO  `user_order` (`id`, `order_num`, `user_id`, `create_time`) VALUES (10003, 'dingdan003', 10002, '2023-03-14 17:03:40');
INSERT INTO  `user_order` (`id`, `order_num`, `user_id`, `create_time`) VALUES (10004, 'dingdan004', 10002, '2023-03-14 17:03:40');
INSERT INTO  `user_order` (`id`, `order_num`, `user_id`, `create_time`) VALUES (10005, 'dingdan005', 10003, '2023-03-14 17:03:40');
INSERT INTO  `user_order` (`id`, `order_num`, `user_id`, `create_time`) VALUES (10006, 'dingdan006', 10003, '2023-03-14 17:03:40');
INSERT INTO  `user_order` (`id`, `order_num`, `user_id`, `create_time`) VALUES (10007, 'dingdan007', 10002, '2023-03-14 17:03:40');
INSERT INTO  `user_order` (`id`, `order_num`, `user_id`, `create_time`) VALUES (10008, 'dingdan008', 10001, '2023-03-14 17:03:40');

(2)(3)中指令碼執行完的結果:

3.編寫儲存過程指令碼

 
DELIMITER //
DROP PROCEDURE
IF
    EXISTS statistics_user_order // CREATE PROCEDURE statistics_user_order () BEGIN
    DECLARE
        temp_table_name VARCHAR ( 60 ) DEFAULT '';
    DECLARE
        suffix VARCHAR ( 10 ) DEFAULT '';
    DECLARE
        old_table_name VARCHAR ( 60 ) DEFAULT NULL;
    SELECT
        table_name INTO old_table_name 
    FROM
        information_schema.`TABLES` 
    WHERE
        table_name LIKE 'temp_statistics_%' 
        AND table_schema = 'db_name'; -- 此處填自己對應的資料庫名即可
    IF
        old_table_name IS NOT NULL THEN
        -- execute multiple statements
        -- 如果IF THEN ... END IF塊內有多個語句,最好將它們放在一個BEGIN ... END;塊中
        BEGIN
                
                SET @drop_sql := CONCAT( 'DROP TABLE ', old_table_name, ';' );
            PREPARE d_sql 
            FROM
                @drop_sql;
            EXECUTE d_sql;
            DEALLOCATE PREPARE d_sql;
            
        END;
        
    END IF;
    SELECT
        DATE_FORMAT( NOW(), '%Y%m%d' ) INTO suffix;
    
    SET temp_table_name = CONCAT( 'temp_statistics_', suffix );
    
    SET @create_sql = CONCAT( 'create table if not exists ', temp_table_name, "(
        `id` int(11) NOT NULL AUTO_INCREMENT COMMENT 'ID',
        `user_id` INT ( 11 ) NOT NULL COMMENT '使用者ID',
        `name` VARCHAR ( 30 ) NOT NULL COMMENT '使用者名稱',
        `number` INT ( 11 ) NOT NULL DEFAULT 0 COMMENT '訂單數',
        `create_time` datetime NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '建立時間',
        PRIMARY KEY ( `id` ) USING BTREE 
    ) ENGINE = INNODB AUTO_INCREMENT = 1 CHARACTER SET = utf8mb4 COLLATE = utf8mb4_general_ci COMMENT = '使用者訂單統計表';" );
    PREPARE pre_stmt 
    FROM
        @create_sql;
    EXECUTE pre_stmt;
    DEALLOCATE PREPARE pre_stmt;
    -- 簡單的用set或者declare語句定義變數,然後直接作為sql的表名是不行的,mysql會把變數名當作表名。
    SET @insert_sql = CONCAT( 'INSERT INTO ', temp_table_name, "( `user_id`, `name`, `number` ) SELECT
        i.id AS `user_id`,
        i.`name` AS `name`,
        COUNT( o.user_id ) AS `number` 
        FROM
        user_info i
        LEFT JOIN user_order o ON i.id = o.user_id 
        WHERE
        i.`status` = 1 
        GROUP BY
    i.id;" );
    PREPARE pre_insert 
    FROM
        @insert_sql;
    EXECUTE pre_insert;
    DEALLOCATE PREPARE pre_insert;
    
END // 
DELIMITER;

指令碼執行結果:(注意:上述儲存過程中的資料庫不要忘記更改"AND table_schema = 'db_name'; -- 此處填自己對應的資料庫名即可")

以上儲存過程主要分為三個階段

a.檢查資料庫中臨時表是否存在,如果存在則刪除表結構(移除老表)

b.根據當前時間建立新的臨時表,表結構根據統計需要增加欄位

c.聯表查詢,將每個使用者所擁有的訂單數量統計,並插入到臨時表中去

4.編寫和執行定時任務指令碼

為了讓大家看到更顯著的效果,將定時任務設定為每10秒鐘執行一次,也就是這個定時任務的功能是10s鍾統計一次使用者的訂單數量。

create event job_statistics -- 是建立名為job_statistics的事件;
on schedule every 10 SECOND -- 建立週期定時的規則,意思是每10s種執行一次;
on completion preserve enable --  是表示建立後就開始生效,不讓開始生效設定disable
do call statistics_user_order(); -- 事件要執行的內容,呼叫了上述的儲存過程

指令碼執行結果:

檢視定時任務:

select * from information_schema.EVENTS;

指令碼執行結果:

檢視定時任務執行效果:(看下面的時間差,定時在重新整理)

停止定時任務執行:

ALTER event job_statistics on completion preserve disable;

繼續定時任務:

ALTER event job_statistics on completion preserve enable;

到此這篇關於利用Mysql定時+儲存過程建立臨時表統計資料的文章就介紹到這了,更多相關mysql建立臨時表統計資料內容請搜尋it145.com以前的文章或繼續瀏覽下面的相關文章希望大家以後多多支援it145.com!


IT145.com E-mail:sddin#qq.com