php+mysql實現數據分批插入

上周需要將雲端的數據有條件的錄入到mysql中，最開始是使用遍歷數據然后一條條的插入的笨方法，結果速度慢的要死，所以又隨便寫了個笨方法2.0，記錄一下自己菜鳥的成長歷程。同時這也是在博客園的第一篇文章，目的僅僅是單純的記錄一下自己的狗屎代碼，因為我是菜鳥，哈哈。。。

比如說有10001條數據，每次插入1000條，分11次插入完成，代碼如下：

<?php
/**
 * Created by PhpStorm.
 * User: Soup
 * Date: 2016/12/29
 * Time: 21:04
 */

$mysqli = new mysqli('localhost','root','123456','test');



if ($mysqli->connect_error) {
    die('Connect Error (' . $mysqli->connect_errno . ') '
        . $mysqli->connect_error);
}

/*
 *@param $data array 要插入的數據
 *@param $each int 每次插入的條數
 */
function batchInsert($data,$each){

    $num = count($data);        // 數據總數
    $step = ceil( $num/$each);  // insert執行總次數


    $j = 1;
    $s = $step;

    foreach ($data as $val){    // 目前僅僅是起到循環作用
        if($j > $step) break;
        $arr2 = array_slice($data, ($step - $s) * $each, $each);     // 每次取100條
        $sql = "insert into batch VALUES ";
        foreach($arr2 as $v){
            $exist = $GLOBALS['mysqli']->query("select * from batch where number = '$v' limit 1 "); // 檢查要插入的數據是否已存在
            $row = $exist->fetch_array(MYSQLI_ASSOC);
            if(empty($row)){
                $sql .= "(null,$v,now()),";     // 將sql語句拼接起來
            }
        }
        $sql = rtrim($sql, ',');
        $result =  $GLOBALS['mysqli']->query($sql);
        echo $sql,'<br>';
46 47         $j++;
        $s--;
    }
    return $result;
}

// 先測試簡單的數字插入
for ($i = 1;$i <= 505;++$i){
    $arr[$i] = $i;
}

var_dump(batchInsert($arr,100));

測試505條數據，每次插入100條，分6次插入完成。