闲来无事,再来写个数据优化例子 php在操作数据库,对于update操作时,如果数据量很大,很多朋友都是遍历,一条一条的更新,这样效率是很低的,楼主亲测,500条数据,经常页面对超时504,然后对其动手术,亲测1500条数据sql时间为0.063S。 (该项目为完美世界排行榜核心操作之一)不说了,贴测试代码
/**
* Created by PhpStorm.
* User: isle
* Date: 2018-03-16
* Time: 09:05
*/
error_reporting(E_ERROR | E_CORE_ERROR | E_COMPILE_ERROR | E_USER_ERROR);
header('Content-Type: text/html; charset=utf8');
include_once("./config.php");
//查询sql
$listfaction_sql = Mysql_Query("select familyname,rid from faction left join listfactionuser on faction.fid=listfactionuser.fid ORDER by member_size DESC");
$listfaction = array();
while ($result = mysql_fetch_array($listfaction_sql)){
if(!in_array($result['rid'],$userid)){
$listfaction[] = $result;
}
}
//优化sql,批量update,减少查询时间
//用指定元素指定字段作为(替换或新增)key
function arrayChangeKey($arr,$key)
{
$processedArr = array();
if(is_array($arr) && !empty($arr)){
foreach ($arr as $item)
{
$processedArr[$item[$key]] = $item;
}
}
return $processedArr;
}
//得到新的根据rid为键值的数组
$listfactionbyrid=arrayChangeKey($listfaction,'rid');
//开始遍历,循环为case批量的一条update语句
$roleids = implode(',', array_keys($listfactionbyrid));
$sql = "UPDATE listrolebrief SET listfaction = CASE roleid ";
foreach ($listfactionbyrid as $key => $val) {
$sql .= sprintf("WHEN %d THEN '%s' ", $key, $val['familyname']);
}
$sql .= "END WHERE roleid IN ($roleids)";
//echo $sql.'<br>';die;
//执行查询
if(Mysql_Query($sql))
{
echo '更新成功';
exit;
}else{
echo '更新失败';
exit;
}
另外再出一个封装的函数:
/**
* 批量更新函数
* @param $data array 待更新的数据,二维数组格式
* @param array $params array 值相同的条件,键值对应的一维数组
* @param string $field string 值不同的条件,默认为id
* @return bool|string
*/
function batchUpdate($data, $field, $params = [])
{
if (!is_array($data) || !$field || !is_array($params)) {
return false;
}
$updates = parseUpdate($data, $field);
$where = parseParams($params);
// 获取所有键名为$field列的值,值两边加上单引号,保存在$fields数组中
// array_column()函数需要PHP5.5.0+,如果小于这个版本,可以自己实现,
// 参考地址:http://php.net/manual/zh/function.array-column.php#118831
$fields = array_column($data, $field);
$fields = implode(',', array_map(function($value) {
return "'".$value."'";
}, $fields));
$sql = sprintf("UPDATE `%s` SET %s WHERE `%s` IN (%s) %s", 'post', $updates, $field, $fields, $where);
return $sql;
}
/**
* 将二维数组转换成CASE WHEN THEN的批量更新条件
* @param $data array 二维数组
* @param $field string 列名
* @return string sql语句
*/
function parseUpdate($data, $field)
{
$sql = '';
$keys = array_keys(current($data));
foreach ($keys as $column) {
$sql .= sprintf("`%s` = CASE `%s` \n", $column, $field);
foreach ($data as $line) {
$sql .= sprintf("WHEN '%s' THEN '%s' \n", $line[$field], $line[$column]);
}
$sql .= "END,";
}
return rtrim($sql, ',');
}
/**
* 解析where条件
* @param $params
* @return array|string
*/
function parseParams($params)
{
$where = [];
foreach ($params as $key => $value) {
$where[] = sprintf("`%s` = '%s'", $key, $value);
}
return $where ? ' AND ' . implode(' AND ', $where) : '';
}