while循环中的PHP性能问题


php performance issue in while loop

我使用PHP处理纬度/经度点,以便生成JS并在OSM Map上显示点。当录音暂停10分钟或更长时间时,我想在地图上创建一个新轨道。

我的数据集目前大约有30000条记录在大约10个不同的轨道上(一些轨道大约有300个点,其他轨道有数千个点)。

我遇到了PHP的性能问题。当环路聚集数百个点时,数据处理速度很快,但如果轨道有数千个点,性能就会急剧下降。

这是对每个轨道进行每个点所需的时间

+-----------------+------------------------------+
| Points On Track | Time To Proceed 10000 Points |
+-----------------+------------------------------+
|              21 | 0.75                         |
|           18865 | 14.52                        |
|             539 | 0.79                         |
|             395 | 0.71                         |
|             827 | 0.79                         |
|             400 | 0.74                         |
|             674 | 0.78                         |
|            2060 | 1.01                         |
|            2056 | 0.99                         |
|             477 | 0.73                         |
|             628 | 0.77                         |
|             472 | 0.73                         |
+-----------------+------------------------------+

我们可以看到,当我在赛道上有很多积分时,表现会急剧下降。在这种特殊情况下,处理所有点大约需要30秒。如果我将每个曲目的点数限制为500分,则性能相当不错(大约2.5秒来处理我的数据集)。

我使用我的Synology DS415play作为web服务器。

下面是我的代码:
$dataTab = array();
if ($result = $mysqli->query($sql)) 
    {   
        $count = 0;
        $row = $result->fetch_array();
        $data = $dataTab[$tabPrt] . "[" . $row['latitude'] . "," . $row['longitude'] . "]," ;
        $date = new DateTime($row['time']);         
        while($row = $result->fetch_array())
        {
            $count++;
            $newDate = new DateTime($row['time']);
            if(($newDate->getTimestamp() - $date->getTimestamp()) > 600)
            {
                array_push($dataTab, $data);
                $data= "";
                $count = 0;
            }
            $data = $data . "[" . $row['latitude'] . "," . $row['longitude'] . "]," ;
            $date = $newDate;
        }
        array_push($dataTab, $data);
    }

如果我像这样将每首歌限制为500点,性能就会很好

$dataTab = array();
    if ($result = $mysqli->query($sql)) 
        {   
            $count = 0;
            $row = $result->fetch_array();
            $data = $dataTab[$tabPrt] . "[" . $row['latitude'] . "," . $row['longitude'] . "]," ;
            $date = new DateTime($row['time']);         
            while($row = $result->fetch_array())
            {
                $count++;
                $newDate = new DateTime($row['time']);
                if(($newDate->getTimestamp() - $date->getTimestamp()) > 600  
                    || $count > 500)
                {
                    array_push($dataTab, $data);
                    $data= "";
                    $count = 0;
                }
                $data = $data . "[" . $row['latitude'] . "," . $row['longitude'] . "]," ;
                $date = $newDate;
            }
            array_push($dataTab, $data);
        }

感谢

编辑:我在这里提供一个数据样本:http://109.190.92.126/tracker/gpsData.sql慢脚本:http://109.190.92.126/tracker/map.php通过拆分每个轨道(最大500 pts)的正常执行速度:http://109.190.92.126/tracker/map_split.php

谢谢

如果你在最坏的情况下从数据库中获得18000条记录,你可以将时间戳检查移动到查询中以显着删除它,看起来你所做的就是查看是否有十分钟的间隙,然后将其推送到可以在mysql级别完成的数组中,这样你就不会每次从数据库中获取18000行,只是那些你需要的。

如果你发布你的mysql查询,我们可以看看把它放在那里。

编辑:尝试将查询更改为:

SELECT time, latitude, longitude 
FROM gpsData 
WHERE  time >= '2015-09-01' 
AND provider = 'gps' 
ORDER BY time DESC

这是最终产品(它在Heroku上,所以等待dyno启动)http://sove.herokuapp.com/gps/

解决方案背后的思想是在服务器端计算时间戳的差异,并操作数组中的数据。

脚本在我的MBP上完成了0.278秒,占用了15.75MB的内存,$ts的最终输出是一个路由数组(我总共得到了7个)。

有很多优化,包括跳过相同的坐标点。地图上的缩放范围不正确,但你会弄清楚的。我真应该为这份工作索要赏金的。如果你喜欢这个结果,让我知道,我可以分享代码库。

来源:https://gist.github.com/jpaljasma/04f54e0d2fa3a632071e