3

我想用 PHP 备份我的数据库。

我测试了链接脚本，但它永远不会结束，我试图repair $table在查询之前添加，但它没有帮助。

所以我想如果我只是跳过两个表（你可以在代码中看到）那么它工作正常：

<?

error_reporting(E_ALL);
ini_set('error_reporting',1);
require('../basedatos.php');

echo 'included<br>';
/* backup the db OR just a table */
function backup_tables($host,$user,$pass,$name,$tables = '*')
{


    echo '1<br>';
    //get all of the tables
    if($tables == '*')
    {
        $tables = array();
        $result = mysql_query('SHOW TABLES') or die(msyql_error());
        while($row = mysql_fetch_row($result))
        {
            $tables[] = $row[0];
        }
    }
    else
    {
        $tables = is_array($tables) ? $tables : explode(',',$tables);
    }
    echo '2<br>';
    //cycle through
    foreach($tables as $table)
    {
        if($table == 'etiquetas' || $table == 'links') continue;
        $repair = mysql_query("REPAIR table $table") or die(mysql_error());
        echo '3- '.$table.'<br>';
        $result = mysql_query('SELECT * FROM '.$table) or die(msyql_error());
        $num_fields = mysql_num_fields($result);

        $return.= 'DROP TABLE '.$table.';';
        $row2 = mysql_fetch_row(mysql_query('SHOW CREATE TABLE '.$table))  or die(msyql_error());
        $return.= "\n\n".$row2[1].";\n\n";

        for ($i = 0; $i < $num_fields; $i++) 
        {
            while($row = mysql_fetch_row($result))
            {
                $return.= 'INSERT INTO '.$table.' VALUES(';
                for($j=0; $j<$num_fields; $j++) 
                {
                    $row[$j] = addslashes($row[$j]);
                    $row[$j] = ereg_replace("\n","\\n",$row[$j]);
                    if (isset($row[$j])) { $return.= '"'.$row[$j].'"' ; } else { $return.= '""'; }
                    if ($j<($num_fields-1)) { $return.= ','; }
                }
                $return.= ");\n";
            }
        }
        $return.="\n\n\n";

    }
    echo '4<br>';
    //save file
    $handle = fopen('db-backup-'.time().'-'.(md5(implode(',',$tables))).'.sql','w+');
    fwrite($handle,$return);
    fclose($handle);
}
backup_tables('localhost','username','password','*');
?>

有什么方法可以找到给我带来问题的行，以便我可以编辑/删除它们？

-PS-

另外，如果我不跳过它们，我不会收到任何错误（脚本永远不会结束，这就是为什么我添加了一些丑陋的日志..，知道为什么吗？

-编辑-

此外，如果我尝试通过例如 sqlBuddy 导出数据库，我也会收到错误消息：

在此处输入图像描述

4

6 回答 6

2

正如许多人所说，这个脚本（以及简单的“通过 PHP 转储 MySQL”）远非最佳，但总比没有备份要好。

由于您只能使用 PHP 访问数据库，因此您应该使用它来找出问题所在。

这是您的脚本的改编版，它只会将一个表转储到文件中。这是一个调试脚本，而不是用于生产的导出工具（但是，用它做你想做的事），这就是为什么它在保存表的每一行后输出调试。

正如 Amit Kriplani 所建议的那样，每次迭代都会将数据附加到目标文件，但我认为 PHP 内存不是您的问题，如果内存不足，您应该会收到 PHP 错误，或者至少应该抛出 HTTP 500由服务器而不是永远运行脚本。

function progress_export( $file, $table, $idField, $offset = 0, $limit = 0 )
{

    debug("Starting export of table $table to file $file");

    // empty the output file
    file_put_contents( $file, '' );
    $return = '';

    
    debug("Dumping schema");

    $return.= 'DROP TABLE '.$table.';';
    $row2 = mysql_fetch_row(mysql_query("SHOW CREATE TABLE $table"));
    $return.= "\n\n".$row2[1].";\n\n";

    
    file_put_contents( $file, $return, FILE_APPEND );

    debug("Schema saved to $file");




    $return = '';

    debug( "Querying database for records" );

    $query = "SELECT * FROM $table ORDER BY $idField";

    // make offset/limit optional if we need them for further debug
    if ( $offset && $limit )
    {
        $query .= " LIMIT $offset, $limit";
    }

    $result = mysql_query($query);
    
    $i = 0;
    while( $data = mysql_fetch_assoc( $result ) )
    {
        // Let's be verbose but at least, we will see when something goes wrong
        debug( "Exporting row #".$data[$idField].", rows offset is $i...");

        $return = "INSERT INTO $table (`". implode('`, `', array_keys( $data ) )."`) VALUES (";
        $coma = '';

        foreach( $data as $column )
        {
            $return .= $coma. "'". mysql_real_escape_string( $column )."'";
            $coma = ', ';
        }

        $return .=");\n";

        file_put_contents( $file, $return, FILE_APPEND );

        debug( "Row #".$data[$idField]." saved");

        $i++;
        
        // Be sure to send data to browser
        @ob_flush();
    }

    debug( "Completed export of $table to file $file" );
}



function debug( $message )
{
    echo '['.date( "H:i:s" )."] $message <br/>";
}


// Update those settings :

$host = 'localhost';
$user = 'user';
$pass = 'pwd';
$base = 'database';

// Primary key to be sure how record are sorted
$idField = "id"; 

$table   = "etiquetas";

// add some writable directory
$file = "$table.sql";


$link = mysql_connect($host,$user,$pass);
mysql_select_db($base,$link); 




// Launching the script
progress_export( $file, $table, $idField );

编辑脚本末尾的设置并针对两个表之一运行它。

您应该在脚本仍在处理时看到输出，并获取有关正在处理的行的一些参考，如下所示：

[23:30:13] 开始将表 ezcontentobject 导出到文件 ezcontentobject.sql

[23:30:13] 转储模式

[23:30:13] 架构保存到 ezcontentobject.sql

[23:30:13] 查询数据库的记录

[23:30:13] 导出第 4 行，行偏移量为 0...

[23:30:13] 第 4 行已保存

[23:30:13] 导出第 10 行，行偏移量为 1...

[23:30:13] 第 10 行已保存

[23:30:13] 导出第 11 行，行偏移量为 2...

[23:30:13] 第 11 行已保存

[23:30:13] 导出第 12 行，行偏移量为 3...

[23:30:13] 第 12 行已保存

[23:30:13] 导出第 13 行，行偏移量为 4...

[23:30:13] 第 13 行已保存

等等

如果脚本完成...

好吧，您将备份您的表（请注意，我没有测试生成的 SQL）！

我想它不会完成：

如果脚本没有到达第一个“Exporting row...”调试语句

那么问题出在查询时。

然后，您应该尝试使用偏移量和限制参数来限制查询，继续进行二分法以找出它挂起的位置

生成限制为 1000 个第一个结果的查询的示例。

// Launching the script
progress_export( $file, $table, $idField, 0, 1000 );

如果脚本显示在挂起之前导出了一些行

在确定显示的最后一行 id 之前，您应该尝试：

  1. 再次运行脚本，看看它是否挂在同一行。这是为了看看我们是否面临“随机”问题（它从来都不是真正随机的）。

  2. 为函数调用添加一个偏移量（参见可选参数），然后第三次运行脚本，看看它是否仍然挂在同一行上。

例如 50 作为偏移量，以及一些大数字作为限制：

// Launching the script
progress_export( $file, $table, $idField, 50, 600000 );

这是为了检查它自己的行是否导致问题，或者它是否是关键的行数/数据量......

  • 如果每次都返回相同的最后一行，请检查并反馈给我们。

  • 如果添加偏移量以可预测的方式更改最后处理的行，我们可能会在某处面临资源问题。

如果您无法使用分配的资源，解决方案就是将导出拆分为多个块。您可以使用接近此脚本的脚本来完成此操作，输出一些 HTML/javascript，以自我重定向，使用偏移量和限制作为参数，而导出未完成（如果这是我们最终需要的，我将编辑答案)

  • 如果该行几乎每次都更改，那将变得更加复杂......

一些线索：

我对 VPS 没有任何经验，但是您对 CPU 使用率没有限制吗？

如果您一次使用太多资源，您的进程是否会以某种方式排队？

没有问题地转储的表呢？是否有与导致问题的两个一样大的表？

于 2013-08-09T00:54:56.637 回答
1

我不知道为什么这个“块”......但该脚本只适用于非常基本的数据库。

例如，它如何处理外键约束？这只是一个建议，可能你已经故意放弃了它，但为什么不使用mysql_dump呢？

从你的外壳：

mysql_dump -h host -u user -p my_database > db-backup.sql

编辑：正如 Riggs Folly 所建议的，phpMyAdmin 有备份设施，通常可以在主机上使用。

事实上，即使在您的主机上不可用，您仍然可以将它安装在您的 http 服务器上并将其配置为访问远程数据库服务器：

http://www.mittalpatel.co.in/access_mysql_database_hosted_remote_server_using_phpmyadmin

于 2013-08-01T17:38:24.290 回答
1

不要将输出保存到变量中，而是使用带有 FILE_APPEND 标志的 file_put_contents 将查询写入文件。如果您认为这需要很多时间，您可以使用查看器检查文件或在 webroot 目录中创建文件并在浏览器中打开它以查看发生了什么...

于 2013-08-06T06:29:16.260 回答
1

如果您使用某些自定义脚本和“sqlbuddy”等工具遇到相同的备份问题 - 结论是问题出在您的表和/或更普遍的数据库上。

我会尝试复制有问题的表并备份那些而不是原始表，以查看附加的内容：

CREATE TABLE etiquetas_copy AS SELECT * FROM etiquetas

如果您无法备份副本，我的猜测是行数肯定是问题所在。一些提供者任意（有时是默默地）杀死使用过多资源的脚本或数据库请求。

您可以尝试按照评论中的建议一次备份 1000 行。像这样的东西：

    $result = mysql_query('SELECT * FROM '.$table." LIMIT $n,$n+1000") or die(msyql_error());

您将不得不将其包装起来，并且周围的几行是一个“转动”的循环，而提取的行数为 1000，以便在处理完这 1000 行后读取下一批。

于 2013-08-09T12:16:54.883 回答
1

您是否尝试仅在有问题的表上运行脚本？这些表是否有二进制字段（如 BLOB？）。

也许您可以在 PHP 中处理之前尝试转义字段的输出：select HEX(field1), HEX(field2), HEX(field3) FROM links

然后像这样编写您的 INSERT 语句： INSERT INTO links (field1,field2,field3) VALUES (UNHEX(),UNHEX(),UNHEX());

此外，您应该使用 preg_replace 而不是 ereg_replace。这就像快了 100 倍。因此，如果您在大数据上执行此操作，它可能会减慢您的脚本速度。

最后，您应该真正查看您的错误日志配置，因为应该会发生错误。无论是 php 错误、内存限制错误、最大执行时间错误等。

很喜欢你的项目。

于 2013-08-09T14:01:36.477 回答
1

您选择的脚本是浪费时间。肯定有更好的，一个经典的和维护的完全适合这项工作的是Mysqldumper。无论如何，我不仅想在这里提供工具建议，而且还阅读了您想知道为什么会发生这种情况的问题。

如果你真的想知道，这里有一个来自故障排除部门的提示：你很可能在这里达到了内存限制。但是您看不到这一点，因为这可能是您服务器的硬性限制。在这种情况下，脚本只是被杀死，而 PHP 没有给出任何错误消息。

此外，您可以登录到文件，而不是只向 STDOUT/STDERR 报告错误。我真的建议您进行故障排除。这包括跟踪操作系统本身的日志，例如/var/log/messages配置 PHP 写入日志文件（对于硬限制，您不会在其中看到任何内容，因为 PHP 刚刚被杀死，但我仍然建议您让自己感到舒适并了解如何启用PHP 错误记录以及如何获取它）。

对于您拥有的大量数据，如果您将这些全部放入每个表的内存中的一个字符串中，那么这太大了。脚本的简单采用将附加到文件而不是字符串。这将使内存需求保持在较低水平（但会增加磁盘 I/O）。这只是一个常见的权衡（RAM 内存与磁盘存储）。您通常首先更喜欢 RAM，因为它更快，但是您没有太多。原始脚本确实仅针对每个表反映了这一点，它不支持按字符串长度进行字符串缓冲写入。

顺便说一句，即使您运行它的服务器具有 - 比如说 - 64 GB 的 RAM 用于您的脚本 - 如果字符串超过 2 GB 的大小，它也会失败，因为PHP 有字符串大小限制。

于 2013-08-11T05:52:22.170 回答