0

我一直在 php 中使用 mysql db 备份脚本,备份需要 21 小时我的 dbs。我想通过 cli 和 cron 将它用作日常备份脚本,想知道你们是否可以看看它,看看是否有任何我可以优化它的方法。

<?

//Timer start
$time = microtime();
$time = explode(' ', $time);
$time = $time[1] + $time[0];
$start = $time;


ini_set('memory_limit','4000M');
//ini_set('max_execution_time', 300);


$host = "host";
$user = "user";
$pass = "pass";

$db = "tagdb";

$link = mysql_connect($host,$user,$pass);
$result = mysql_query("show databases like 'tag%'");  // we only want tagdb

while($row = mysql_fetch_row($result))
{
    $dbs[] = $row[0];
}

foreach($dbs as $db)
{
        if(strlen($db) == 10 || $db == "tagdb" || $db == "tagui")
        {
        echo $db."\n";
                backup_tables($host,$user,$pass,$db);
    }
}


//backup_tables($host,$username,$password,$db);

/* backup the db OR just a table */
function backup_tables($host,$user,$pass,$name,$tables = '*')
{

      $fname = 'db-backup-'.$name.'_'.time().'.sql'; 
      echo $fname."\n";
      $handle = fopen($fname,'w+');
      $return = '';
      fwrite($handle,$return);
      fclose($handle);

      $link = mysql_connect($host,$user,$pass);
      mysql_select_db($name,$link);

      //get all of the tables
      if($tables == '*')
{
    $tables = array();
    $result = mysql_query('SHOW TABLES');
    while($row = @mysql_fetch_row($result))
    {
        $tables[] = $row[0];
    }
}
else
{
    $tables = is_array($tables) ? $tables : explode(',',$tables);
}

foreach($tables as $table)
{
  $handle = fopen($fname,'a');
  fwrite( $handle, 'DROP TABLE IF EXISTS '.$table.';' );

  $row2 = mysql_fetch_row(mysql_query('SHOW CREATE TABLE '.$table));
  fwrite( $handle, "\n\n".$row2[1].";\n\n" );

  $offset = 10000;

  $start = 0;
  do {
      $result = mysql_query( "SELECT * FROM ".$table." LIMIT ".$start.", ".$offset."" );
      $start += $offset;


      $num_rows = mysql_num_rows( $result );
      if (false === $result) {
        //close original file
        fclose($handle);
        //open error file
        $errfn = $fname.'.ERROR';
        $errf = fopen($errfn,'a');
        $err = mysql_error();
        fwrite( $errf, $err );
        fclose($errf);
        //reopen original file
        $handle = fopen($fname,'a');
        //break loop
        $num_rows = 0;
      }

      while( $row = mysql_fetch_row( $result ) ) {
          $line = 'INSERT INTO '.$table.' VALUES(';
          foreach( $row as $value ) {
              $value = addslashes( $value );
              @$value = ereg_replace( "\n","\\n", $value );
              $line .= '"'.$value.'",';
          }
          $line = substr( $line, 0, -1 ); // cut the final ','
          $line .= ");\n";
          fwrite( $handle, $line );
      }
  } while( $num_rows !== 0 );
  }

  $return="\n\n\n";
  fwrite($handle,$return);
  fclose($handle);
}

//End timer and output time
$time = microtime();
$time = explode(' ', $time);
$time = $time[1] + $time[0];
$finish = $time;
$total_time = round(($finish - $start), 4);
echo "\n Page generated in ".$total_time." seconds. \n";
?>

我正在考虑将备份拆分为并行进程,但我的数据库很大,我不确定 php 是否会因为之前的内存不足而耗尽内存。欢迎提出建议。

谢谢!

附言。我知道有更好的方法来进行备份,但是这个特定的脚本对我来说效果很好,因为我无法使用其他选项,例如 mysqldump。

4

3 回答 3

6

是的,您可以直接在 MySQL 中复制表

CREATE TABLE new_table LIKE old_table;
INSERT new_table SELECT * FROM old_table;

它会更快,您还可以将表放在 2 个独立的数据库(NEW_DB 和 OLD_DB)上

CREATE TABLE NEW_DB.new_table LIKE OLD_DB.old_table;
INSERT NEW_DB.new_table SELECT * FROM OLD_DB.old_table;

因此,您可以从 PHP 执行此操作,而无需将数据传输到 PHP,从而获得巨大的性能提升。

于 2012-08-28T20:16:51.340 回答
2

如果您要备份数据库,请mysqldump按照 Dagon 所述使用。按计划从 cron 任务中调用它。然后,如果您需要回滚,您可以简单地找到适当的转储(存储在 .sql 文件中)并执行该文件。

mysqldump -u [username] -p[password] db_name > [timestamped_filename].sql

阅读本文了解更多信息

于 2012-08-28T20:20:06.637 回答
0

正在使用 mysqldump,但意识到由于 myisam dbs 上的锁定而导致生产力下降,如果我只是删除锁定并在使用 dbs 时继续备份它们,则备份将无法使用。这就是为什么我需要类似 myisam dbs 的 hotcopy 备份

如果我错了,请纠正我,但你的脚本根本没有锁定。如果执行需要 21 小时,那么您必须遇到同步问题。

如果你不能使用mysqldump,我看到的唯一实用的解决方案是使用 MySQL 从站(参见:http ://www.redips.net/mysql/add-new-slave/ - 第 1 点和第 2 点是你感兴趣的)和mysqlhotcopyhttp ://dev.mysql.com/doc/refman/5.1/en/mysqlhotcopy.html 。

第一个解决方案设置起来更复杂,但运行起来可能更干净、更简单(我认为也更快)。通过更多的设置,它可以兼作 SQL 服务器上的负载平衡。

于 2012-08-28T21:43:07.907 回答