0

我正在尝试遍历来自 SOAP 请求的一些数据，并将记录插入到我的 Drupal 安装中的自定义表中。

起初，我创建了一个自定义模块并使用标准mysqli_connect()语法连接到数据库并遍历记录并插入它们。这工作得很好，并且在大约 2 秒内顺利地获取并插入了我的远程数据。

然后我记得 Drupal 有一个数据库 API（我对 Drupal 还很陌生），所以我决定做正确的事并改用 API。我将我的代码转换为我认为我应该按照 API 文档执行的方式，但现在该过程需要 5 或 6 秒，有时甚至随机挂起并且根本没有完成，并且我得到了奇怪的会话错误。记录最终插入得很好，但它只需要永远。

我想知道我是否做错了。我还想将插入包装到事务中，因为我将首先删除目标表中的所有记录，然后插入新数据，因为我首先删除，所以我希望能够回滚，如果插入因任何原因而失败。

我没有将事务代码添加到我原来的纯 PHP 代码中，但确实尝试使用 Drupal API 尝试它，尽管完全删除事务/尝试/捕获代码似乎根本不会影响速度或问题。

无论如何，这是我的原始代码：

$data = simplexml_load_string($jobsXml);

$connection = mysqli_connect("localhost","user","pass","database");

if (mysqli_connect_errno($connection))
{
  echo "Failed to connect to MySQL: " . mysqli_connect_error();
  exit();
}

// delete * current jobs
mysqli_query($connection,'TRUNCATE TABLE jobs;');

$recordsInserted = 0;

foreach ($data->NewDataSet->Table as $item) {

  //escape and cleanup some fields
  $image = str_replace('http://www.example.com/public/images/job_headers/', '', $item->job_image_file);
  $specialty_description = mysqli_real_escape_string($connection, $item->specialty_description);
  $job_board_title = mysqli_real_escape_string($connection, $item->job_board_title);
  $job_board_subtitle = mysqli_real_escape_string($connection, $item->job_board_subtitle);
  $job_state_code = ($item->job_country_code == 'NZ') ? 'NZ' : $item->job_state_code;

  $sql =  "
  INSERT INTO jobs (
    job_number,
    specialty,
    specialty_description,
    division_code,
    job_type,
    job_type_description,
    job_state_code,
    job_country_code,
    job_location_display,
    job_board_type,
    job_image_file,
    job_board_title,
    job_board_subtitle
  ) VALUES (
    $item->job_number,
    '$item->specialty',
    '$specialty_description',
    '$item->division_code',
    '$item->job_type',
    '$item->job_type_description',
    '$job_state_code',
    '$item->job_country_code',
    '$item->job_location_display',
    '$item->job_board_type',
    '$image',
    '$job_board_title',
    '$job_board_subtitle'
  )
  ";

  if (!mysqli_query($connection,$sql))
  {
    die('Error: ' . mysqli_error($connection) . $sql);
  }
    $recordsInserted++;

}

mysqli_close($connection);
echo $recordsInserted . ' records inserted';

这是我的 Drupal 代码。谁能告诉我我做错了还是不是最有效的方法？

$data = simplexml_load_string($jobsXml);

// The transaction opens here.
$txn = db_transaction();  

// delete all current jobs
$records_deleted = db_delete('jobs')
->execute();  

$records_inserted = 0;

try {

  $records = array();

  foreach ($data->NewDataSet->Table as $item) {

    $records[] = array(
      'job_number' =>  $item->job_number,
      'specialty' => $item->specialty,
      'specialty_description' => $item->specialty_description,
      'division_code' => $item->division_code,
      'job_type' => $item->job_type,
      'job_type_description' => $item->job_type_description,
      'job_state_code' => ($item->job_country_code == 'NZ') ? 'NZ' : $item->job_state_code,
      'job_country_code' => $item->job_country_code,
      'job_location_display' => $item->job_location_display,
      'job_board_type' => $item->job_board_type,
      'job_image_file' => str_replace('http://www.example.com/public/images/job_headers/', '', $item->job_image_file),
      'job_board_title' => $item->$job_board_title,
      'job_board_subtitle' => $item->job_board_subtitle,
    );      

    $records_inserted++;

  }

  $fields = array(
    'job_number',
    'specialty',
    'specialty_description',
    'division_code',
    'job_type',
    'job_type_description',
    'job_state_code',
    'job_country_code',
    'job_location_display',
    'job_board_type',
    'job_image_file',
    'job_board_title',
    'job_board_subtitle'
  );

  $query = db_insert('jobs')
    ->fields($fields);
  foreach ($records as $record) {
    $query->values($record);
  }
  $query->execute();

} catch (Exception $e) {
  // Something went wrong somewhere, so roll back now.
  $txn->rollback();

  // Log the exception to watchdog.
  watchdog_exception('Job Import', $e);
  echo $e;
}

echo  $records_deleted . ' records deleted<br>';
echo  $records_inserted . ' records inserted';
4

1 回答 1

1

您尝试插入的数据集有多大？如果数据集非常大，那么您可能会遇到查询大小问题。尝试循环记录并像使用 PHP 一样一一插入每条记录。

于 2013-10-18T23:53:46.103 回答