34

有没有人遇到过这个错误：一般错误：1390 Prepared statement contains too many placeholders

我刚刚通过 SequelPro 导入了超过 50,000 条记录，现在当我在视图中查看这些记录（Laravel 4）时，我得到一般错误：1390 Prepared statement contains too many placeholders。

我的 AdminNotesController.php 文件中的以下 index() 方法是生成查询和呈现视图的内容。

public function index()
{
    $created_at_value = Input::get('created_at_value');
    $note_types_value = Input::get('note_types_value');
    $contact_names_value = Input::get('contact_names_value');
    $user_names_value = Input::get('user_names_value');
    $account_managers_value = Input::get('account_managers_value');

    if (is_null($created_at_value)) $created_at_value = DB::table('notes')->lists('created_at');
    if (is_null($note_types_value)) $note_types_value = DB::table('note_types')->lists('type');
    if (is_null($contact_names_value)) $contact_names_value = DB::table('contacts')->select(DB::raw('CONCAT(first_name," ",last_name) as cname'))->lists('cname');
    if (is_null($user_names_value)) $user_names_value = DB::table('users')->select(DB::raw('CONCAT(first_name," ",last_name) as uname'))->lists('uname');

    // In the view, there is a dropdown box, that allows the user to select the amount of records to show per page. Retrieve that value or set a default.
    $perPage = Input::get('perPage', 10);

    // This code retrieves the order from the session that has been selected by the user by clicking on a table column title. The value is placed in the session via the getOrder() method and is used later in the Eloquent query and joins.
    $order = Session::get('account.order', 'company_name.asc');
    $order = explode('.', $order);

    $notes_query = Note::leftJoin('note_types', 'note_types.id', '=', 'notes.note_type_id')
        ->leftJoin('users', 'users.id', '=', 'notes.user_id')
        ->leftJoin('contacts', 'contacts.id', '=', 'notes.contact_id')
        ->orderBy($order[0], $order[1])
        ->select(array('notes.*', DB::raw('notes.id as nid')));

    if (!empty($created_at_value)) $notes_query = $notes_query->whereIn('notes.created_at', $created_at_value);

    $notes = $notes_query->whereIn('note_types.type', $note_types_value)
        ->whereIn(DB::raw('CONCAT(contacts.first_name," ",contacts.last_name)'), $contact_names_value)
        ->whereIn(DB::raw('CONCAT(users.first_name," ",users.last_name)'), $user_names_value)
        ->paginate($perPage)->appends(array('created_at_value' => Input::get('created_at_value'), 'note_types_value' => Input::get('note_types_value'), 'contact_names_value' => Input::get('contact_names_value'), 'user_names_value' => Input::get('user_names_value')));

    $notes_trash = Note::onlyTrashed()
        ->leftJoin('note_types', 'note_types.id', '=', 'notes.note_type_id')
        ->leftJoin('users', 'users.id', '=', 'notes.user_id')
        ->leftJoin('contacts', 'contacts.id', '=', 'notes.contact_id')
        ->orderBy($order[0], $order[1])
        ->select(array('notes.*', DB::raw('notes.id as nid')))
        ->get();

    $this->layout->content = View::make('admin.notes.index', array(
        'notes'             => $notes,
        'created_at'        => DB::table('notes')->lists('created_at', 'created_at'),
        'note_types'        => DB::table('note_types')->lists('type', 'type'),
        'contacts'          => DB::table('contacts')->select(DB::raw('CONCAT(first_name," ",last_name) as cname'))->lists('cname', 'cname'),
        'accounts'          => Account::lists('company_name', 'company_name'),
        'users'             => DB::table('users')->select(DB::raw('CONCAT(first_name," ",last_name) as uname'))->lists('uname', 'uname'),
        'notes_trash'       => $notes_trash,
        'perPage'           => $perPage
    ));
}

任何意见，将不胜感激。谢谢。

4

8 回答 8

39

通过使用array_chunk函数解决了这个问题。

以下是解决方案：

foreach (array_chunk($data,1000) as $t)  
{
     DB::table('table_name')->insert($t); 
}
于 2019-07-28T07:18:18.670 回答
26

MariaDB 5.5中有65,535 (2^16-1) 个占位符的限制，这应该与MySQL 5.5具有相同的行为。

不确定是否相关，我使用 MySQLi / MySQLND 在 PHP 5.5.12 上对其进行了测试。

于 2014-06-27T09:02:53.643 回答
11

只有同时满足以下两个条件时才会发生此错误：

  1. 您使用的是MySQL 本机驱动程序 (mysqlnd)而不是 MySQL 客户端库 (libmysqlclient)
  2. 你不是在模仿准备。

如果您更改其中任何一个因素，则不会发生此错误。但是请记住，出于性能或安全问题，建议同时执行这两项操作，因此除了您遇到的一次性或临时问题之外，我不会推荐此解决方案。为防止发生此错误，修复方法很简单：

$dbh->setAttribute(PDO::ATTR_EMULATE_PREPARES, true);
于 2014-04-07T19:48:39.700 回答
9

虽然我认为@The Disintegrator 关于占位符受到限制是正确的。我不会为每条记录运行 1 个查询。

我有一个运行良好的查询，直到我再添加一列，现在我有 72k 占位符，我收到了这个错误。但是，这 72k 由 9000 行和 8 列组成。一次运行此查询 1 条记录需要几天时间。（我正在尝试将 AdWords 数据导入数据库，如果我一次导入 1 条记录，则需要超过 24 小时才能导入一天的数据。我先尝试过。）

我推荐的是一些黑客行为。首先要么动态确定您想要允许的最大占位符数量 - 即 60k 是安全的。使用此数字根据列数确定一次可以导入/返回的完整记录数。为您的查询创建完整的数据数组。使用 array_chunk 和 foreach 循环以最少的查询次数获取您想要的所有内容。像这样：

$maxRecords = 1000;
$sql = 'SELECT * FROM ...';
$qMarks = array_fill(0, $maxInsert, '(?, ...)');
$tmp = $sql . $implode(', ', $qMarks);
foreach (array_chunk($data, $maxRecords) AS $junk=>$dataArray) {
  if (count($dataArray) < $maxRecords)) { break; }

  // Do your PDO stuff here using $tmp as you SQL statement with all those placeholders - the ?s
}

// Now insert all the leftovers with basically the same code as above except accounting for
// the fact that you have fewer than $maxRecords now.
于 2013-11-24T06:51:24.047 回答
2

使用 Laravel 模型，在几秒钟内将所有 11000 条记录从 sqlite 数据库复制到 mysql 数据库。将数据数组分块为 500 条记录：

public function handle(): void
{
    $smodel = new Src_model();
    $smodel->setTable($this->argument('fromtable'));
    $smodel->setConnection('default'); // sqlite database
    $src = $smodel::all()->toArray();

    $dmodel = new Dst_model();
    $dmodel->setTable($this->argument('totable'));
    $dmodel->timestamps = false;
    $stack = $dmodel->getFields();
    $fields = array_shift($stack);

    $condb = DB::connection('mysql');
    $condb->beginTransaction();

    $dmodel::query()->truncate();
    $dmodel->fillable($stack);
    $srcarr=array_chunk($src,500);
    $isOK=true;
    foreach($srcarr as $item) {
        if (!$dmodel->query()->insert($item)) $isOK=false;
    }
    if ($isOK) {
        $this->notify("Przenieśliśmy tabelę z tabeli : {$this->argument('fromtable')} do tabeli: {$this->argument('totable')}", 'Będzie świeża jak nigdy!');
        $condb->commit();
    }
    else $condb->rollBack();

}
于 2018-04-27T15:00:41.973 回答
1

您可以使用 array_chunk 函数来做到这一点，如下所示：

foreach(array_chunk($data, 1000) as $key => $smallerArray) {
        foreach ($smallerArray as $index => $value) {
                $temp[$index] = $value
        }
        DB::table('table_name')->insert(temp);
    }
于 2020-06-23T09:56:00.877 回答
0

我对上述问题的修复：在我遇到此错误时，我通过将批量插入块大小从 1000 减少到 800 来修复它，它对我有用。实际上，我的表格中有太多字段，其中大多数都包含大小的详细描述，就像完整的页面文本一样。当我去那里批量插入时，服务导致崩溃并通过上述错误。

于 2019-07-10T10:12:35.677 回答
-3

我认为占位符的数量限制为每个查询 65536 个（至少在较旧的 mysql 版本中）。

我真的无法辨别这段代码正在生成什么。但如果这是一个巨大的查询，那就是你的问题。

您应该为每条记录生成一个查询以导入并将其放入事务中。

于 2013-08-07T12:13:33.497 回答