问题标签 [psycopg2]

有没有办法让 psycopg 和 postgres 处理错误而不必重新建立连接，比如 MySQLdb？下面的注释版本适用于 MySQLdb，注释使其适用于 Psycopg2：

这必须减慢速度，任何人都可以提出传递格式错误的建议吗？显然，上面的撇号窒息了，但是有没有办法让它通过它而不得到类似下面的东西，或者提交，重新连接等？：

由于某些原因，我想对字符串值进行显式引用（成为构造 SQL 查询的一部分），而不是等待cursor.execute方法对其第二个参数的内容执行隐式引用。

“隐式引用”是指：

我更喜欢这样的东西：

Python DB API 规范是否期望如此低的级别（我在PEP 249文档READY_TO_USE_QUOTING_FUNCTION中找不到这样的功能）。如果没有，也许 Psycopg2 提供了这样的功能？如果没有，也许 Django 提供了这样的功能？我不想自己写这样的函数......

我一直在使用带有 RDBMS（MySQL 和 PostgreSQL）的 python，我注意到我真的不明白如何使用游标。

通常，他的脚本通过客户端 DB-API（如 psycopg2 或 MySQLdb）连接到数据库：

然后创建一个游标：

然后可以发出查询和命令：

现在查询的结果在哪里，我想知道？它在服务器上吗？还是在我的客户端上一点点在我的服务器上一点点？然后，如果我们需要访问一些结果，我们获取它们：

或者

现在让我们说，我没有检索所有行，并决定执行另一个查询，以前的结果会发生什么？是他们的开销。

另外，我是否应该为每种形式的命令创建一个游标并以某种方式不断地将其重用于相同的命令？我负责 psycopg2 可以以某种方式优化执行多次但具有不同值的命令，它是如何以及值得的？

谢谢

我收到错误 OperationalError: FATAL: sorry, too many clients have been when using psycopg2. 完成后，我在连接实例上调用 close 方法。我不确定是什么原因造成的，这是我对 python 和 postgresql 的第一次体验，但我在 php、asp.net、mysql 和 sql server 方面有几年的经验。

编辑：我在本地运行此程序，如果连接按应有的方式关闭，那么我一次只能打开 1 个连接。我确实有一个对数据库打开的 GUI，但即使关闭我也收到此错误。在我运行我的程序后不久就发生了。我有一个我调用的函数，它返回一个打开的连接，如下所示：

psycopg2.connect(connectionString)

谢谢

最终编辑：这是我的错误，我在错误上递归调用相同的方法，一遍又一遍地打开相同的方法。这是一个漫长的一天..

我正在尝试将二进制数据（漩涡哈希）插入 PG 表中，但出现错误：

代码：

我尝试在插入之前将 conn.Binary("identity_hash") 添加到变量中，但得到相同的错误。

identity_hash 列是一个字节。

有任何想法吗？

有没有办法在与 Postgres 的 Zope 连接中获得保存点支持？

我目前正在使用 ZPsycopgDA，它不支持保存点，并且也很难通过 buildout 安装。切换到 SQLAlchemyDA 之类的东西会让事情变得更容易吗？

背景：我的用户在 postgres 数据库中，但是当我尝试查看历史记录时，我收到有关保存点的错误。这个问题在这里解释：http: //plone.org/products/cmfeditions/issues/46

我们有一个相当具体的应用程序，它使用 PostgreSQL 8.3 作为存储后端（使用 Python 和 psycopg2）。我们对重要表执行的操作在大多数情况下是插入或更新（很少删除或选择）。

出于理智的原因，我们创建了自己的类似Data Mapper的层，该层工作得相当好，但它有一个大瓶颈，即更新性能。当然，我不希望更新/替换方案与“插入空表”方案一样快，但如果再靠近一点会很好。

请注意，此系统没有并发更新

我们总是在更新时设置每行的所有字段，这可以从我在测试中使用“替换”这个词的术语中看出。到目前为止，我已经尝试了两种方法来解决我们的更新问题：

1. 创建一个replace()需要更新行数组的过程：

   /li>

2. 创建一个insert_or_replace规则，以便除偶尔删除之外的所有内容都变为多行插入

   /li>

这些都加快了更新速度，尽管后者减慢了插入速度：

关于测试运行的随机注释：

• 所有测试都在数据库所在的同一台计算机上运行；连接到本地主机。
• 插入和更新以 500 个项目的批次应用于数据库，每个项目都在自己的事务中发送（更新）。
• 所有更新/替换测试都使用与数据库中已有的值相同的值。
• 所有数据都使用 psycopg2 adapt() 函数进行了转义。
• 所有表在使用前都被截断和清理（ADDED，在以前的运行中只发生截断）

• 该表如下所示：

  /li>

所以，真正的问题是：我怎样才能加快更新/替换操作的速度呢？（我认为这些发现可能“足够好”，但我不想在不利用 SO 人群的情况下放弃 :)

也欢迎任何人暗示更优雅的 replace_item()，或证明我的测试完全被破坏的证据。

如果您想尝试重现，可以在此处获得测试脚本。不过记得先检查一下……它适用于我，但是……

您将需要编辑 db.connect() 行以适合您的设置。

编辑

感谢 #postgresql @ freenode 中的 andres，我有另一个单查询更新测试；很像多行插入（上面列为 update_andres）。

编辑

感谢#postgresql @ freenode 中的 merlin83 和下面的 jug/jwp，我有另一个使用插入到临时/删除/插入方法的测试（上面列为“update_merlin83 (i/d/i)”）。

我的直觉是，这些测试并不能很好地代表真实场景中的性能，但我认为这些差异足以说明最有希望进行进一步研究的方法。perftest.py 脚本还包含所有更新，供那些想要查看它的人使用。虽然它相当丑陋，所以不要忘记你的护目镜:)

编辑

#postgresql @freenode 中的 andres 指出我应该使用插入到临时/更新变体（上面列为“update_merlin83 (i/u)”）进行测试。

编辑

可能是最后的编辑：我更改了我的脚本以更好地匹配我们的负载场景，即使稍微扩大一点并添加一些随机性，这些数字似乎仍然存在。如果有人从其他场景中得到非常不同的数字，我会有兴趣了解它。

有没有办法在基于 django 的代码中的两个线程之间共享相同的事务？

问题是我有 1.1 的 TestCase（将单个测试包装到事务中的那些），旨在测试在不同线程中运行的代码 [一种异步测试]。因此，这些测试创建了一些打算供第二个线程使用的数据。显然，由于此数据是在事务范围内创建的，因此对第二个线程是不可见的。但是因为这应该基本上是与 PgSQL 的相同连接（应该吗？）我希望有一种方法可以共享此事务范围，以便我的第二个线程可以访问其中添加的数据？..

任何的想法？

数据库是 PgSQL 8.3，驱动程序是 postgresql_psycopg2。Django——后备箱。

我正在将 Python 与 psycopg2 一起使用，并且我试图在VACUUM插入数千行的日常操作之后运行完整。问题是当我尝试VACUUM在我的代码中运行命令时，我收到以下错误：

如何从事务块外部的代码运行它？

如果它有所作为，我有一个简单的 DB 抽象类，它的一个子集显示在下面的上下文中（不可运行，异常处理和文档字符串被省略，并且行跨越调整）：

我有一对带有外键的 Django 模型，其中一个可以用 django-fts 搜索，比如：

当我有一个 Foo 的实例时，我可以在视图中插入print foo.bar_set.all()并看到一组结果。但是，如果我尝试通过以下任何方式在视图中使用它：

从字面上看，我能想到的任何构造都表现得好像foo实例没有bar_set属性一样。

编辑：我确定我Foo在模板中有一个实例，我测试了以下内容以按预期工作：

我确信有相关的 Bar 对象，因为我从视图 ( print foo.bar_set.all()) 中检查了这一点。如果 QuerySet 为空，{{foo.bar_set.all|pprint}}将 yield []， not ''（它在{{foo.bar_set.all|pprint}},{{foo.bar_set|pprint}}和 any上执行{{foo.nonexistent_attribute|pprint}}）。

当我使用 psycopg2 驱动程序将开发从 SQLite 数据库转移到 PostgreSQL 以使用 django-fts 全文搜索时，这种行为就开始了。

我找不到任何其他答案，因为谷歌搜索非常困难：“反向关系”或“反向外键”到处都是不相关的django.core.urlresolvers.reverse引用，我不知道如何将“*_set”的东西命名为谷歌。关于如何用谷歌搜索这个的提示也会有所帮助。