bulk相关内容

Django:更有效地从多对多关系中删除项目

我的图书课使用多对多字段来保存读者.如果要从某些书中删除阅读器,可以使用循环遍历所有书本对象来删除阅读器.但这太慢了.是否可以批量操作? class Book(models.Model): readers = models.ManyToManyField(User, related_name='books') #Remove reader 'foo' from book 1, 2, ..
发布时间:2020-05-05 13:11:06 其他开发

Linq到Nhibernate批量更新查询是否等效?

不确定我是否在这里遗漏了任何东西.基本上,我正在寻找Linq to Nhibernate来执行以下SQL语句: update SomeTable set SomeInteger = (SomeInteger + 1) where SomeInteger > @NotSoMagicNumber 有什么办法吗? 谢谢! 解决方案 Linq(通常不是Linq到NHibernate ..
发布时间:2020-05-01 05:59:05 其他开发

便携式JPA批量/批量插入

我只是跳了一个别人写的功能,效率似乎有些低下,但是我对JPA的了解不足以找到一种非Hibernate专用的便携式解决方案. 简而言之,在循环中调用以插入每个新实体的Dao方法将执行"entityManager.merge(object);". JPA规范中是否定义了一种方法,可以将实体列表传递给Dao方法,并进行批量/批处理插入,而不是为每个单个对象调用merge? 另外,由于Dao ..
发布时间:2019-09-20 19:32:51 其他开发

如何:实现BatchMessageListenerContainer以批量使用JMS队列

我最近在Spring Integration中遇到了JMS使用者的需求-能够消耗大量数据而又不会给我的目标Oracle数据库造成过多的提交. DefaultMessageListenerContainer似乎不支持任何功能,但逐个消息地进行事务处理. 我在Google上搜索了解决方案,并找到了一些解决方案-但是其中许多实现不是通过从DMLC继承而是通过克隆和修改原始源代码来实现的,因此 ..
发布时间:2019-09-18 19:29:04 其他开发

在EJB中获取多个事务的干净,标准方法是什么?

我有一个 batchEdit(List实体),它调用编辑(E实体)函数一个循环,而每个edit()都拥有它自己的事务,因此失败的编辑不会回滚良好的编辑。我目前的实施方式如下: 选项1 @Stateless @TransactionManagement(value = TransactionManagementType.CONTAINER) public class Se ..
发布时间:2019-01-15 10:03:05 J2EE

Sybase JConnect:ENABLE_BULK_LOAD用法

那里的任何人都可以通过JConnect(带有 ENABLE_BULK_LOAD )向Sybase ASE提供批量插入的示例吗? 我已经在互联网上搜索,一无所获。 解决方案 我与Sybase的一位工程师取得了联系,他们提供了我是一个代码示例。所以,我得回答我自己的问题。 基本上这是一个纲要,因为代码示例非常大......这假定了很多预先初始化的变量,但否则就会有几百行。有兴趣的人 ..
发布时间:2018-12-07 12:14:25 Java开发

使用UTF-8数据的格式文件进行SQL Server批量导入

我一直指的是以下页面: http://msdn.microsoft.com/en-us/library/ms178129.aspx 我只是想批量导入具有Unicode字符的文件中的一些数据。我试过用UC-2,UTF-8等编码实际数据文件,但没有任何作用。我还修改了格式文件以使用 SQLNCHAR ,但它仍然不起作用并给出错误: 第1行第1列的批量加载数据转换错误(截断) 我 ..
发布时间:2018-08-01 11:31:07 数据库

从一个导入csv将多个用户添加到多个组

我有一个包含2列的csv,一列是AD组名,一列是用户帐户名。我正在尝试阅读csv并将用户导入其相应的组。 这是我到目前为止所要做的。它说两个参数(identity,member)都是null,这是没有意义的,因为标题是正确指定的。 import-module activedirectory $ list = import-csv“C:\Scripts\Import Bulk Us ..

如何将损坏的数据上传到生产的Google App Engine服务器?

我是上传数据到App Engine (不是开发服务器),通过loader类和远程API,并且我在CSV文件的中间点击了配额。根据日志和进度sqllite db,我怎样才能选择剩余部分数据上传? 通过数十条记录来确定哪些数据是未被传输的,是没有吸引力的任务,所以我寻找一些方法来限制我需要检查的记录数量。 这里是相关的(IMO)日志部分,如何解释工作项目数字? [DEBUG 201 ..
发布时间:2018-05-04 12:05:48 其他开发

您如何将数据批量上传到Google App Engine数据存储区?

我有大约4000条记录需要上传到Datastore。 它们目前采用CSV格式。我会很感激,如果有人会 指向我或解释如何将数据批量上传到GAE。解决方案 您可以使用 bulkloader.py 工具: 附带的bulkloader.py工具可以将数据上传到您的 应用程序的数据存储中。只需 一点设置,就可以从CSV文件创建 新的数据存储实体。 ..
发布时间:2018-05-03 18:29:38 其他开发

如何处理500+项目的Symfony表单集合

我有表单集合,需要处理500多个实体实例。在我将超时时间增加到60秒之后,增加了max_input_vars的工作方式,但它很烦人。渲染表单很慢,但提交大表单就是屁股疼痛。 我正在考虑创建纯HTML表单,但还有其他一些缺点,如验证。 那么,有没有什么合适的方法可以通过symfony的形式来处理这些大数据? $ b 控制器: public function ratesCardAct ..
发布时间:2018-03-13 20:09:06 PHP

逗号使用BULK INSERT和格式文件导致问题

我试图使用SQL Server上的BULK INSERT和格式文件导入.CSV文件。我已经创建了格式文件,并为每个值设置正确的字段终止符。格式文件已被正确验证,我已经成功地导入了一些测试数据。 然而,我在遇到引用文本中间的逗号时遇到问题,例如以下: “SB”,“7Y4386429Y0351805”,“B5503”,“”,“Chris”,1,10,“Paypal”,“付款,我会很快发送付 ..
发布时间:2018-02-03 18:19:11 其他开发

使用Web应用程序上传大文件

给定目标的环境并不是现有的,因此,我无法尝试,只能依靠分析! 我的目标可以分为以下几个截然不同的步骤: $ b $ ol 使用哑巴上传大文件(upto 100GB ),上传文件“页面 - 由于用户需要(愚蠢的)前端,并且不愿意ftp文件等,所以没有任何改变。 提供上述的web应用程序前端将托管在一台低端机器上 - 2GB内存和40GB硬盘,这个Web应用程序将不会在本地机器上存储大文件 ..
发布时间:2017-11-04 22:08:05 Java开发

为什么NHibernate的adonet.batch_size设置被忽略 - session.SetBachSize()抛出异常?

我正在使用NHibernate并从本地的SQLExpress数据库切换到Oracle11g。 我的代码开始抱怨。会话对象方法SetBatchSize()抛出一个System.NotSupported异常: 没有为会话工厂,批处理禁用。设置adonet.batch_size = 1以启用批处理。 它在SQLExpress数据库上工作。好的,所以我添加了这个 ..
发布时间:2017-09-30 21:51:34 其他开发

使用PHP发送批量邮件的更好的方法,没有PEAR邮件和“邮件”功能

您使用什么脚本,类或函数发送许多电子邮件,不包括内置的“邮件”功能并排除PEAR Mail(PHP 5.3中的许多问题和兼容性问题)。 我想每个“拍摄”发送约5000封电子邮件,但是“邮件”功能可以连接和断开每封电子邮件。 PEAR邮件有很多问题。 我尝试过Swiftmailer,但HTML在许多客户端中显示为重复(因为显然是附加的)。 是PHPMailer的答案吗? PS ..
发布时间:2017-08-09 03:03:53 PHP

如何发送批量邮件,成功率很高?

发送大量电子邮件时,有许多关于指南的文章和主题。大多数时候提到,电子邮件应该发送给订阅的用户。所以我们可以避免“用户在邮箱中点击垃圾邮件”。 在着名的社交网站中有一些功能可以发送邀请给雅虎联系人列表。在这种情况下,我们的联系人列表中的人实际上并未订阅Linkedin以获得邀请或其他邮件。但是难以理解的是,Linkedin和Facebook的邮件如何不会发送到垃圾邮件? 解决方案 开发 ..
发布时间:2017-08-09 02:05:26 开发方法

为什么我的批量电子邮件被标记为垃圾邮件?

我需要向我们的客户发送通讯(近50万),我们正在使用Google Apps作为邮件提供商,最终是Gmail。 我尝试过几个实现这一点的方法,但是我遇到了一些问题: 有时,它挂起(不发送邮件255后)。所以我决定把电子邮件分成255块,然后再试一次,但是这样一来也是挂起来的。我不能依赖这个。 另外,我的客户说我的通讯最终在他们的“垃圾邮件”文件夹,因为Google的邮件服务器已经将 ..
发布时间:2017-08-09 01:22:28 开发方法

使用PHP发送批量电子邮件

当新用户加入时,我必须向网站上的所有用户发送邮件。 我的问题是脚本在发送大约400封邮件后停止执行。 我已经将set_time_limit设置为0.而且我发送10封邮件后还会给予睡眠(2)。 可能是这个问题背后的原因。任何解决这个问题。有没有更好的方法发送大量电子邮件? 感谢提前 玫瑰 解决方案 我们这样做的方式是在cron的帮助下。 我们(在我们公司)以50个 ..
发布时间:2017-08-08 22:30:01 PHP

构建批量邮件发件人

我想建立一个允许我的客户通过电子邮件发送营销信息的应用程序。这将是一个仔细监控的工具,仅用于合法批量邮件。它将具有所有必要的“取消订阅”功能等。 该解决方案将使用VB.NET构建。 我的问题涉及实际发送电子邮件的最佳方式。我们在我们的数据中心有一个SMTP服务器,我们可以使用它。我想我们可以编写一些多线程窗口服务来监视要发送的电子邮件的数据库,然后调用System.Net.Mail A ..
发布时间:2017-08-08 21:28:28 C#/.NET

Rails应用有批量电子邮件插件吗?

有没有人知道一个插件或可以用来发送大量电子邮件的Rails应用程序? 具体来说,我想通过一个HTML电子邮件文件到耙子任务或东西,并通过电子邮件发送给已注册到我的网站的所有人,并检查“请发送有关XXX的信息”框。 我为自己写了一个黑客版本,但我想要一些巧妙地扼制自己的东西,如果中断,可以拿起它离开的地方。 更新:我最终中断了我的信用卡,并注册了一个真正的批量电子邮件服务,而且这是 ..
发布时间:2017-08-08 21:21:36 开发方法