问:psycopg2 大量数据插入/更新性能优化
在写一个数据统计的脚本,基本流程是从一个表中取出数据(现在每次取约10万条记录),在内存中进行一些整理和计算,再插入/更新到另外一张表中,每次经过整理的需要插入/更新的数据大约有几万到十几万条。源数据表和目的数据表都事先建好了索引,查询操作都是通过索引查找。因为用的数据库是postgresql 9.4, 不支持upsert...
2015-10-16
问: 为什么 if 判断必须写???求解...
(本人前端, php 小白一枚) 请问各位, 获取到前端的数据之后, 将其插入到数据库这种的时候, 为什么非要写 {代码...} 这句话, 插入数据才能成功, 这不就是一句判断吗? 如果不判断直接将数据 {代码...} 直接插入数据库不行么????
2016-09-09✓ 已解决
问:HarmonyOS 数据库插入15000条数据,耗时近9s,有没有更高效的插入方法呢?
如题:HarmonyOS 数据库插入15000条数据,耗时近9s,有没有更高效的插入方法呢?
2024-10-11
问:数据库批量插入数据的速度是否与索引有关?
在数据库批量插入数据时,插入数据的速度是否与创建的索引有关?如果有关请给出指相关文档,谢谢!
2016-12-28
答:PHP循环插入数据库的性能与redis队列插入数据库的性能有差异吗?
不要循环插入数据库,最好将数据处理拼接成批量insert语句,单次插入,
2019-09-25
答:往分布式表写数据时报 contains external partitions.
使用append!或tableInsert函数往分布式数据表中插入数据。即使只插入一条数据,也要用表的形式来表示新增的数据。上面代码可改为如下: {代码...}
问:gorm 如何一次插入多条
本菜使用 gorm 插入数据到数据库,但是发现一次插入多条不行,发现貌似gorm不支持多条插入, 求大神推荐一款好用的orm,跪谢了,2333333
2018-05-10✓ 已解决
问:如何优化鸿蒙数据库的查询性能?
在面对海量数据时,如何优化查询语句和数据库结构以提升性能?
2025-04-21
答:yii2 批量插入如何过滤数据库中已经有的数据
将待插入的数据和数据库中已有的数据用 array_diff 计算差集,然后插入计算之后的数据。如果数据有唯一需求,再建个唯一索引保证数据不重复
2020-10-28
答:如何处理底端上送的重复数据呢?
1、正确做法是在业务机中把日志进行去重 而不是把压力丢给数据库。去完重后插入数据。 2、如果你想简单点 全部都给数据库处理。先select查看将要插入的数据在不在库中,如果不在就插入,如果在就跳过。
2015-11-03
答:发请求写增加功能的时候,报下面的错误
后台服务插入数据库异常,可能插入的数据关联外键,但这个外键不存在导致!
问:mysql数据批量插入速度慢
数据库表已经有几百万条数据,业务处理一次完成时间是9-10秒,主要是数据库写入比较多,原来是一条一条插入,一次业务大概要插入200多条,后来替换成批量插入,一次性把200多条插入,但是业务处理时间依然是要7-8秒,不知道什么原因批量插入无法提升处理速度?
2021-12-03
问:如何用 Python 快速插入数据到数据库中?
我有大概600w条数据,希望可以快速插入数据库中(MySQL,Sqlite 都行),请问大家有什么好的方法,我每1000条插入一次,但是45分钟才插入24w条。
2015-11-20
问:Oracle 数据插入问题
数据库插入 Position字段无法插入,报错 但是我查看了这个字段的所有插入的长度没有超过200的,如果不插入POSITION这个字段,数据是能插入的,所以就很纳闷, 会不会是数据库字符设置有问题 不知道JDK版本和oracle 版本以及OJDBC驱动有没有关系,JDK是1.8的,oracle是10.2.0.3的,ojdbc6,求各位看看,会是什么地方出问题了
2016-09-15
问:php大批量插入及更新的问题
方法二:foreach循环遍历构造sql语句,最后一次性插入insert into xxx(field1,field2,field3)values(xxx1,xxx2,xxx3),(xxx1,xxx2,xxx3)
2016-06-07✓ 已解决
问:阿里云日志记录查询插入存储
我要把一批数据存入阿里云日志中,并且要求存入的数据没有重复的,现在日志里大概8w的数据量,我还要存入8w,那么我在存的时候通过这个方法,我可以在插入的时候查询日志里是否已经有了我需要插入的数据。但是我现在有个问题,我是在插入的时候,每插入一次就去请求一次是否这条数据吗?是否效率太低?有什么更好的办法吗?
2021-10-12
问:HarmonyOS 官方建议关于数据存储和现实的逻辑?
目前我们使用的数据库插入和查询方式为异步操作,出现的情况是,可能数据库插入或者查询操作的时候还没有完成,界面已经加载,此时出现界面无数据现象,或者当数据正在插入的时候,界面关闭,导致数据未插入成功,或者插入部分数据,我再次进入页面,会导致本地查询无数据情况,该如何处理?
2024-12-17