极客观点
项目管理
HarmonyOS
我想用python对全网的网站进行扫描记录，想用mysql建个表记录每个网站的信息，数据量大后怎么能快速的判断这个网站已经记录过呢？基本表结构有：id,url,name,datetime等相关字段，url想有唯一性，是拿到url查询一下判断没有数据再插入还是怎么办？如果做了唯一性索引直接插入时会报错，谢谢，或是有没有别的有效的解决办法？
python
mysql
撰写回答
你尚未登录，登录后可以
- 和开发者交流问题的细节
- 关注并接收问题和回答的更新提醒
- 参与内容的编辑和改进，让解决方法与时俱进
推荐问题
省市区街道数据在哪里可以下载？
省市区街道数据在哪里可以下载？6 回答5.1k 阅读✓ 已解决
以下4个字段可以理解： ``id, is_delete, create, update ` 但是： `version`如何理解呢？
查看到一篇MySQL文章：每一个表，都必须存在以下五个字段：以下4个字段可以理解： {代码...} 但是：version如何理解呢？2 回答7.5k 阅读✓ 已解决
请问： Python中是否有方式可以像前端的TSLint一样进行代码的自动风格格式检查？
请问：Python中是否有方式可以像前端的TSLint一样进行代码的自动风格格式检查？我知道一个库：autopep8我只有看到单个文件的检验： {代码...} 但是如何做到类似Python项目的配置文件中配置，然后自动检查呢？1 回答9.6k 阅读✓ 已解决
为什么 pypi 的页面上的新版本在通过 pip 获取不到？
为什么 pypi 的页面上的新版本在通过 pip 获取不到我要获取 bitsandbytes 的最新版本我先去 pypi 上看了一下：[链接]发现最新的版本是 0.44.1 {代码...} 但是本地安装报错了 {代码...} Why?Why?Why?我已经把设置的第三方 pypi 镜像源删除了 rm ~/.config/pip/pip.conf {代码...} 依旧不行换成百度或者ustc的也是不行 {代...2 回答5.2k 阅读✓ 已解决
mysql添加联合索引之后排序发生变化？
mysql添加联合索引之后排序发生变化。 {代码...} 在未创建索引的情况下，是按照id升序排列。 {代码...} 在创建完这条索引之后，将会按照 id 降序排列。除非手动指定 order by id asc .请问这是什么原因导致的呢？找不到具体原因。2 回答6.7k 阅读✓ 已解决
请问一下Python 可以进行强类型开发吗？
请问一下Python 可以进行强类型开发吗？1、我们知道python是弱类型语言。请问是否可以进行类似TypeScript一样进行强类型开发?2、我的需求仅仅是为了让定义函数/方法时候，知道传入和传出的是什么数据结构。3、如果可以请问是否推荐Python用于强类型开发呢？2 回答3.6k 阅读✓ 已解决
在PHP的Yii框架下如何对接人大金仓数据库呢？
最近在做国产数据库的迁移，那么在PHP的Yii框架下如何对接人大金仓数据库呢？3 回答1.7k 阅读✓ 已解决
宣传栏
分布式kv数据库
对url分组