python 并发处理：小数据 400w 条，如何优化存储入数据库的性能？

问答 / 422 / 1 / 创建于 4年前

之前的开发中、我们共有2800条城市。任务需求是：各个城市之间、握手原则、生成一一对应关系数据。

类似满无向图，也就是{ n(n-1)/2 }= 400w多条数据

其实问题有两个：

如何生成400bw条数据（打印到随便什么文档都行，缓存起来都行）。
数据可以用 ”a-b“代替（无所谓）？🙃
构造完sql语句后，如何快速地插入postgresql数据库？🙃

postgresql

文章！！首发于我的博客Stray_Camel(＾Ｕ＾)ノ~ＹＯ。

娃哈哈店长

见习助教 493 声望

当学习养成习惯，我的博客https://boywithacoin.cn/

推荐文章：

更多推荐...

2021年python库大全 28 / 5 |

Python Masonite 框架中文翻译召集（Python 中的类 Laravel 框架） 23 / 25 |

收集了一些各大网站 python 的登陆方式,希望对学习 python 的小白，和想写爬虫的你们有所帮助,,本项目用于研究和分享各大网站的模拟登陆方式 16 / 5 |

Python 3.7 的一些新特性 10 / 2 |

PyMOTW-3 (Python 3 Module of the Week) 翻译团队召集 1 / 9 |

一起学 Python 《Python 最佳实践指南》翻译召集 16 / 2 |

讨论数量: 1

Bgods

90 声望

其实不用全部存储所有数据，可以存储2800个城市的数据，用sql查询也可以获取到他们的391万的对应关系，不知道是不是你的需求

file file

4年前评论

娃哈哈店长（楼主）

获取到他们的 391 万的对应关系已经很好实现了，因为获取的关系都是存在变量里（内存），每次调用处理都会画很多时间，我在想能不能让每次的处理这391 万的对应关系快一点~~

讨论应以学习和精进为目的。请勿发布不友善或者负能量的内容，与人为善，比聪明更重要！

帮助