确保计算机有16G或更多内存,然后使用您正在使用的软件慢慢处理。如果你卡住了,你就赢了。;不会死。
付钱给专业人士。
JSON是数据交换的常用格式,而不是用于数据存储和处理。建议转移到数据库,用SQL处理。
任何人都可以处理1KB数量级的数据。;it'还是手工做的好。1MB的数据,手动疲劳,需要一些软件;1GB的数据,带UI(
4[mysqld]
5绑定地址
6数据目录/数据/MySQL数据/数据
查询一段数据:lt%jsonobjnewjsonobject()JSONobj.put(
文本类型可以存储长度为1-4GB的文本字符串,直接使用
1.优化数据结构,每个数据表4-5个字段,一个索引。您还可以在不同的数据库中存储不同种类的数据。减轻单个数据库的压力。
2.写数据只是保存的问题,问题是读数据会很慢。建议用缓存
使用场景:
测试时需要插入100w甚至1000W,超过1亿的数据,运行sql脚本循环插入或者程序遍历插入都非常慢。
解决方案:
写文件
将文件导入mysql
实施例(以100w为例)
1.使用sql将100w数据生成txt文件。
2.将数据从数据库导入表中:
耗时:
该方案的缺点:
1.权威。非管理员用户没有导入。
2.写文件代码。对于测试人员来说,写文件不限于任何语言,任何语言都可以实现。