大规模数据快速导入Redis（大批量数据导入redis）

随着现在各种移动互联网应用的到来，大规模数据均变得越来越多，但传统的数据库技术已难以容纳这么大的数据和实时应用需求，Redis内存数据库显得尤为重要。Redis不仅有很强的性能，而且可支持10百万级并发，同时支持字符串、散列表、列表、有序集合和范围查询等丰富的类型，从而更有效的满足实时的高性能数据查询和存储需求。

然而，大规模数据如何快速导入Redis成为非常重要的一环。对于大规模数据导入，使用Redis默认导入导出功能远远不能满足有较高并发需求的场景，而使用 Redis 客户端脚本批量导入时，通常会遇到被服务器断开的情况，因而使大规模的数据快速导入Redis成为一个晦涩的话题。

由于Redis支持lua脚本，因此可以通过脚本来实现大规模数据快速导入Redis。例如以下代码：

local data=redis.call('lrange',KEYS[1],0,ARGV[1]) 
local tnum=tonumber(ARGV[1]) 
for i=1,data.len do 
local tempdata=cjson.decode(data[i]) 
redis.call('hmset',tempdata.key,tempdata) 
redis.call('expire',tempdata.key,tnum) 
end

此脚本通过调用redis.call()函数，把list里面的一段数据拿出，通过JSON数据转换，在Redis中处理，诸如存入一个集合或者字符串类型数据等，来实现对大量数据的快速存取；而redis.call(‘expire’,tempdata.key,tnum)可以让数据按时自动过期，这样，便达到了大规模数据快速导入Redis的效果。

因此，在访问量大的场景，如果想快速导入Redis，可以通过以上代码，利用lua脚本实现大规模数据的快速存取，解决Redis默认导入导出功能时的低效性的问题。

香港服务器首选树叶云，2H2G首月10元开通。
树叶云（shuyeidc.com）提供简单好用，价格厚道的香港/美国云服务器和独立服务器。IDC+ISP+ICP资质。ARIN和APNIC会员。成熟技术团队15年行业经验。