建站
咨詢
售后
建站咨詢
新聞中心
近年來(lái)，在軟件開(kāi)發(fā)過(guò)程中，Redis數(shù)據(jù)庫(kù)已經(jīng)成為業(yè)界首選。它可以實(shí)現(xiàn)高效的內(nèi)存存儲(chǔ)，支持跨平臺(tái)，而且它的讀寫(xiě)性能極其出色，能夠加快系統(tǒng)的處理速度，提升應(yīng)用的用戶體驗(yàn)。
成都創(chuàng)新互聯(lián)主要從事做網(wǎng)站、成都網(wǎng)站設(shè)計(jì)、網(wǎng)頁(yè)設(shè)計(jì)、企業(yè)做網(wǎng)站、公司建網(wǎng)站等業(yè)務(wù)。立足成都服務(wù)霍城,十載網(wǎng)站建設(shè)經(jīng)驗(yàn),價(jià)格優(yōu)惠、服務(wù)專業(yè),歡迎來(lái)電咨詢建站服務(wù):18982081108
但是，當(dāng)業(yè)務(wù)存儲(chǔ)大量數(shù)據(jù)時(shí)，單次導(dǎo)入到Redis數(shù)據(jù)庫(kù)的數(shù)據(jù)量不能超過(guò)一定限度，大規(guī)模的數(shù)據(jù)遷移會(huì)成為一個(gè)非常重要的難點(diǎn)。如果數(shù)據(jù)量較大，一次性導(dǎo)入到Redis數(shù)據(jù)庫(kù)可能會(huì)失敗，這時(shí)候就需要將數(shù)據(jù)遷移量分為若干次，分步遷移至Redis數(shù)據(jù)庫(kù)，從而使大規(guī)模的數(shù)據(jù)遷移變得更加容易。
實(shí)現(xiàn)這一目標(biāo)，需要分兩步實(shí)施：第一步從數(shù)據(jù)源獲取大量數(shù)據(jù)；第二步將數(shù)據(jù)分段導(dǎo)入至Redis數(shù)據(jù)庫(kù)。
第一步，從MySQL數(shù)據(jù)庫(kù)讀取大量數(shù)據(jù)：
conn = mysql.connector.connect(host=”,port=3306,database=’mydb’,user=”,password=”)
cursor = conn.cursor()
sql = ‘select * from table1’
cursor.execute(sql)
results = cursor.fetchall()
conn.close()
第二步，將數(shù)據(jù)分段導(dǎo)入至Redis數(shù)據(jù)庫(kù)：
import redis
import JSON
# 連接Redis數(shù)據(jù)庫(kù)
r = redis.Redis(host=’localhost’,port=6379,db=1)
# 設(shè)置每次提取1000條數(shù)據(jù)
n = 1000
# 設(shè)置初始變量
m = 0
l = n
while m
new_results = results[m:l]
#將數(shù)據(jù)轉(zhuǎn)換為json格式
json_data = json.dumps(new_results)
#將json格式的數(shù)據(jù)寫(xiě)入Redis
r.set(‘people_data’,json_data)
#讓m的值等于l的值
m = l
#讓l的值加上n的值
l = l+n
通過(guò)上面的代碼，可以實(shí)現(xiàn)大規(guī)模的批量遷移數(shù)據(jù)至Redis數(shù)據(jù)庫(kù)的功能。
創(chuàng)新互聯(lián)網(wǎng)絡(luò)推廣網(wǎng)站建設(shè)，網(wǎng)站設(shè)計(jì)，網(wǎng)站建設(shè)公司，網(wǎng)站制作，網(wǎng)頁(yè)設(shè)計(jì)，1500元定制網(wǎng)站優(yōu)化全包，先排名后付費(fèi)，已為上千家服務(wù)，聯(lián)系電話：13518219792
網(wǎng)站題目：大規(guī)模批量遷移數(shù)據(jù)至Redis數(shù)據(jù)庫(kù)（批量遷移數(shù)據(jù)到redis）
URL鏈接：http://www.5511xx.com/article/cdsppjg.html
