Python进行Redis数据迁移

系统 1344 0

Python进行Redis数据迁移

由于开发时的误操作,导致redis数据损坏,所以需要进行redis的数据迁移,网上大佬的教程基本都是需要下载附加工具,亦或是需要一些复杂的操作,个人觉得麻烦还不如写个脚本来的经济实惠。

            # -*- coding: utf-8 -*-

from redis import StrictRedis
"""
redis是用于操作Redis的第三方库,StrictRedis是官方推荐的方法,而且Redis是它的子类,Redis能做到的StrictRedis基本都能做到
"""


def redis_data_migration():
    """
    实现方法:遍历源数据库中的键值对,判断类型,用对应的方法在目标数据库中创建对应键值对
    :return:
    """

    '''
    连接源数据库与目标数据库。而且你没看错,不需要password,我都不知道是咋校验连接的
    '''
    # 连接参数需要根据个人情况修改
    src_redis = StrictRedis(host='127.0.0.1', port=3306,  db=8)
    dst_redis = StrictRedis(host='127.0.0.1', port=3307,  db=8)

    print("Begin data migration:")

    # 遍历键值对
    try:
        for key in src_redis.keys():

            # 键值对数据类型
            key_type = str(src_redis.type(key))

            # 字符串类型键值对
            if key_type == 'string':
                # 获取源数据库value
                src_value = str(src_redis.get(key))
                # 在目标数据库中创建对应键值对
                dst_redis.set(key, src_value)
                # 插入到目标数据库中的值
                dst_value = dst_redis.get(key)
                print('Migrate source {} type data{}={} to destination value {}'
                      .format(key_type, key, src_value, dst_value))

            # 哈希字典类型键值对
            elif key_type == 'hash':
                # 获取源数据库value
                src_value = src_redis.hgetall(key)
                # 哈希类型键值对需要遍历子键值对进行处理
                for son_key in src_value:
                    son_key = str(son_key)
                    son_value = str(src_redis.hget(key, son_key))
                    # 在目标数据库中创建对应键值对
                    dst_redis.hset(key, son_key, son_value)
                # 插入到目标数据库中的值
                dst_value = dst_redis.hgetall(key)
                print('Migrate source {} type data{}={} to destination value {}'
                      .format(key_type, key, src_value, dst_value))

            # 列表类型键值对
            elif key_type == 'list':
                # 获取源数据库value,list类型可进行切片获取对应键值
                src_value = src_redis.lrange(key, 0, src_redis.llen(key))
                for value in src_value:
                    # 在目标数据库中创建对应键值对
                    dst_redis.rpush(key, str(value))
                # 插入到目标数据库中的值
                dst_value = dst_redis.lrange(key, 0, src_redis.llen(key))
                print('Migrate source {} type data{}={} to destination value {}'
                      .format(key_type, key, src_value, dst_value))

            # 集合类型键值对
            elif key_type == 'set':
                # 获取源数据库value
                src_value = src_redis.scard(key)
                for value in src_redis.smembers(key):
                    # 在目标数据库中插入对应键值对
                    dst_redis.sadd(key, str(value))
                dst_value = dst_redis.scard(key)
                print('Migrate source {} type data{}={} to destination value {}'
                      .format(key_type, key, src_value, dst_value))

            # 有序集合类型键值对
            elif key_type == 'zset':
                # 获取源数据库value
                src_value = src_redis.zcard(key)
                # zset类型可以进行键值对范围的选择,这段代码是选择0-100行的键值对
                for value in src_redis.zrange(key, 0, 100):
                    value = str(value)
                    score = int(src_redis.zscore(key, value))
                    # 在目标数据库中插入对应键值对
                    dst_redis.zadd(key, score, value)
                # 插入到目标数据库中的值
                dst_value = dst_redis.zcard(key)
                print('Migrate source {} type data{}={} to destination value {}'
                      .format(key_type, key, src_value, dst_value))

    except Exception as e:
        print("Something wrong happened!!!(O。O)")
        print(e)


if __name__ == '__main__':

    redis_data_migration()

          


更多文章、技术交流、商务合作、联系博主

微信扫码或搜索:z360901061

微信扫一扫加我为好友

QQ号联系: 360901061

您的支持是博主写作最大的动力,如果您喜欢我的文章,感觉我的文章对您有帮助,请用微信扫描下面二维码支持博主2元、5元、10元、20元等您想捐的金额吧,狠狠点击下面给点支持吧,站长非常感激您!手机微信长按不能支付解决办法:请将微信支付二维码保存到相册,切换到微信,然后点击微信右上角扫一扫功能,选择支付二维码完成支付。

【本文对您有帮助就好】

您的支持是博主写作最大的动力,如果您喜欢我的文章,感觉我的文章对您有帮助,请用微信扫描上面二维码支持博主2元、5元、10元、自定义金额等您想捐的金额吧,站长会非常 感谢您的哦!!!

发表我的评论
最新评论 总共0条评论