go-redis-parser(高效的 Redis 解析工具,支持查找大 key)

go-redis-parser,项目地址:github.com/8090Lambert… 一个简单、安全的Redis 解析器。了解到目前存在的 parser,大部分都是单进程解析完成后,再统一输出,拉长了总体的执行时间,决定本身重写一个。它的特色是:离线即用,没必要链接线上服务,而且利用 golang 语言自己的协程,实现边解析边写文件内容,很是高效

简单介绍下这个工具:git

Feature

支持Redis从2.8版本至5.0版本的,除了 module外的全部数据类型。包括:github

  • String
  • Hash
  • List
  • Set
  • SortedSed
  • Stream(敲黑板,重点重点重点,重要的事情说三遍)

Other

导出 server 全部 key/values,并且会找出现有各种型的 bigkey(相似redis-cli的 --bigkeys 参数输出)golang

Installation

go-redis-parser 是可执行的二进制文件(binary file),能够使用 git 或者 go get 来下载安装redis

via git

$ git clone https://github.com/8090Lambert/go-redis-parser.git && cd go-redis-parser
$ go install
复制代码

via go

$ go get github.com/8090Lambert/go-redis-parser
复制代码

Using

在使用以前,你须要先设置 export PATH=$PATH:$GOPATH/binjson

$ go-redis-parser -rdb <dump.rdb> -o <gen-file folder> -type <gen-file type, json or csv, default csv>
复制代码

Generate file

目前可导出两种类型的文件:json、csv。这里看下 csv 文件的示例 安全

BigKeys outputs

BigKeys的输出示例:bash

# Scanning the rdb file to find biggest keys

-------- summary -------

Sampled 6 keys in the keyspace!
Total key length in bytes is 17

Biggest string found 's' has 1 bytes
Biggest   hash found 'h' has 1 fields
Biggest   list found 'li' has 2 items
Biggest sortedset found 'zset' has 2 members
Biggest    set found 'set' has 2 members
Biggest stream found 'stream' has 3 entries

1 string with 1 bytes
1 hash with 1 fields
1 list with 2 items
1 sortedset with 2 members
1 set with 2 members
1 stream with 3 entries
复制代码
相关文章
相关标签/搜索