留言

在这里填写留言和我交流.

SSDB 相关的问题, 建议提在这里: http://www.ideawu.net/blog/ssdb, 就是本页顶部菜单的"SSDB"链接.

Views: 132796

581 Responses to "留言"

  • Pat 2013-12-18 at 11:22:48
    亲爱的博主：
    http://wapftp.cn/phpmanual/function.strnatcmp.html
    从这个link看你的hash内key的排序是“二进制安全比较字符串”排序。能否有接口设置一个hash map的排序方法，我们习惯用“自然顺序”1、2、3……这样的 Reply
    ideawu 2013-12-18 at 14:36:59
    @Pat: Hi, 你说的是什么问题? 是 ssdb 相关的问题? Reply
    Pat 2013-12-18 at 14:42:52
    @ideawu: 嗯，我使用hkeys name "" "" 10，出来的结果是1 10 11 12 2 20 这样的排序，能否是 1 2 3.。。10 11 12，这样的。这个有实现的可能吗？ Reply
    ideawu 2013-12-18 at 14:48:49
    @Pat: 可以的, 需要你做一些工作. 你可以把数字转成固定长度的字符串, 例如8位(最大的数字的长度), 然后将1转成 00000001 再存储. Reply
    Pat 2013-12-18 at 14:55:18
    @ideawu: 嗯。是的，我现在也是用这种方法，但是我朋友一个性能问题，hscan得时候 key的长度，0000000008和00008这两种存储是否会影响，还有keystart-keyend 之间的跨度大小是否会影响性能，或者最直接的keystart 和keyend都是 “”，我不确定对性能有什么影响，我也做了相关测试。好像key本身长度短点的话，查询会更快。 Reply
    ideawu 2013-12-18 at 15:10:52
    @Pat: key的长短会有微小的影响. key的跨度不会影响scan的效率.
  • yuyoo4j 2013-12-17 at 12:06:03
    博主,为SSDB搞个qq群吧. 让爱好ssdb的人以类聚. Reply
    ideawu 2013-12-17 at 15:19:53
    @yuyoo4j: 好, 我考虑搞一个qq群. Reply
    xmxoxo 2013-12-17 at 14:12:00
    @yuyoo4j: 支持，顶一个！ Reply
    yuyoo4j 2013-12-17 at 16:13:08
    # 一台机
    work_dir = ./var
    pidfile = ./var/ssdb.pid

    server:
    #ip: 127.0.0.1
    port: 8888
    # bind to public ip
    ip: 0.0.0.0
    # format: allow|deny: all|ip_prefix
    # multiple allows or denys is supported
    #deny: all
    #allow: 127.0.0.1
    #allow: 192.168

    replication:
    slaveof:
    # sync|mirror, default is sync
    type: mirror
    ip: 10.9.20.61
    port: 8888

    logger:
    level: info
    output: log.txt
    rotate:
    size: 1000000000

    leveldb:
    # in MB
    cache_size: 500
    # in KB
    block_size: 32
    # in MB
    write_buffer_size: 64
    # in MB
    compaction_speed: 1000
    # yes|no
    compression: yes

    #第二台机器
    # ssdb-server config
    # MUST indent by TAB!

    # relative to path of this file, directory must exists
    work_dir = ./var
    pidfile = ./var/ssdb.pid

    server:
    #ip: 127.0.0.1
    port: 8888
    # bind to public ip
    ip: 0.0.0.0
    # format: allow|deny: all|ip_prefix
    # multiple allows or denys is supported
    #deny: all
    #allow: 127.0.0.1
    #allow: 192.168

    replication:
    slaveof:
    # sync|mirror, default is sync
    type: mirror
    ip: 10.9.20.62
    port: 8888

    logger:
    level: info
    output: log.txt
    rotate:
    size: 1000000000

    leveldb:
    # in MB
    cache_size: 500
    # in KB
    block_size: 32
    # in MB
    write_buffer_size: 64
    # in MB
    compaction_speed: 1000
    # yes|no
    compression: yes Reply
    ideawu 2013-12-17 at 16:19:14
    @yuyoo4j: Hi, 麻烦你把 log level 设为 debug, 然后把 log.txt 文件贴上来看看. Reply
    yuyoo4j 2013-12-17 at 16:42:50
    @ideawu:

    2013-12-17 16:32:30.820 [INFO ] ssdb-server.cpp(134): ssdb working, links: 0
    2013-12-17 16:33:30.820 [INFO ] ssdb-server.cpp(134): ssdb working, links: 0
    2013-12-17 16:34:30.821 [INFO ] ssdb-server.cpp(134): ssdb working, links: 0
    2013-12-17 16:36:18.568 [INFO ] ssdb-server.cpp(371): ssdb-server 1.6.6
    2013-12-17 16:36:18.569 [INFO ] ssdb-server.cpp(372): conf_file : ssdb.conf
    2013-12-17 16:36:18.569 [INFO ] ssdb-server.cpp(373): work_dir : ./var
    2013-12-17 16:36:18.569 [INFO ] ssdb-server.cpp(374): log_level : debug
    2013-12-17 16:36:18.569 [INFO ] ssdb-server.cpp(375): log_output : log.txt
    2013-12-17 16:36:18.569 [INFO ] ssdb-server.cpp(376): log_rotate_size : 1000000000
    2013-12-17 16:36:18.569 [INFO ] ssdb.cpp(66): main_db : ./var/data
    2013-12-17 16:36:18.569 [INFO ] ssdb.cpp(67): meta_db : ./var/meta
    2013-12-17 16:36:18.569 [INFO ] ssdb.cpp(68): cache_size : 500 MB
    2013-12-17 16:36:18.569 [INFO ] ssdb.cpp(69): block_size : 32 KB
    2013-12-17 16:36:18.569 [INFO ] ssdb.cpp(70): write_buffer : 64 MB
    2013-12-17 16:36:18.569 [INFO ] ssdb.cpp(71): compaction_speed : 1000 MB/s
    2013-12-17 16:36:18.569 [INFO ] ssdb.cpp(72): compression : yes
    2013-12-17 16:36:18.719 [DEBUG] binlog.cpp(130): capacity: 10000000, min: 1, max: 2,
    2013-12-17 16:36:18.719 [INFO ] ssdb.cpp(128): slaveof: 10.9.20.62:8888, type: mirror
    2013-12-17 16:36:18.719 [DEBUG] slave.cpp(31): last_seq: 1000018, last_key:
    2013-12-17 16:36:18.719 [INFO ] ssdb-server.cpp(399): server listen on: 0.0.0.0:8888
    2013-12-17 16:36:18.719 [INFO ] ssdb-server.cpp(439): pidfile: ./var/ssdb.pid, pid: 30257
    2013-12-17 16:36:18.719 [INFO ] ssdb-server.cpp(425): ssdb server started.
    2013-12-17 16:36:18.720 [INFO ] slave.cpp(99): [0] connecting to master at 10.9.20.62:8888…
    2013-12-17 16:36:18.720 [DEBUG] serv.cpp(273): writer 0 init
    2013-12-17 16:36:18.720 [DEBUG] serv.cpp(273): reader 0 init
    2013-12-17 16:36:18.720 [DEBUG] serv.cpp(273): reader 1 init
    2013-12-17 16:36:18.720 [DEBUG] serv.cpp(273): reader 2 init
    2013-12-17 16:36:18.720 [DEBUG] serv.cpp(273): reader 3 init
    2013-12-17 16:36:18.720 [DEBUG] serv.cpp(273): reader 4 init
    2013-12-17 16:36:18.720 [DEBUG] serv.cpp(273): reader 5 init
    2013-12-17 16:36:18.720 [DEBUG] serv.cpp(273): reader 6 init
    2013-12-17 16:36:18.720 [DEBUG] serv.cpp(273): reader 7 init
    2013-12-17 16:36:18.720 [DEBUG] serv.cpp(273): reader 8 init
    2013-12-17 16:36:18.720 [DEBUG] serv.cpp(273): reader 9 init
    2013-12-17 16:36:18.720 [INFO ] slave.cpp(118): ready to receive binlogs
    2013-12-17 16:36:20.125 [DEBUG] ssdb-server.cpp(167): new link from 10.9.20.62:54450, fd: 20, link_count: 1
    2013-12-17 16:36:20.125 [INFO ] backend_sync.cpp(35): fd: 20, accept sync client
    2013-12-17 16:36:20.125 [INFO ] backend_sync.cpp(155): [mirror]fd: 20, sync, seq: 1000028, key: ”
    2013-12-17 16:36:21.730 [DEBUG] slave.cpp(245): noop last_seq: 1000018, seq: 1000018
    2013-12-17 16:36:23.135 [DEBUG] backend_sync.cpp(182): fd: 20, 1000028 noop none
    2013-12-17 16:36:24.741 [DEBUG] slave.cpp(245): noop last_seq: 1000018, seq: 1000018
    2013-12-17 16:36:26.145 [DEBUG] backend_sync.cpp(182): fd: 20, 1000028 noop none
    2013-12-17 16:36:27.751 [DEBUG] slave.cpp(245): noop last_seq: 1000018, seq: 1000018
    2013-12-17 16:36:29.155 [DEBUG] backend_sync.cpp(182): fd: 20, 1000028 noop none
    2013-12-17 16:36:30.762 [DEBUG] slave.cpp(245): noop last_seq: 1000018, seq: 1000018
    2013-12-17 16:36:32.165 [DEBUG] backend_sync.cpp(182): fd: 20, 1000028 noop none
    2013-12-17 16:36:33.772 [DEBUG] slave.cpp(245): noop last_seq: 1000018, seq: 1000018
    2013-12-17 16:36:35.175 [DEBUG] backend_sync.cpp(182): fd: 20, 1000028 noop none
    [root@rabbitmq-61 ssdb-master]#
    [root@rabbitmq-61 ssdb-master]# ls
    api build.sh docs Makefile src ssdb-server TODO var version
    build_config.mk deps log.txt README.md ssdb.conf ssdb_slave.conf tools var_slave
    [root@rabbitmq-61 ssdb-master]# cd var/data
    [root@rabbitmq-61 data]# ls
    000005.ldb 000006.log CURRENT LOCK LOG LOG.old MANIFEST-000004
    [root@rabbitmq-61 data]# ll
    total 20
    -rw-r–r– 1 root root 241 Dec 17 16:36 000005.ldb
    -rw-r–r– 1 root root 0 Dec 17 16:36 000006.log
    -rw-r–r– 1 root root 16 Dec 17 16:36 CURRENT
    -rw-r–r– 1 root root 0 Dec 17 09:28 LOCK
    -rw-r–r– 1 root root 309 Dec 17 16:36 LOG
    -rw-r–r– 1 root root 57 Dec 17 09:28 LOG.old
    -rw-r–r– 1 root root 65536 Dec 17 16:36 MANIFEST-000004
    [root@rabbitmq-61 data]# Reply
    ideawu 2013-12-17 at 17:55:50
    @yuyoo4j: Hi, 麻烦把信息组织好, 按A和B分类, 然后说明信息对应的是A还是B. 把信息发到我邮箱.
    yuyoo4j 2013-12-17 at 16:43:48
    @yuyoo4j:
    我刚刚截取了最后边的部分.
    另外, 另外一台有数据的机器的情况:


    [root@rabbitmq-62 data]# ls
    000099.ldb 000115.ldb 000147.ldb 000190.ldb 000244.ldb 000312.ldb 000357.ldb 000388.ldb 000440.ldb 000478.ldb
    000100.ldb 000116.ldb 000148.ldb 000199.ldb 000254.ldb 000315.ldb 000358.ldb 000389.ldb 000442.ldb 000485.ldb
    000101.ldb 000117.ldb 000149.ldb 000201.ldb 000268.ldb 000317.ldb 000359.ldb 000400.ldb 000443.ldb 000486.ldb
    000102.ldb 000118.ldb 000150.ldb 000202.ldb 000270.ldb 000319.ldb 000360.ldb 000409.ldb 000445.ldb 000487.ldb
    000103.ldb 000119.ldb 000151.ldb 000204.ldb 000273.ldb 000321.ldb 000361.ldb 000410.ldb 000446.ldb 000488.ldb
    000104.ldb 000120.ldb 000161.ldb 000214.ldb 000275.ldb 000323.ldb 000362.ldb 000412.ldb 000447.ldb 000489.ldb
    000105.ldb 000121.ldb 000170.ldb 000228.ldb 000277.ldb 000333.ldb 000363.ldb 000413.ldb 000448.ldb 000490.ldb
    000106.ldb 000122.ldb 000172.ldb 000231.ldb 000279.ldb 000347.ldb 000373.ldb 000414.ldb 000449.ldb 000491.ldb
    000107.ldb 000123.ldb 000174.ldb 000233.ldb 000281.ldb 000349.ldb 000382.ldb 000415.ldb 000459.ldb 000492.ldb
    000108.ldb 000133.ldb 000175.ldb 000235.ldb 000283.ldb 000350.ldb 000383.ldb 000416.ldb 000468.ldb CURRENT
    000109.ldb 000142.ldb 000176.ldb 000237.ldb 000293.ldb 000352.ldb 000384.ldb 000417.ldb 000470.ldb LOCK
    000110.ldb 000144.ldb 000177.ldb 000239.ldb 000307.ldb 000354.ldb 000385.ldb 000418.ldb 000472.ldb LOG
    000111.ldb 000145.ldb 000178.ldb 000241.ldb 000308.ldb 000355.ldb 000386.ldb 000429.ldb 000474.ldb LOG.old
    000113.ldb 000146.ldb 000179.ldb 000243.ldb 000310.ldb 000356.ldb 000387.ldb 000438.ldb 000476.log MANIFEST-000004
    [root@rabbitmq-62 data]# pwd
    /home/zhandulin/ssdb-master/var/data
    [root@rabbitmq-62 data]#
  • yuyoo4j 2013-12-17 at 12:02:05
    我配置一个双主模式, 两边数据同步后, 我停掉一个节点, 删除data目录下所有文件,
    问: 再重启后, 怎样使数据同步到已删除的节点上? Reply
    ideawu 2013-12-17 at 16:21:01
    @yuyoo4j: Hi, 知道问题了, 必须同时删除 meta 目录! Reply
    yuyoo4j 2013-12-17 at 16:50:09
    @ideawu:
    1) 我是上次拿git主干(master) 上的代码.
    2) 刚刚kill 掉后,删除 data目录和 meta目录,重启后不行.日志:


    2013-12-17 16:42:27.087 [INFO ] ssdb-server.cpp(371): ssdb-server 1.6.6
    2013-12-17 16:42:27.087 [INFO ] ssdb-server.cpp(372): conf_file : ssdb.conf
    2013-12-17 16:42:27.087 [INFO ] ssdb-server.cpp(373): work_dir : ./var
    2013-12-17 16:42:27.087 [INFO ] ssdb-server.cpp(374): log_level : debug
    2013-12-17 16:42:27.087 [INFO ] ssdb-server.cpp(375): log_output : log.txt
    2013-12-17 16:42:27.087 [INFO ] ssdb-server.cpp(376): log_rotate_size : 1000000000
    2013-12-17 16:42:27.087 [INFO ] ssdb.cpp(66): main_db : ./var/data
    2013-12-17 16:42:27.088 [INFO ] ssdb.cpp(67): meta_db : ./var/meta
    2013-12-17 16:42:27.088 [INFO ] ssdb.cpp(68): cache_size : 500 MB
    2013-12-17 16:42:27.088 [INFO ] ssdb.cpp(69): block_size : 32 KB
    2013-12-17 16:42:27.088 [INFO ] ssdb.cpp(70): write_buffer : 64 MB
    2013-12-17 16:42:27.088 [INFO ] ssdb.cpp(71): compaction_speed : 1000 MB/s
    2013-12-17 16:42:27.088 [INFO ] ssdb.cpp(72): compression : yes
    2013-12-17 16:42:27.224 [DEBUG] binlog.cpp(130): capacity: 10000000, min: 0, max: 0,
    2013-12-17 16:42:27.224 [INFO ] ssdb.cpp(128): slaveof: 10.9.20.62:8888, type: mirror
    2013-12-17 16:42:27.224 [DEBUG] slave.cpp(31): last_seq: 0, last_key:
    2013-12-17 16:42:27.224 [INFO ] ssdb-server.cpp(399): server listen on: 0.0.0.0:8888
    2013-12-17 16:42:27.224 [INFO ] ssdb-server.cpp(439): pidfile: ./var/ssdb.pid, pid: 30671
    2013-12-17 16:42:27.225 [INFO ] ssdb-server.cpp(425): ssdb server started.
    2013-12-17 16:42:27.225 [INFO ] slave.cpp(99): [0] connecting to master at 10.9.20.62:8888…
    2013-12-17 16:42:27.225 [DEBUG] serv.cpp(273): writer 0 init
    2013-12-17 16:42:27.225 [DEBUG] serv.cpp(273): reader 0 init
    2013-12-17 16:42:27.225 [DEBUG] serv.cpp(273): reader 1 init
    2013-12-17 16:42:27.225 [DEBUG] serv.cpp(273): reader 2 init
    2013-12-17 16:42:27.225 [DEBUG] serv.cpp(273): reader 3 init
    2013-12-17 16:42:27.225 [DEBUG] serv.cpp(273): reader 4 init
    2013-12-17 16:42:27.225 [DEBUG] serv.cpp(273): reader 5 init
    2013-12-17 16:42:27.225 [DEBUG] serv.cpp(273): reader 6 init
    2013-12-17 16:42:27.225 [DEBUG] serv.cpp(273): reader 7 init
    2013-12-17 16:42:27.225 [DEBUG] serv.cpp(273): reader 8 init
    2013-12-17 16:42:27.225 [DEBUG] serv.cpp(273): reader 9 init
    2013-12-17 16:42:27.226 [INFO ] slave.cpp(118): ready to receive binlogs
    2013-12-17 16:42:30.152 [DEBUG] ssdb-server.cpp(167): new link from 10.9.20.62:52139, fd: 20, link_count: 1
    2013-12-17 16:42:30.152 [INFO ] backend_sync.cpp(35): fd: 20, accept sync client
    2013-12-17 16:42:30.153 [INFO ] backend_sync.cpp(155): [mirror]fd: 20, sync, seq: 1000028, key: ”
    2013-12-17 16:42:30.245 [DEBUG] slave.cpp(245): noop last_seq: 0, seq: 1000018
    2013-12-17 16:42:33.163 [DEBUG] backend_sync.cpp(182): fd: 20, 1000028 noop none
    2013-12-17 16:42:33.259 [DEBUG] slave.cpp(245): noop last_seq: 1000018, seq: 1000018
    2013-12-17 16:42:36.173 [DEBUG] backend_sync.cpp(182): fd: 20, 1000028 noop none
    2013-12-17 16:42:36.276 [DEBUG] slave.cpp(245): noop last_seq: 1000018, seq: 1000018
    2013-12-17 16:42:39.183 [DEBUG] backend_sync.cpp(182): fd: 20, 1000028 noop none
    2013-12-17 16:42:39.293 [DEBUG] slave.cpp(245): noop last_seq: 1000018, seq: 1000018
    2013-12-17 16:42:42.193 [DEBUG] backend_sync.cpp(182): fd: 20, 1000028 noop none
    2013-12-17 16:42:42.305 [DEBUG] slave.cpp(245): noop last_seq: 1000018, seq: 1000018
    2013-12-17 16:42:45.203 [DEBUG] backend_sync.cpp(182): fd: 20, 1000028 noop none
    2013-12-17 16:42:45.326 [DEBUG] slave.cpp(245): noop last_seq: 1000018, seq: 1000018
    2013-12-17 16:42:48.213 [DEBUG] backend_sync.cpp(182): fd: 20, 1000028 noop none
    2013-12-17 16:42:48.340 [DEBUG] slave.cpp(245): noop last_seq: 1000018, seq: 1000018
    2013-12-17 16:42:51.223 [DEBUG] backend_sync.cpp(182): fd: 20, 1000028 noop none
    2013-12-17 16:42:51.357 [DEBUG] slave.cpp(245): noop last_seq: 1000018, seq: 1000018
    2013-12-17 16:42:54.233 [DEBUG] backend_sync.cpp(182): fd: 20, 1000028 noop none
    2013-12-17 16:42:54.377 [DEBUG] slave.cpp(245): noop last_seq: 1000018, seq: 1000018
    2013-12-17 16:42:57.243 [DEBUG] backend_sync.cpp(182): fd: 20, 1000028 noop none
    2013-12-17 16:42:57.392 [DEBUG] slave.cpp(245): noop last_seq: 1000018, seq: 1000018
    2013-12-17 16:43:00.253 [DEBUG] backend_sync.cpp(182): fd: 20, 1000028 noop none
    2013-12-17 16:43:00.410 [DEBUG] slave.cpp(245): noop last_seq: 1000018, seq: 1000018
    2013-12-17 16:43:03.263 [DEBUG] backend_sync.cpp(182): fd: 20, 1000028 noop none
    2013-12-17 16:43:03.429 [DEBUG] slave.cpp(245): noop last_seq: 1000018, seq: 1000018
    2013-12-17 16:43:06.273 [DEBUG] backend_sync.cpp(182): fd: 20, 1000028 noop none
    2013-12-17 16:43:06.444 [DEBUG] slave.cpp(245): noop last_seq: 1000018, seq: 1000018
    2013-12-17 16:43:09.283 [DEBUG] backend_sync.cpp(182): fd: 20, 1000028 noop none
    2013-12-17 16:43:09.462 [DEBUG] slave.cpp(245): noop last_seq: 1000018, seq: 1000018
    2013-12-17 16:43:12.293 [DEBUG] backend_sync.cpp(182): fd: 20, 1000028 noop none
    2013-12-17 16:43:12.480 [DEBUG] slave.cpp(245): noop last_seq: 1000018, seq: 1000018 Reply
    yuyoo4j 2013-12-17 at 16:44:18
    @ideawu:
    好的. 我试试. Reply
    ideawu 2013-12-17 at 15:19:33
    @yuyoo4j: Hi, 你重启节点之后, 没有自动同步数据吗? Reply
    yuyoo4j 2013-12-17 at 16:02:57
    @ideawu: 没有 Reply
  • Pat 2013-12-13 at 11:55:19
    你好博主，这个是我在测试时候出错的信息，当时我在压力测试给这个name hset，然后我再客户端操作hclear所致，其他操作没问题，就是客户端使用hclear 会报错，求解答
    ssdb 127.0.0.1:8888> hclear service_test
    Traceback (most recent call last):
    File "./tools/../deps/cpy/cpy.py", line 65, in <module>
    File "/usr/local/ssdb-stable/ssdb-master/tools/_cpy_/ssdb-cli.py", line 420, in <module>
    num = hclear(link, args[0])
    File "/usr/local/ssdb-stable/ssdb-master/tools/_cpy_/ssdb-cli.py", line 138, in hclear
    if ((ret – last_count)>=batch or verbose!=False and num<batch):
    UnboundLocalError: local variable ‘last_count’ referenced before assignment Reply
    ideawu 2013-12-13 at 14:10:29
    @Pat: 多谢反馈, fixed. Reply
  • simon 2013-12-10 at 10:28:35
    你好：ideawu
    目前实际使用的内容己经1.5G了己经超过了，配置设置的500M，这是什么原因导致的？

    leveldb:
    # in MB
    cache_size: 500
    # in KB
    block_size: 32
    # in MB
    write_buffer_size: 64
    # in MB
    compaction_speed: 200
    # yes|no
    compression: yes Reply
    ideawu 2013-12-10 at 13:45:09
    @simon: ssdb 的内存使用是 cache_size + write_buffer_size * (2 + L0). 其中 L0 是大于 4 的数字, 是在变动中. 内存的使用应该是突发的增多, 如果正常使用一段后, 没有变小, 请反馈一下. Reply
    simon 2013-12-12 at 10:45:44
    @ideawu:
    做了一个测试，设置的 cache_size:500, write_buffer_size: 64
    用有序的key(1-20W)，写入20W条记录，每条记录5K内容。
    再用abtest 随机读取这20W的key,并发为100.
    这时内容不继的从硬盘到内存，再经过2次返回读取以后内存达到了1.7G。
    但是，等了一天，没有做任何读写，内存一直保持在1.7G，是怎么样的情况下才会释放内存？
    4325 root 15 0 2231m 1.7g 1.7g S 0.0 22.5 1:06.15 /usr/local/ssdb/ssdb-server -d /usr/local/ssdb/ssdb.conf Reply
    ideawu 2013-12-12 at 11:06:43
    @simon: Hi, 可以在 ssdb-cli 命令行执行 compact 命令释放内存. 如果你比较在意内存的话, 可以调小 cache_size 和 write_buffer_size. Reply
    simon 2013-12-10 at 11:03:02
    @simon: 不好意思打错字了，是内存己经1.5G了 Reply
  • whl 2013-12-07 at 14:39:35
    ssdb启动时，如果数据量大的话，会很慢。
    执行compact的时间太长了，如果线上升级版本的话，比较麻烦。。
    有解决方法吗？ Reply
    ideawu 2013-12-07 at 19:46:48
    @whl: 你好, compact 虽然执行的时间较长, 但不会阻塞正常的请求. 只会阻塞 ssdb-cli, 但你还可以再打开另外一个 ssdb-cli. Reply
    whl 2013-12-07 at 15:05:48
    @whl:
    额。。数据量100G，启动都快用了1个小时了。。。还没起来。 Reply
    ideawu 2013-12-12 at 13:31:53
    @whl: Hi, 已经 fixed. Reply
    ideawu 2013-12-08 at 17:30:46
    @whl: 还有, 你的 write_buffer_size 配置是多少? 这个参数比较影响启动速度. Reply
    ideawu 2013-12-08 at 12:03:28
    @whl: 还有, 麻烦把你的 ssdb.conf 也贴上来看看. Reply
    ideawu 2013-12-07 at 19:49:01
    @whl: 你好, 麻烦 tail -f data/LOG 看下输出什么? Reply
    whl 2013-12-07 at 21:56:39
    @ideawu:
    没有什么输出，就是把配置打了出来。
    ssdb-cli一直连不上，将近一个小时才好。
    应该是启动的时候在整理数据，但是时间太长了。。 Reply
    ideawu 2013-12-09 at 11:58:18
    @whl: Hi, 100G的数据其实不大, 我们也从来没有遇到过ssdb启动如此长时间的情况, 我们的启动最慢也会在1分钟内. 启动速度可能还和当时的硬盘IO压力有关, 如果你方便, 咱们可以在 gtalk 里即时聊一下, 我多了解一下你们的情况. 我的gmail邮箱地址在这 http://www.ideawu.net/blog/about Reply
    whl 2013-12-09 at 15:12:16
    @ideawu:
    好像不在线啊，不能发送消息。。
    我的帐号是whl880920@gmail.com
    ideawu 2013-12-08 at 10:31:50
    @whl: Hi, 你的应用场景能大概描述一下吗? 是否更新多, 读少? 100G 数据是怎么产生的? 我会修改下 leveldb, 避免它在启动时阻塞太长时间. Reply
    whl 2013-12-09 at 11:08:28
    @ideawu:
    每小时的日志有很多，大约5G，处理完后，存入ssdb。
    存的结果都是zset.

    大概的数据是这样的：
    date id 操作次数 大约200W的长度。
    id sub_id 操作次数 大约几百个。
    whl 2013-12-09 at 11:03:30
    @ideawu:
    配置都是默认的，没修改过。
    leveldb:
    # in MB
    cache_size: 500
    # in KB
    block_size: 32
    # in MB
    write_buffer_size: 64
    # in MB
    compaction_speed: 200
    # yes|no
    compression: no
    whl 2013-12-09 at 10:23:23
    @ideawu:
    是的，更新很多，读很少。
    每小时处理日志，把结果存起来。
  • Pat 2013-12-04 at 17:27:45
    博主大神，最近研究了ssdb，碰到了3个问题
    1、当如hset一堆数据后，文件夹大小在1g左右，然后我get这些数据，ssdb内存就会增加。然后就长时间保持在1.1g内存下不去了。知道怎么回事吗？
    2、ssdb能像redis那样增加list的操作吗，有些时候push来的更方面
    3、master里面删除了将近2g的数据，同样slave已经无法获取这些数据，但是slave的data文件夹的体积却没有释放下来。只有重启才行。求其他方法。
    谢谢解答！ Reply
    ideawu 2013-12-04 at 18:51:04
    @Pat: Hi,

    1. 如果你频繁访问数据, ssdb 会把一些数据缓存在内存中, 占用内存. 你可以把 cache_size 调小一些.

    2. list 功能在考虑中.

    3. ssdb 不一定立即清除被删除的数据, 它会在你以后的操作过程中, 判断时机到了再清理. 如果你在意, 可以使用 ssdb-cli 命令行连接上去, 执行 compact 命令, 清理已删除的 key. Reply
    Pat 2013-12-05 at 10:35:27
    @ideawu: 谢谢你的回复！
    leveldb:
    # in MB
    cache_size: 500
    # in KB
    block_size: 32
    # in MB
    write_buffer_size: 64
    # in MB
    compaction_speed: 200
    # yes|no
    compression: yes
    这是我的配置，一直都是。500MB的大小他确实会超过达到1G。这是回收不及时，导致无法回收内存了吗？ Reply
    simon 2013-12-05 at 17:29:20
    @Pat: 我也碰到了同样的问题，内存使用己经超过了，限制内存大小。 Reply
  • pozen 2013-12-04 at 17:25:36
    BUG:

    我用golang api 查询一个key的值（值是1）， 返回的结果是：
    [ok 1
    ]
    [not_found]

    通的情况下的结果不应该是：[ok 1] 么 Reply
    ideawu 2013-12-04 at 18:45:16
    @pozen: Hi, 是不是数据在存储进去的时候, 就带有换行了? 你用 ssdb-cli 看下. Reply
  • yang 2013-12-04 at 16:39:16
    博主，当数据越来越多时，请问SSDB数据库中可以设置数据自动过期吗？提供了这个功能吗？ Reply
    ideawu 2013-12-04 at 17:15:05
    @yang: 你好, 这个功能不在计划中. 不过, 你可以利用现有的功能做少量开发可以实现. 例如, 你可以用一个 zset 记录每个 key 的更新时间, 然后定期跑一个 crontab 任务, 用来清理数据. Reply
  • xmxoxo 2013-12-03 at 19:09:41
    * 支持主从同步, 多主同步
    主从同步实现了，多主同步是要怎么搞？ Reply

« [3][4][5][6][7][8][9][10][11] » 7/28

Leave a Comment