免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
楼主: wlmqgzm
打印 上一主题 下一主题

[C++] 读性能超过Memcached 65%, 单核也超过redis, 支持日志支持掉电保护,欢迎试用 [复制链接]

论坛徽章:
3
2015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:49:032015年亚洲杯之中国
日期:2015-04-22 15:52:45
11 [报告]
发表于 2016-05-09 13:18 |只看该作者
windoze 发表于 2016-05-09 13:12
回复 9# fender0107401

你可以考虑把这些小文件合并成一个大文件,建一个偏移量索引,然后用mmap。


你也可以考虑把这些小文件合并到一个磁盘/dev/sdb,建一个偏移量索引,然后用mmap整个sdb....

招聘 : c/c++研发
论坛徽章:
0
12 [报告]
发表于 2016-05-09 15:24 |只看该作者
楼主可以留下邮箱或微信吗?
想交流下

论坛徽章:
89
水瓶座
日期:2014-04-01 08:53:31天蝎座
日期:2014-04-01 08:53:53天秤座
日期:2014-04-01 08:54:02射手座
日期:2014-04-01 08:54:15子鼠
日期:2014-04-01 08:55:35辰龙
日期:2014-04-01 08:56:36未羊
日期:2014-04-01 08:56:27戌狗
日期:2014-04-01 08:56:13亥猪
日期:2014-04-01 08:56:02亥猪
日期:2014-04-08 08:38:58程序设计版块每日发帖之星
日期:2016-01-05 06:20:00程序设计版块每日发帖之星
日期:2016-01-07 06:20:00
13 [报告]
发表于 2016-05-09 15:26 |只看该作者
回复 10# windoze

这个我不会啊。

我直接弄了个程序扔那就不管了,慢慢跑。


   

论坛徽章:
89
水瓶座
日期:2014-04-01 08:53:31天蝎座
日期:2014-04-01 08:53:53天秤座
日期:2014-04-01 08:54:02射手座
日期:2014-04-01 08:54:15子鼠
日期:2014-04-01 08:55:35辰龙
日期:2014-04-01 08:56:36未羊
日期:2014-04-01 08:56:27戌狗
日期:2014-04-01 08:56:13亥猪
日期:2014-04-01 08:56:02亥猪
日期:2014-04-08 08:38:58程序设计版块每日发帖之星
日期:2016-01-05 06:20:00程序设计版块每日发帖之星
日期:2016-01-07 06:20:00
14 [报告]
发表于 2016-05-09 15:27 |只看该作者
回复 11# hanxin83

这个我也不会啊。

   

招聘 : c/c++研发
论坛徽章:
0
15 [报告]
发表于 2016-05-09 15:29 |只看该作者
或者先做一个单Table的Mysql, 实现单表的SELECT, UPDATE,DELETE, INSERT, CREATE TABLE. DROP TABLE, ALTER TABLE, TRUNC TABLE

//楼主还要实现一个sql层??

论坛徽章:
44
15-16赛季CBA联赛之浙江
日期:2021-10-11 02:03:59程序设计版块每日发帖之星
日期:2016-07-02 06:20:0015-16赛季CBA联赛之新疆
日期:2016-04-25 10:55:452016科比退役纪念章
日期:2016-04-23 00:51:2315-16赛季CBA联赛之山东
日期:2016-04-17 12:00:2815-16赛季CBA联赛之福建
日期:2016-04-12 15:21:2915-16赛季CBA联赛之辽宁
日期:2016-03-24 21:38:2715-16赛季CBA联赛之福建
日期:2016-03-18 12:13:4015-16赛季CBA联赛之佛山
日期:2016-02-05 00:55:2015-16赛季CBA联赛之佛山
日期:2016-02-04 21:11:3615-16赛季CBA联赛之天津
日期:2016-11-02 00:33:1215-16赛季CBA联赛之浙江
日期:2017-01-13 01:31:49
16 [报告]
发表于 2016-05-09 15:48 |只看该作者
回复 15# lijianweiabcde

用kv的思路,实现到这个地方的时候估计lz得哭会儿

论坛徽章:
9
程序设计版块每日发帖之星
日期:2015-10-18 06:20:00程序设计版块每日发帖之星
日期:2015-11-01 06:20:00程序设计版块每日发帖之星
日期:2015-11-02 06:20:00每日论坛发贴之星
日期:2015-11-02 06:20:00程序设计版块每日发帖之星
日期:2015-11-03 06:20:00程序设计版块每日发帖之星
日期:2015-11-04 06:20:00程序设计版块每日发帖之星
日期:2015-11-06 06:20:00数据库技术版块每周发帖之星
日期:2015-12-02 15:02:47数据库技术版块每日发帖之星
日期:2015-12-08 06:20:00
17 [报告]
发表于 2016-05-09 17:42 |只看该作者
本帖最后由 wlmqgzm 于 2016-05-09 18:39 编辑

回复 15# lijianweiabcde

存储层做完了之后, 就要考虑用户接口层, 如果图省事就采用memcached命令集,这样出一个测试版本比较快.
如果进展非常顺利,那么就弄复杂一点, 搞一个Mysql层, 先支持单表查询更新,做一个最像Mysql的Nosql, 觉得Mysql命令集还是比Memcached命令集好用,

用户接口层的代码,可大可小,看情况吧.

最近集中精力做存储层的代码,各种思路随时更改,也有可能有些设想不能够实现,重点是存储层,要覆盖主要功能点, 就看中间会遇到几个坑了.
交流的话, 可以在这个帖子中咨询, 谢谢.

   

论坛徽章:
12
2015年辞旧岁徽章
日期:2015-03-03 16:54:1515-16赛季CBA联赛之同曦
日期:2017-03-17 19:13:162016科比退役纪念章
日期:2016-11-07 08:28:12luobin
日期:2016-06-17 17:46:36wusuopu
日期:2016-06-17 17:43:4515-16赛季CBA联赛之福建
日期:2016-01-14 12:49:22程序设计版块每日发帖之星
日期:2015-12-13 06:20:00程序设计版块每日发帖之星
日期:2015-06-08 22:20:00程序设计版块每日发帖之星
日期:2015-06-08 22:20:002015年亚洲杯之科威特
日期:2015-03-24 14:21:272015年迎新春徽章
日期:2015-03-04 09:57:092016科比退役纪念章
日期:2018-04-10 16:20:18
18 [报告]
发表于 2016-05-09 19:00 |只看该作者
卤煮用什么写?C?C++?

论坛徽章:
9
程序设计版块每日发帖之星
日期:2015-10-18 06:20:00程序设计版块每日发帖之星
日期:2015-11-01 06:20:00程序设计版块每日发帖之星
日期:2015-11-02 06:20:00每日论坛发贴之星
日期:2015-11-02 06:20:00程序设计版块每日发帖之星
日期:2015-11-03 06:20:00程序设计版块每日发帖之星
日期:2015-11-04 06:20:00程序设计版块每日发帖之星
日期:2015-11-06 06:20:00数据库技术版块每周发帖之星
日期:2015-12-02 15:02:47数据库技术版块每日发帖之星
日期:2015-12-08 06:20:00
19 [报告]
发表于 2016-05-09 21:24 |只看该作者
本帖最后由 wlmqgzm 于 2016-05-09 21:30 编辑

回复 18# VIP_fuck

    C++ 类似下面这种

class  Mapping_read
{
  public:
    Mapping_read( void );
    unsigned int  read( const unsigned long long ulong_read_file_offset,  const unsigned int uint_read_length,  unsigned char* uchars_out );
    unsigned int  lz4_read( const unsigned long long ulong_read_file_offset,  const unsigned int uint_read_uncompress_length,  const unsigned int uint_out_size,  unsigned char* uchars_out );
    const unsigned char* get_uchars_begin( void );
    const char* get_chars_begin( void );
    unsigned long long  get_size( void);

  protected:
    unsigned long long  d_ulong_file_size;
    unsigned char  *d_uchars_begin;
    char  *d_chars_begin;
    //  以下为lz4压缩的读取缓存队列
    std::unordered_map<unsigned long long, std::shared_ptr<std::vector<unsigned char> > >  d_map_lz4_cache;//  hash表 用于lz4 cache
    std::list<unsigned long long>  d_list_lz4_cache_offset;  // 用于制造一个lz4 cache先进先出队列
    std::atomic<unsigned int>   d_list_lz4_cache_count;   //  用于统计队列长度的原子量
};

招聘 : c/c++研发
论坛徽章:
0
20 [报告]
发表于 2016-05-10 09:25 |只看该作者
本帖最后由 lijianweiabcde 于 2016-05-10 09:26 编辑

回复 17# wlmqgzm
我以前做过用某个存储系统替换掉mysql的innodb.....用替换不太合适,因为mysql提供了对接第三方存储的接口
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP