从本地到云端:看看Redis如何降低成本提高效率

发布于:2024-10-24 编辑:匿名 来源:网络

封面前言假设没有数据库,数据存储在文本文件中。如果你想搜索“腾讯云开发者社区”,怎么搜索?在Linux中,有grep、awk等命令进行搜索;使用一些高级语言,例如Java和Python,还可以通过IO流读取文件。

到目前为止,有什么可以优化的地方吗?从外部存储、内存到计算机中的缓存,数据都存储在磁盘上。在Windows平台解压文件时,打开任务管理器就可以看到清晰的数据读写,通常是MB/s级别。

文件解压时产生的读写(固态)以及内存呢?切换到内存只能看到MT/s。转换后,内存和外存之间的带宽差异可达数百倍。

寻址能力相差数万倍。可见两者的区别。

DDR4:常见工作频率为MHz,单通道带宽可达25.6GB/s(MHz*64bit/8)。 MT/s /2 = MHz;回到开头的主题,提出第一个问题:如果文件足够大,硬盘(读写)首先成为瓶颈。

代码应该怎么解决呢?我们先来看看如何优化数据库。数据库中的存储优化 数据页现在有一个表,其中存储在物理磁盘中的多行数据。

数据库中使用了很多4k的小块。这里的4k正好匹配磁盘的对齐方式,一个I/O对应一个区域。

结合上图,可以想到数据库表创建中的索引,再加上数据库特有的B+树结构,减少了大量的磁盘寻址和IO流量。同时索引也是一个小页面。

索引就像查字典一样。无论多么复杂的单词,只需几个步骤就可以检索出来。

对齐验证:新建一个空白文档,输入一堆数字并保存,文件大小:1.14KB(小于4KB),占用空间:4KB。缓存 B+ 树和数据页是通用解决方案吗?并不真地。

假设有 10 个人,一一查字典。一本字典有点捉襟见肘。

其实很多人查的都是同一个单词,所以我们可以让来查字典的人先去问查过字典的人,这样就形成了缓存。缓存在一定程度上弥补了硬盘的缺点,但当然也带来了更多的管理问题。

就缓存数据库而言,Redis成为首选。我们先来看看Redis有多受欢迎! db-engine 在键值类型中排名第一,在数据库总量中排名第六。

原因:Redis与前端交互时,更常用JSON格式。那么尝试以这种方式与缓存交互吗?存储数字、字符串和列表很容易,但取出它们却很麻烦。

如果从一个大列表中只取出一条数据,I/O 很快就会成为瓶颈。那么这种类似JSON的文件传输就是Memcache。

返回全部数据的好处不太现实,所以我们尝试给“值”添加一个类型,然后提供一定的增删改查的方??法。这种将数据转移到计算的方法。

恭喜,您现在已经介绍了Redis存储方法。 Redis字符串先看一段代码 代码语言: shell copy set key1 9 # 保存一个key为key1,value为9的对象 对象编码 key1 # 检查类型,结果是 intappend key1 'a' # 在处追加字符串 ' end of key1 a', get key1 # 9aobject编码 key1 # raw 这是Redis的字符串,get和set是String类型的内置方法。

但它与传统类型不同。从第2行和第6行改变的编码方式可以看出,这是一种动态类型的字符串,Redis使用SDS来存储它。

SDS(??Simple Dynamic String)简单动态字符串。重写字符串有什么好处? ① 解决遗留问题。

获取字符串的长度是一个非常常见的操作。 C语言是通过遍历来实现的(Redis是用C开发的),Redis直接用一个长度来维护。

代码语言:c copy struct __attribute__ ((__packed__)) sdshdr8 { uint8_t len; /*used:长度已被使用*/ uint8_t alloc; /* 排除头部和空终止符:简单理解为总长度 */ unsigned char flags; /* 类型的3个lsb,5个未使用的位:SDS编码类型,当前类型为sdshdr8*/ char buf[]; /* 实际存储内容*/}; ② 优化内存 从上面的代码中,还可以看到 __attribute__ ((__packed__ )) 这一段实际上是告诉编译器不要使用字节对齐,而是使用紧凑分配内存。 ③二进制安全以IO方式读写文件,分为字符型和字节型两种。

字符类型代表是txt文本。有很多字节流,包括图片和Java编译的类文件。

字节流可以通过一定的编码格式变成字符,但反过来却很难操作。 Redis 使用字节流。

使用起来有哪些亮点呢?例如,存储一个汉字“中”,UTF-8编码会占用三个字节,GBK编码会占用两个字节。如果在链接时使用--raw,则 ASCII 编码被解锁,提取的值变成另一种格式。

团队在使用时应统一编码格式。优化点较多,篇幅有限,先略过。

笔者作为云上Redis的开发者,只熟悉一些简单的部署命令,往往需要面板来操作。另外,Redis是内存数据库,添加到后台服务机会极大影响性能,所以购买云上的Redis是有必要的。

内网低延迟 无论是数据库还是其他服务,通过外部网络连接时,网络速度都会成为性能瓶颈。云厂商已经想到了这一点,所以检查时要注意服务器省份、城市、分区。

购买调整参数时,请注意更改配置将重置分区和其他选项。全面的控制面板自动备份、主备更换、一件式导入配置等独特功能满足基本需求。

数据仪表板让您只需查看图表即可轻松控制一切。腾讯云数据库Redis功能概述案例:热门排行榜 做几个热门话题的排行榜需要准备什么? IORedis 中正好有这样一种数据类型,它对某个主题的独特流行度值进行高频实时排名,与之完美契合,那就是 Sorted Set。

数据结构 大多数语言都有集合结构,它是不重复元素的集合,而Redis的Sorted Set在唯一性的基础上增加了有序性。底层结构listpack(7.0版本之前的ziplist)skiplist + dict的顺序也意味着前者适用于较小范围的场景。

代码语言:c copy/* ZSETs 使用专门版本的 Skiplists: zsets 使用专门版本的 Skiplists */typedef struct zskiplistNode { sds ele;双倍分数; struct zskiplistNode *向后;结构 zskiplistLevel { 结构 zskiplistNode *forward;无符号长跨度; } level[];} zskiplistNode;ele真实数据,可用于存储主题得分、流行度值或加权计算值。具体操作:连接RedisJedisLettuceRedissonSpring Data Redis有3种方式(基于Jedis) 由于API不同,下面主要介绍具体的Redis命令。

将话题和评分添加到“热搜”列表 代码语言:shell copy ZADD ‘热搜’ 1 《黑神话:悟空》 ZADD ‘热搜’ 2 “腾讯云” ZADD ‘热搜’ 3 《云游戏》上热搜索列表代码语言:shell 复制 ZREVRANGE '热搜' 0 9 WITHSCORES 返回结果代码语言:txt 复制 1) “云游戏” 2) “3” 3) “腾讯云” 4) “2” 5) “黑神话”: 《悟空》6)《1》更新热搜榜代码语言:shell复制ZINCRBY‘热搜’《黑神话:悟空》然后得到排行榜,就变成了代码语言:txt复制1)《黑神话:悟空》2)《》3)《云游戏》4)《3》5)《腾讯云》6)《2》 至此,就获得了一个简单的热搜榜。

从本地到云端:看看Redis如何降低成本提高效率

站长声明

版权声明:本文内容由互联网用户自发贡献,本站不拥有所有权,不承担相关法律责任。如果发现本站有涉嫌抄袭的内容,欢迎发送邮件 举报,并提供相关证据,一经查实,本站将立刻删除涉嫌侵权内容。

标签:

相关文章

  • 老铺黄金等人“折A转港”

    老铺黄金等人“折A转港”

    老铺黄金A股崩盘后,选择转投港股。 11月10日,老铺黄金在香港联交所披露招股说明书。 梦金源今年9月向港股市场发起进攻,之前也曾遭遇过“A”的失败。 11月17日,深交所公告称,星期六福已于11月8日主动撤回上市申请。 黄金珠宝终端消费热情带动黄金珠宝企业业绩稳步上升,不

    06-18

  • 全球首次碳化硅MEMS微推力阵列在轨点火试验成功

    全球首次碳化硅MEMS微推力阵列在轨点火试验成功

    南京理工大学化工学院消息:近日,碳化硅MEMS(微机电系统)微推力阵列芯片在轨点火试验成功与金牛座纳米星运行37天后,从地面收到点火命令成功点火,金牛座纳米星的姿态控制技术在轨道上得到验证。 金牛座纳米卫星由八院所属上海依依斯航天技术有限公司研制。 9月12日11时26

    06-06

  • 【全球财经24小时】2023年9月21日投融资事件汇总及详情

    【全球财经24小时】2023年9月21日投融资事件汇总及详情

    今日全球市场共发生16起投资披露事件,其中境内13起,境外13起。 其中,国内先进制造业4例,医疗健康行业4例,汽车交通运输行业1例,电商零售行业1例,企业服务行业1例,传统制造业2例。 涉外医疗健康行业2例,金融行业1例。 国内事件 1、灵科药业完成C2轮融资,整体C轮融资金

    06-18

  • 相信你的耳朵,盲目测试全球最薄vivo X5Max的Hi-Fi 2.0

    相信你的耳朵,盲目测试全球最薄vivo X5Max的Hi-Fi 2.0

    vivo在年底前发布了年度旗舰——全球最薄vivo,它保持着全球最薄手机的记录。 此外,vivo X5Max还搭载全新手机Hi-Fi 2.0架构,使该手机成为全球音质最好的手机,媲美专业Hi-Fi玩家。 那么,什么是Hi-Fi 2.0?根据vivo提供的信息,Hi-Fi 2.0采用了二次供电+二次放大+专业音频解

    06-17

  • 共享纸巾平台“纸鼠”完成数百万元天使轮融资,白马金服投资

    共享纸巾平台“纸鼠”完成数百万元天使轮融资,白马金服投资

    据投资界2月6日消息,共享纸巾平台“纸鼠”近日宣布,已完成数百万元天使轮融资,投资方为白马金服。    据悉,本轮融资资金将用于共享卫生纸机的升级、研发和市场拓展。   Paper Mouse成立于今年10月,是一个组织共享平台。 公开信息显示,纸鼠目前已预订多台卫生纸机,

    06-18

  • 尊湃通信完成数亿元Pre-A轮融资,致力于提供全系列Wi-Fi芯片及解决方案

    尊湃通信完成数亿元Pre-A轮融资,致力于提供全系列Wi-Fi芯片及解决方案

    投资界(ID:pedaily)5月9日消息,尊湃通信科技(南京)尊湃传播股份有限公司(二)近日宣布完成数亿元Pre-A轮融资。 本轮由小米集团、虎山资本、天极资本、嘉域资本、上海科创海王资本、品智信息等知名金融投资机构投资。 以及产业投资者的构成。 此前,尊湃通讯于5月21日完

    06-18

  • 宜家最酷的未来产品都来自这个神秘的实验室

    宜家最酷的未来产品都来自这个神秘的实验室

    在哥本哈根肉类加工区的中心地带,有无数的画廊、艺术咖啡馆和创意工作室。 其中有一栋由鱼市场改建而成的平米建筑。 利用技术和好奇心来绘制宜家的未来蓝图。 这就是宜家资助的 SPACE10 冒险之旅的起点。 作为宜家的未来生活实验室和产品创意孵化器,SPACE10总是开发一些超级

    06-21

  • 李彦宏内部信宣布李震宇晋升为百度集团高层副总裁

    李彦宏内部信宣布李震宇晋升为百度集团高层副总裁

    百度创始人与CEO李彦宏通过内部信宣布,百度集团副总裁和智能驾驶集团总经理李震宇晋升为集团高层副总裁,并将继续担任全面负责IDG的业务和管理工作,并向集团CEO汇报。

    06-17

  • 艾罗能源正计划在A股IPO,主要产品包括光伏储能系统等

    艾罗能源正计划在A股IPO,主要产品包括光伏储能系统等

    艾罗能源正在筹划A股IPO。 公司长期专注于家用光伏逆变器、家用储能设备等新能源供电设备的研发。 、生产、销售。

    06-18

  • 香港理工大学研发出适用于可穿戴电子装置的高透气超弹导电材料

    香港理工大学研发出适用于可穿戴电子装置的高透气超弹导电材料

    2020年3月24日,香港理工大学(理大)研发出适用于长时间佩戴电子装置的高透气超弹导电材料一段时间。 。 这种创新的导电材料采用涂层或印刷的方法,将液态金属材料添加到静电纺丝制成的弹性纤维网上。 它不仅具有高透气性、弹性、导电性且具有高导电稳定性,可广泛应用于健

    06-06

  • 冯仑:有了这样的制度环境,创新只是“副产品”

    冯仑:有了这样的制度环境,创新只是“副产品”

    近日,万通集团创始人冯仑在WISE超级进化者大会上谈到创新时表示,个人驱动力是一方面,外部的制度环境也很重要。 冯仑表示,必须有一个允许民营企业存在的制度环境,企业才愿意创新。 比如,土地1-2年不开发就被拿走,比如加大健康住房的投入,但登记价格和不创新一样,企业

    06-18

  • 杨迪、麻子、谢广坤都做出了“爆炸性的改变”,这背后是谁?

    杨迪、麻子、谢广坤都做出了“爆炸性的改变”,这背后是谁?

    亚洲换头术的魔力在短视频继续放大。 前一分钟杨迪还自嘲小眼睛,后一分钟成功变身男团酷偶像。 苹果手机的面部识别功能在真正的“苦力”面前不得不被打败。 《狂飙》中的麻子哥变身为五官精致的清秀美男。 无奖猜测。 原本只是想看热闹的网友们大概没有想到,看完一个视频后

    06-18