这几天为了面试的事情,看个很多关于Scrapy以及周边的相关技术的文章和代码,相关的整理如下: Scrapy爬取很多网站的方法: 编程方式下运行 Scrapy spider 使用Scrapy定制可动态配置的爬虫 使用Re…
标签:redis
【译】Redis集群规范 (Redis Cluster Specification)
Redis Cluster Specification 1 设计目标和理由 1.1 Redis Cluster goals 高性能可线性扩展至最多1000节点。集群中没有代理,(集群节点间)使用异步复制,没有归并操作(m…
redis.Redis与redis.StrictRedis区别
标签:python redis redis-py提供两个类Redis和StrictRedis用于实现Redis的命令,StrictRedis用于实现大部分官方的命令,并使用官方的语法和命令(比如,SET命令对应与Stri…
Redis - Redis配置注意事项
导语 在创建Redis配置的时候,有一些特殊的配置需要注意 涉及到内存的单位注意添加 b 1k => 1000 bytes lkb => 1024 bytes daemonize为 yes 后台运行时,记得配…
Redis协议:RESP
Redis服务器与客户端通过RESP(REdis Serialization Protocol)协议通信。 RESP协议支持的数据类型 Simple String第一个字节以+开头,随后紧跟内容字符串(不能包含CR LF…
2018-09-06Redis数据库
1、redis安装和启动 redis-cli -h ip 见文档 2、redis函数学习 字符串、队列、集合、哈希、有序集合 临时设置密码 获取密码 config get requirepass 设置密码 config …
Redis详解
前言 Redis 是单进程,但线程IO复用,基于事件,类似于Netty。因为是单线程,所以浪费了,多核,如果开启集群效果会更好 NoSql的最大优势就是存储的内存中 Redis支持持久化到硬盘,支持数据机构更多,且支持分…
关于Redis你一定要知道的事儿
redis和memCache的区别? 如果简单地比较Redis与Memcached的区别,大多数都会得到以下观点: 1 Redis不仅仅支持简单的k/v类型的数据,同时还提供list,set,zset,hash等数据结构…
redis缓存 VS 程序内存缓存
开发的过程中,突然想到用redis的好处: 你需要重启服务的时候,如果数据放在程序内存的话,需要自己去数据库加载数据到程序内存。 而如果是直接用redis里的数据的话,则省去了加载,因为redis可以不重启。
redis常用知识点
1.1 资料 ,最好的入门小册子,可以先于一切文档之前看,免费。 作者Antirez的博客,Antirez维护的Redis推特。 Redis 命令中文版,huangz同学的翻译。 Redis设计与实现,又是huangz同…
redis的Pipeline的入门使用
Redis的Pipeline使用 本文例子是用Scala语言写的,有一定的java基础和scala基础即可看懂 例子中有注释,大家可以留言讨论 // 从jedis连接池中获得jedis连接对象 val jedis: Je…
Redis:如何设置更新列表的到期时间
我想在redis中存储一组不确定的长度,整个集合应在几分钟后过期. 所以,我正在做: RPUSH’a”b’EXPIRE’a’120RPUSH’a”c’EXPIRE’a’120 但是在这种情况下我只有’c’在’a’中,因为…