博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
(5)分布式下的爬虫Scrapy应该如何做-windows下的redis的安装与配置
阅读量:6706 次
发布时间:2019-06-25

本文共 830 字,大约阅读时间需要 2 分钟。

   软件版本:

    — Redis 2.4.6 Windows Setup (64-bit)

  系统: 

  win7 64bit

  本篇的内容是为了给分布式下的爬虫做好预热的环境准备,我们知道单机的爬虫始终会有一个性能瓶颈,特别是对于是否爬过的URL来说,存在本地关系型的数据库始终会有一个性能上的考究,这里引入redis,可以很方便的通过集群来解决这个问题,在任何大的问题解决方案上,终究都是采取化整为零,分而治之的思想。如果你对于windows下的配置已经很熟悉了,本次内容可以完全略过。

  

 

一,去GitHub上下载关于windows的redis的下载文件:

 

     地址:https://github.com/rgl/redis/downloads

 

二,解压安装,下一步一步

 

 

三,以管理员身份打开CMD,切入到redis的目录,比如我的目录为C:\Program Files\Redis

 

 

cd C:\Program Files\Redis

 

四,以目录形式打开文件夹,将C:\Program Files\Redis\Conf下的redis.conf 配置文件复制到 C:\Program Files\Redis 目录

 

 

五,在命令行下输入:redis-server.exe redis.conf

 

 

 这个时候如果没有进一步报错的话,那就证明已经成功启动服务端了、

 

六,现在我们以管理员身份启动另一下CMD命令,启动客户端:

 

redis-cli.exe -h 127.0.0.1 -p 6379

 

用过bash的应该都了解参数的大致意思了 -h host域名 -p port 端口号

我们来简单的测试一下:

set parm1 mytest 

got parm1

输出:

mytest

 

OK,windows下的安装就已经成功了,关于更高级一点的配置或者将爬虫融入到分布式中,我们下一次在细讲

 

转载于:https://www.cnblogs.com/codefish/p/4939471.html

你可能感兴趣的文章
ORA-01114: IO error writing block to file
查看>>
javascript 使用btoa和atob来进行Base64转码和解码
查看>>
让Windows7更安全 不得不知的帐户设置
查看>>
设计模式系列-享元模式
查看>>
电子课本的未来
查看>>
CactiEZ中文版10.1正式发布
查看>>
Linux命令之top
查看>>
中断和异常
查看>>
字符串的处理2
查看>>
android - 自定义(组合)控件 + 自定义控件外观
查看>>
关于subpartition(hash)在表空间中的分布
查看>>
java 对象序列化
查看>>
我的友情链接
查看>>
jplayer播放插件
查看>>
telnet localhost 25
查看>>
51次课(设置更改root密码、连接mysql、mysql常用命令)
查看>>
设置logcat中log颜色
查看>>
我的友情链接
查看>>
centos中时间修改后重启后无效的问题解决办法
查看>>
【iOS-Cocos2d游戏开发之十三】CCSprite利用Bezier(贝塞尔)做抛物线动作并让CCSprite同时播放两个Action动作!...
查看>>