軟件版本:
系統:
Win7 64bit
本篇的內容是為了給分布式下的爬蟲做好預熱的環境準備,我們知道單機的爬蟲始終會有一個性能瓶頸,特別是對于是否爬過的URL來說,存在本地關系型的數據庫始終會有一個性能上的考究,這里引入redis,可以很方便的通過集群來解決這個問題,在任何大的問題解決方案上,終究都是采取化整為零,分而治之的思想。如果你對于windows下的配置已經很熟悉了,本次內容可以完全略過。
一,去GitHub上下載關于windows的redis的下載文件:
地址:https://github.com/rgl/redis/downloads
二,解壓安裝,下一步一步
三,以管理員身份打開CMD,切入到redis的目錄,比如我的目錄為C:/PRogram Files/Redis
cd C:/Program Files/Redis
四,以目錄形式打開文件夾,將C:/Program Files/Redis/Conf下的redis.conf 配置文件復制到 C:/Program Files/Redis 目錄
五,在命令行下輸入:redis-server.exe redis.conf

這個時候如果沒有進一步報錯的話,那就證明已經成功啟動服務端了、
六,現在我們以管理員身份啟動另一下CMD命令,啟動客戶端:
redis-cli.exe -h 127.0.0.1 -p 6379

用過bash的應該都了解參數的大致意思了 -h host域名 -p port 端口號
我們來簡單的測試一下:
set parm1 mytest
got parm1
輸出:
mytest
OK,windows下的安裝就已經成功了,關于更高級一點的配置或者將爬蟲融入到分布式中,我們下一次在細講
新聞熱點
疑難解答