Redis爬虫帮你收藏网易云音乐精华（redis爬虫网易云音乐）

Redis爬虫帮你收藏网易云音乐精华

随着互联网技术不断发展，人们对于音乐的需求也越来越高。尤其是在繁忙的生活中，音乐成为了我们释放压力的良药。而在互联网上，网易云音乐成为了越来越多人的选择，它不仅提供了丰富的歌曲资源，还有多种歌单、电台等功能。

但是，当你浏览网易云音乐时，是否会遇到以下问题？

1.过于繁琐：网易云音乐推荐的歌曲和歌单海量，但很多都和个人兴趣不符，需要花费大量时间筛选。

2.容易忘记：在忙碌的工作中，很容易忘记喜欢的音乐或者歌单。

基于这些问题，本文将介绍如何使用Redis爬虫帮助你收藏网易云音乐中的精华资源。

1.搭建Redis环境

我们需要搭建Redis环境。Redis是一个使用C语言编写的开源的高性能的NoSQL数据库。它提供了键值对存储、排序、队列等多种数据结构的支持，是一个非常适合爬虫的缓存数据库。

通过以下命令即可安装Redis：

sudo apt-get install redis

安装完成后，启动Redis服务：

redis-server

这样，Redis就配置好了。

2.使用Python爬虫爬取网易云音乐精华资源

接下来，我们需要使用Python爬虫爬取网易云音乐中的精华资源。

我们需要通过selenium来实现模拟登录网易云音乐的操作：

from selenium.webdriver.chrome.options import Options
from selenium import webdriver

options = Options()
options.add_argument('--headless')
options.add_argument('--disable-gpu')
options.add_argument('--no-sandbox')
options.add_argument('--disable-dev-shm-usage')
options.add_argument('--user-agent=[Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3]')
browser = webdriver.Chrome(options=options)

def login():
    browser.get('https://music.163.com')
    time.sleep(2)
    browser.switch_to.frame('contentFrame')
    login_btn = browser.find_element_by_xpath('//*[@id="j-flag"]/div/a[2]')
    login_btn.click()
    time.sleep(1)
    iframe = browser.find_element_by_xpath('//*[@id="login_iframe"]')
    browser.switch_to.frame(iframe)
    phone = browser.find_element_by_xpath('//*[@id="phoneipt"]')
    phone.send_keys('your_phone')
    pwd = browser.find_element_by_xpath('//*[@id="pwdInput"]')
    pwd.send_keys('your_password')
    submit_btn = browser.find_element_by_xpath('//*[@id="login"]/div[1]/div[6]/a')
    submit_btn.click()
    time.sleep(10)
login()

接着，我们需要爬取网易云音乐中的精华资源。这里我们以爬取热门歌单为例：

def get_top_list():
    hot_url = 'https://music.163.com/#/discover/playlist/'
    browser.get(hot_url)
    time.sleep(2)
    content = browser.page_source
    hot_soup = BeautifulSoup(content, 'lxml')
    hot_list = hot_soup.find_all('a', attrs={'class': 'tit f-thide s-fc0'})
    for hot in hot_list:
        print(hot['href'])

我们将爬取的数据保存到Redis中：

import redis
r = redis.StrictRedis(host='localhost', port=6379, db=0)

def add_to_redis(key, value):
    r.lpush(key, value)

至此，Python爬虫的部分代码就完成了。

3.使用Redis来管理收藏的歌单

我们需要使用Redis来管理收藏的歌单。

我们需要从Redis中获取我们收藏的歌单：

def get_top_list_from_redis():
    top_list = []
    for i in range(r.llen('top_list')):
        top_list.append(r.lindex('top_list', i).decode())
    return top_list

我们可以将收藏的歌单打印出来：

print(get_top_list_from_redis())

如果你要删除某个收藏的歌单，可以使用以下代码：

def delete_key_from_redis(key):
    r.lrem('top_list', 0, key)

至此，我们就用Redis爬虫帮助我们收藏网易云音乐中的精华资源了。在以后的使用中，只需要登录网易云音乐并且运行爬虫程序，即可轻松收藏自己喜欢的歌单。这也是Redis数据库的一种应用方式。