推荐学习书目 Learn Python the Hard Way Python Sites PyPI - Python Package Index http://diveintopython.org/toc/index.html Pocoo 值得关注的项目 PyPy Celery Jinja2 Read the Docs gevent pyenv virtualenv Stackless Python Beautiful Soup 结巴中文分词 Green Unicorn Sentry Shovel Pyflakes pytest Python 编程 pep8 Checker Styles PEP 8 Google Python Style Guide Code Style from The Hitchhiker's Guide
这是一个创建于 2952 天前的主题，其中的信息可能已经有所发展或是发生改变。
def parse_html(html): soup = BeautifulSoup(html, 'lxml') movie_list_soup = soup.find('ol', attrs = {'class': 'grid_view'}) movie_name_list = []
for movie_li in movie_list_soup.find_all('li'): detail = movie_li.find('div', attrs = {'class': 'hd'}) movie_name = detail.find('span', attrs = {'class': 'title'}).getText() movie_name_list.append(movie_name) print(movie_name_list) next_page = soup.find('span', attrs = {'class': 'next'}).find('a') if next_page: return movie_name_list, DOWNLOAD_URL + next_page['href'] return movie_name_list, None 5 条回复 2017-12-24 22:07:31 +08:00
 | 1 sean10 2017 年 12 月 22 日 via iPhone 倒数第二行不是返回了下一页的 url 么，在其他函数里有写继续爬的逻辑吧 |
 | 2 lihongjie0209 2017 年 12 月 22 日 if next_page: // 返回一个 tuple(movie_name_list, next_page_url) return movie_name_list, DOWNLOAD_URL + next_page['href'] return movie_name_list, None 这个应该是链接提取函数, 如果有下一页就把下一页的链接作为 tuple 的第二项返回. |
 | 3 andmspy OP 谢谢 @lihongjie0209 @a href="/member/lihongjie0209">lihongjie0209 如果返回链接下一页页面，不需要 requests.get 请求一下么？ return 就可以直接返回了么？ |
| 4 lihongjie0209 2017 年 12 月 24 日 @andmspy 这个是链接提取函数, 不是下载函数, 用这个函数提取链接之后再下载 |
| 5 andmspy OP @lihongjie0209 因为‘ DOWNLOAD_URL + next_page['href'] ’ 这个就是下一页的链接所以在 def 函数里面，return 就是可以实现链接下一页，是这个意思么？ |
Select Language