基于 python+flask 和html写的项目。
首先是用爬虫爬取了新闻网站的新闻数据,然后搭建了网站可以根据关键词检索新闻。
视频展示:
新闻大数据搜索系统 python+flask
界面展示:
爬虫部分的代码:
# coding:utf-8
import requests
from bs4 import BeautifulSoup
import pickle
import pandas as pd
import datetime
import time
# 访问url,获取页面内容
def get_page(url, headers="", params="", soup=False, json=False):
# 访问页面
page = requests.get(url, headers=headers, params=params)