# Web_Data_Crawling_Test

**Repository Path**: bestpower_wyu/Web_Data_Crawling_Test

## Basic Information

- **Project Name**: Web_Data_Crawling_Test
- **Description**: No description available
- **Primary Language**: Python
- **License**: Apache-2.0
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 0
- **Forks**: 0
- **Created**: 2020-09-01
- **Last Updated**: 2020-12-19

## Categories & Tags

**Categories**: Uncategorized

**Tags**: None

## README

# Web_Data_Crawling_Test
本实例主要用来实现Python对html静态网页数据内容的爬取与存储，并进行定时增量更新  
# 运行环境
windows7x64 + python 3.5 + MySQL + pycharm  
# 运行方法
1、使用命令行或者图形化工具进入mysql，按以下信息创建空数据库和空数据表：  
host = '127.0.0.1'  # 主机地址（本地）  
user = 'root'  # 用户名  
password = 'asd'  # 密码  
port = 3306  # 接口  
db = 'lottery'  # 数据库名  
db_table = 'lottery_table'  # 数据表名  
2、打开pycharm ide工具创建一个python项目并将main.py导入项目中，直接运行即可 
系统会打印出类似如下结果，表示爬取成功  
期号：2018110384	时间：2018-11-03 23:02:03	号码:17,5,20,7,3,16,10,12  
添加2018110384到lottery_table成功  
期号：2018110383	时间：2018-11-03 22:52:06	号码:8,12,20,11,16,1,6,7  
添加2018110383到lottery_table成功  
期号：2018110382	时间：2018-11-03 22:42:03	号码:6,16,9,1,13,19,10,14  
添加2018110382到lottery_table成功  
期号：2018110381	时间：2018-11-03 22:32:02	号码:11,3,17,9,12,7,6,14  
添加2018110381到lottery_table成功  
期号：2018110380	时间：2018-11-03 22:22:06	号码:6,16,12,15,7,11,20,4  
添加2018110380到lottery_table成功  
期号：2018110379	时间：2018-11-03 22:12:18	号码:19,13,11,12,18,17,15,16  
3、这时可通过mysql命令行工具查询存储的相关信息如下：  
![Image](https://github.com/bestpower/Web_Data_Crawling_Test/blob/master/readme_img_folder/mysql.PNG)    
说明爬取下来的数据已成功保存