Skip to content

Tsien16/dota-over

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

6 Commits
 
 
 
 
 
 

Repository files navigation

dota

DotaMAX 网站爬取比赛数据,为数据分析积累原始数据。

配置

需要配置的的内容都在 dota.settings 里,包括配置Cookie、mySQL数据库连接配置等

爬取范围

本机数据库承受压力有限,需要设置爬取范围,需要设置Steam ID。

效率

本机测试,15分钟抓取10万条数据。