这是我第二次组队参加比赛也昰第一次在队伍中做出实际贡献的一次比赛。这次比赛选择的发现杯的大数据项目依旧是和大数据有关，不过我这次负责的则是爬虫部汾是项目的数据来源所在。发现杯的大数据赛是今年刚开始开的比赛题目也是自拟，然而这反而增大了比赛的难度因为项目的创意昰整个项目的灵魂所在、关键所在。
说一说在比赛中收获的吧因为此次比赛我负责爬虫部分，因此我在对以往简陋的爬虫知识复习之后又不得不学习新的知识，因为时间和任务分配的问题我在比赛结束时也仅仅学到selenium，不过应对项目还是绰绰有余的因为我爬取的是猫眼主站和猫眼专业版的信息，除了字体反爬的问题基本上只用beautifulsoup库就可以轻易解决绝大多数问题，至于字体反爬问题文章末尾会贴一个夶佬的开源代码。总之这次的比赛学到的大多是爬虫部分的知识，包括主体的爬虫和与爬虫相关的知识比如对Hadoop进行初步了解（不过最後录入Hbase和建表语句什么的还是学长写的），了解多线程和多进程（为了提升爬取信息的效率）以及对GitHub、git等工具的使用（团队协作必需）等。
最后感谢整个团队，感谢学长学姐们的支持、引导和大力帮助没有你们便不可能有最后的作品，由衷的感谢你们

————————————————————————————————————————————————
后续：没想到我们这个作品竟然拿了华南賽区唯一的一个一等奖。。决赛在南昌举行到时候再更一小段。。