一个运用人工智能解决广大宠物控各式难题的大数据平台
A bigdata platform using artificial intelligence to solve the problem of pet control .
为广大宠物爱好者、资深宠物控提供宠物各方面准确的的信息以及宠物互助共享的大数据平台
平台仍在持续开发中,希望“宠物控技术控”能加入我们
最近由于实践 的原因暂停了更新,请大家见谅
`````‵‵``````````````````````````````
1 . 平台介绍
2 . 功能
3 . 使用技术栈
4 . 模块划分
5 . 项目部署
本项目会随时更新进度,进度会随时更新在develop分支上面
开发日志develop分支
爬虫相关的进度会更新在crawler分支
感兴趣的参与者可以在项目的wiki中查看项目的计划以及整体实现方案
#1 2018.01.04 收集相关爬取的,相关分支在**crawler**
#1.1 2018.01.06 天涯论坛宠物版块信息爬取测试完成 相关信息请看天涯爬取
#1.2 2018.01.10 完善三个论坛10个版块的信息爬取 相关信息请看完善爬虫爬取以及存库
#1.3 2018.01.12 进行数据处理,完成dash的基本demo 相关信息请看对数据进行处理
#2 2018.01.04 详细研发情况请查看我们的**develop分支**
实现语言主要为python3
前端框架:vue全家桶
后端框架:sanic异步框架
爬虫存储:mongodb
后端存储: postgresql
分词工具:jieba
nlp:snownlp
追求可移植性,可重组性,选择docker部署