古诗推荐服务
文章目录
1 项目地址
2 推荐服务
- 相似古诗推荐
- 猜你喜欢推荐
- 每日推荐
3 推荐服务架构设计
- 使用基于大数据的推荐架构
- 基于
Hadoop
的数据存储 - 基于
Spark
的数据预处理和特征工程(离线层) - 部分模型基于
Spark ML
建模 - 基于
Hive
的数据管理 - 基于
Flume + Spark-Streaming + Redis
的数据采集及传输(在线层)
- 基于
4 推荐算法
- 使用带偏置的
MF
模型SVD
作为召回模型 - 使用
Xgboost + LR
作为排序模型 - 使用
Word2Vec
计算古诗的词向量,与每个词的TF-IDF
值作为参数,进行古诗文本相似度计算 - 提供 经典排序模型
LR
、FM
、Xgb+LR
、Xgb+FM
的模型测试对比