利用大数据与人工智能分析预测金融市场
前言
一直想做一个的项目，即结合现在自己现有的技术、未来技术发展的趋势、以及自己想要方向，考虑了好久，决定自己开发一个项目：利用大数据与人工智能分析金融市场的趋势，项目的名字就叫唤灵科技吧。
要实现的功能：
用大数据分析、股票期货的行情、趋势
用人工智能让程序自动学习股票、期货的投资交易实现预测行情走势、给出交易信号
实现思路：
第一步：
通过Python爬虫
从金10网等行情分析网站爬取数据
从各大交易品种获取实时行情数据
第二步
把爬取的数据存储到大数据集群
第三步
大数据分析爬取的数据，实现以下功能：
给影响行情的信息、关键字打标签，
所有的标签自动生成，
给所有的标签添加权重
所有的标签自动生成权重
通过标签及权重对指定的行情阶段进行人物画像
对不同的品种建模，进行周期性分析、回归分析
预测下一步的趋势
生成BI分析报告
对大数据进行实时全文检
2021-12-14 16:51:46
12.05MB
1
windows10下spark2.3.0本地开发环境搭建
win10上部署Hadoop非Cygwin、非虚拟机方式。安装目录为D:\setupedsoft。涉及相关组件版本：
win10 家庭装，64位，x86处理器
JDK1.8.0_171
hadoop-2.7.6
Spark-2.3.0
Scala-2.11.8
Maven-3.5.3
ideaIC-2018.1.4.exe
spark-2.3.0-bin-hadoop2.7
对应博文：https://blog.csdn.net/hambition/article/details/80769771
由于博文上传图片比较麻烦，图片又非常之多，没分的同学可直接看博文。
2021-12-14 11:17:44
3.27MB
1
电影推荐系统
推荐系统（Java，Apache Spark）
在电影镜头1M数据集上使用Apache Spark的交替最小二乘（ALS）算法实施（来自6000名用户的4000个电影的100万评级）实现了协同过滤–模型预测的均方误差（MSE）为0.72，每个用户10条电影推荐。
2021-12-13 09:30:29
5KB
1