Python工程师_爬虫工程师_Python大数据培训_Python大数据分析培训_大数据培训机构|华信智原Python工程师培训

项目一 华信商城

项目简介：

大型B2C电子商务平台，包含用户中心、商品展示、购物车、订单、支付、评论、搜索等功能。

项目特色：

1、采用前后端分离的技术

2、使用Django REST framework +VUE技术实现

3、采用数据库读写分离技术

4、使用FastDFS实现商品图片数据的存储

5、可掌握支付相关业务的实现

6、可掌握搜索相关技术的使用

项目二 分布式爬虫项目

项目简介：

大型门户网站和大型婚恋网站积累了海量信息，提取有用的价值，应用于数据挖掘、海量数据分析、市场分析（包括热点资讯、关键词点击、舆情分析、全国婚恋市场等情况），掌握爬虫技术显得尤为重要。

项目特色：

1、Python 多线程爬虫及其机制

2、使用Python、requests等网络模块

3、使用Python lxml、BeautifulSoup、re、json模块进行数据提取

4、XPath语法规则和各CSS Selector的使用

5、使用Selenium+Chrome实施动态HTML抓取

6、掌握Scrapy框架，以及编写各类中间件

7、掌握scrapy-redis分布式框架，了解各组件工作机制

项目三 华信资讯项目

项目简介：

一款新闻类型的Web项目，主要为用户提供金融资讯、数据，以抓取其他网站数据和用户发布作为新闻的主要来源。

项目特色：

1、使用Flask Web框架 实现

2、前后端不分离 的形式实现具体业务逻辑

3、常见的 Web 开发流程以及第三方平台工具的集成和使用

项目四 聊天机器人项目

项目简介：

小智聊天机器人，使用了自然语言处理的技术，实现人机对话。实现的是一个类似智能客服的系统，实现了闲聊功能和问答功能，在App上提供了入口，能够和机器人闲聊和编程相关的问题。

项目特色：

1、接受用户的输入

2、对输入内容进行预处理和特征提取

3、使用分类方法判断用户输入的内容

4、如果意图为闲聊，调用闲聊的模型返回结果

5、如果意图为提问，调用问答模型返回结果

项目四 华信商品推荐系统

项目简介：

建立在海量用户与海量文章之上，使用Lambda架构整合实时计算和离线计算，借助分布式环境提升计算能力；使用Flume收集用户的点击、浏览、收藏等行为，建立用户画像和文章画像，并存储于HDFS集群；通过离线Spark SQL计算建立HIVE特征中心，存储到HBase集群；通过ALS、LR、Wide&Deep等机器学习与深度学习、推荐算法进行智能推荐，达到千人千面的用户推荐效果。

项目特色：

1、ABTest实验平台

2、用户反馈收集

3、实时计算平台

4、离线计算分析平台