1. 全栈程序员必看首页

山东大学舆情研究中心_舆情系统

全栈程序员-站长 • • 未分类 • 阅读 5

山东大学舆情研究中心_舆情系统项目结题总结一、项目背景二、技术要点三、功能介绍1、服务器端（1）启动服务器一、项目背景对于一所高校来说一个好的风评有着十分重要的作用，拥有一个良好的口碑，能吸引更多的生源、引进更多的人才，学校的综合素质能力也会因此提升，因此我们小组选择了《山东大学舆情分析系统》这一题目，通过搜集百度新闻、央视新闻、今日头条、齐鲁网、新浪、网易新闻、微博、知乎等网站的有关信息，对搜集到的文本信息所进行的分词、统计处理，将结果绘制成可视化的热度词条、情感倾向变化图，并实时展示在网站上，以此来更直观的了解山大的实时风评。

大家好，又见面了，我是你们的朋友全栈君。如果您正在找激活码,请点击查看最新教程,关注关注公众号 “全栈程序员社区” 获取激活教程,可能之前旧版本教程已经失效.最新Idea2022.1教程亲测有效,一键激活。

Jetbrains全系列IDE使用 1年只要46元 售后保障 童叟无欺

项目结题总结

一、项目背景

对于一所高校来说一个好的风评有着十分重要的作用，拥有一个良好的口碑，能吸引更多的生源、引进更多的人才，学校的综合素质能力也会因此提升，因此我们小组选择了《山东大学舆情分析系统》这一题目，通过搜集百度新闻、央视新闻、今日头条、齐鲁网、新浪、网易新闻、微博、知乎等网站的有关信息，对搜集到的文本信息所进行的分词、统计处理，将结果绘制成可视化的热度词条、情感倾向变化图，并实时展示在网站上，以此来更直观的了解山大的实时风评。

二、技术要点

在本项目中，我们主要选用python语言。

在爬虫方面，我们采用Scrapy爬虫框架，首先对上述若干带有搜索引擎的入口网站进行一级爬取，该层主要爬取网页中以“山东大学”为关键字的搜索结果
在这里插入图片描述
其次将对一级爬取中获得的网页链接进行二级爬取，该层主要爬取相关页面中的“相关推荐”、评论等内容。
在这里插入图片描述
对于大部分网站中常见的反爬虫技术，我们采用了请求头随机UA、资源延时下载、cookie保存状态等来掩盖我们的爬虫，防止其被反爬虫技术识别。

在分词方面，我们采用的是python的pkuseg库，并加入了我们自己生成的停用词词库、保留词词典等，以进一步优化分词结果。在情感分析方面，我们使用词的情感倾向表，通过各个词的权值对热词、评论进行情感分析。

在网页展示方面，我们采用了Vue的前端和Django的后端，以便能与爬虫和分词模块更好的兼容。

三、功能介绍

1、服务器端

（1）启动服务器

我们的项目是在python的虚拟环境中运行，目前运行过程已经可以脱离编译器。因此我们首先进入python虚拟环境，进入django项目目录下，输入：

python manage.py runserver 0.0.0.0:8080

在这里插入图片描述

（2）后台主系统（控制爬虫、分词、分析模块）

  • 后台主系统将在服务器启动时自动开启
  • 主系统将在每天凌晨4~5点开启核心系统（爬虫、分词、分析模块）
  • 主系统可以使用以下命令：
    • “start”：开启主系统
    • “stop” / “end”：关闭主系统
    • “exit”：退出主系统
    • ”help“：查看帮助信息
  • 在核心系统运行时，无法关闭、退出主系统

（3）关闭服务器

关闭服务器前，需优先关闭主系统，再手动关闭服务器cmd窗口

2、网页端——未登录

（1）首页

在这里插入图片描述

（2）总览

在这里插入图片描述

（3）登录 / 注册

在这里插入图片描述
在这里插入图片描述

3、网页端——用户端

（1）单个热词查询

在这里插入图片描述

（2）单个热词信息

在这里插入图片描述
在这里插入图片描述

（3）热词相关网页查询

在这里插入图片描述

（4）总览——登陆后

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

4、网页端——管理员端

（1）热词管理

在这里插入图片描述

（2）网页管理

在这里插入图片描述

（3）链接管理

在这里插入图片描述

（4）用户管理

在这里插入图片描述

（5）增加管理员

在这里插入图片描述

（6）管理后台主系

在这里插入图片描述

四、Github项目地址

https://github.com/STK425/django_vue

版权声明：本文内容由互联网用户自发贡献，该文观点仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请联系我们举报，一经查实，本站将立刻删除。

发布者：全栈程序员-站长，转载请注明出处：https://javaforall.net/191387.html原文链接：https://javaforall.net

赞 (0)
0 0

关于作者

全栈程序员-站长的头像

全栈程序员-站长

133.5K 文章
3 粉丝
本网站汇聚当前互联网主流语音，持续更新，欢迎关注公众号“全栈程序员社区”
上一篇 2026年2月2日 上午10:22
下一篇 2026年2月2日 上午11:01


相关推荐

  • android 创建数组

    android 创建数组

    android 创建数组一：privateString[]data=newString[]{“Hello”,”jike”,”world”};二：创建数组对象：privateCellData[]data=newCellData[]{newCellData(“jike”,”world”),newCellData(“title”,”content”)};publiccl…

    全栈程序员-站长的头像 全栈程序员-站长
    2022年6月1日
    37
  • es painless 排序_Elasticsearch中使用painless实现评分「建议收藏」

    es painless 排序_Elasticsearch中使用painless实现评分「建议收藏」

    使用Elasticsearch(ES)作为搜索引擎时我们常常需要根据文档的属性值自定义它们的排序，为用户提供高质量的搜索结果。以下内容已在ElasticSearch7.1.1Linux集群中测试。ES中的rest_api中提供了自定义评分选项，分别为function_score下的function_script和script_score。其中function_score可以用于简单的评分需…

    全栈程序员-站长的头像 全栈程序员-站长
    2022年4月7日
    50
  • load average信息详解

    load average信息详解

    load average信息详解一、什么是loadaverage？linux系统中的Load对当前CPU工作量的度量(WikiPedia:thesystemloadisameasureoftheamountofworkthatacomputersystemisdoing)。也有简单的说是进程队列的长度。LoadAverage就是一段时间(1分钟、5分钟、15分钟)内平均L

    全栈程序员-站长的头像 全栈程序员-站长
    2022年7月17日
    20
  • Android-WItemTouchHelperPlus几行代码搞定仿QQ侧滑

    Android-WItemTouchHelperPlus几行代码搞定仿QQ侧滑

    Android-WItemTouchHelperPlus几行代码搞定仿QQ侧滑

    全栈程序员-站长的头像 全栈程序员-站长
    2021年5月27日
    103
  • 制作zencart模板的几个步骤

    制作zencart模板的几个步骤

    制作zencart模板的几个步骤很多做外贸站的朋友都在为自己的网店模板而头疼不已，本来踌躇满志的要好好做网站，但是当你用网店程序的时候，发现zencart程序里面默认的模板都不怎么好看。于是乎，四处寻找，找了这个想要那个，结果不是不能用就是功能不全。而且最大的威胁就是不安全，万一有个什么其他的代码嵌在里面，你也发现不了。这对于做外贸的你来说是得不偿失的，那么，你是否想要自己做一个你喜欢的模板呢？是不是苦于没有方法呢？易搜今天就来…

    全栈程序员-站长的头像 全栈程序员-站长
    2022年7月27日
    5
  • Vuex实践-mapState和mapGetters

    Vuex实践-mapState和mapGetters

    Vuex实践-mapState和mapGetters一.前言　　本文章是vuex系列的最后一篇，主要总结的是如何使用mapState和mapGetters访问vuex中的state和getters。二.多个模块中mapState和mapGetters的使用　　上一篇文章《Vuex实践（中）》里面我们总结的就是多模块的内容，所以关于store.js、moduleA.js和moduleB.js的代码保持不变。　　在此为了方便观看，我将这…

    全栈程序员-站长的头像 全栈程序员-站长
    2022年6月5日
    37

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注全栈程序员社区公众号