1. 全栈程序员必看首页

山东大学舆情研究中心_舆情系统

全栈程序员-站长 • • 未分类 • 阅读 0

山东大学舆情研究中心_舆情系统项目结题总结一、项目背景二、技术要点三、功能介绍1、服务器端（1）启动服务器一、项目背景对于一所高校来说一个好的风评有着十分重要的作用，拥有一个良好的口碑，能吸引更多的生源、引进更多的人才，学校的综合素质能力也会因此提升，因此我们小组选择了《山东大学舆情分析系统》这一题目，通过搜集百度新闻、央视新闻、今日头条、齐鲁网、新浪、网易新闻、微博、知乎等网站的有关信息，对搜集到的文本信息所进行的分词、统计处理，将结果绘制成可视化的热度词条、情感倾向变化图，并实时展示在网站上，以此来更直观的了解山大的实时风评。

大家好，又见面了，我是你们的朋友全栈君。如果您正在找激活码,请点击查看最新教程,关注关注公众号 “全栈程序员社区” 获取激活教程,可能之前旧版本教程已经失效.最新Idea2022.1教程亲测有效,一键激活。

Jetbrains全系列IDE使用 1年只要46元 售后保障 童叟无欺

项目结题总结

一、项目背景

对于一所高校来说一个好的风评有着十分重要的作用，拥有一个良好的口碑，能吸引更多的生源、引进更多的人才，学校的综合素质能力也会因此提升，因此我们小组选择了《山东大学舆情分析系统》这一题目，通过搜集百度新闻、央视新闻、今日头条、齐鲁网、新浪、网易新闻、微博、知乎等网站的有关信息，对搜集到的文本信息所进行的分词、统计处理，将结果绘制成可视化的热度词条、情感倾向变化图，并实时展示在网站上，以此来更直观的了解山大的实时风评。

二、技术要点

在本项目中，我们主要选用python语言。

在爬虫方面，我们采用Scrapy爬虫框架，首先对上述若干带有搜索引擎的入口网站进行一级爬取，该层主要爬取网页中以“山东大学”为关键字的搜索结果
在这里插入图片描述
其次将对一级爬取中获得的网页链接进行二级爬取，该层主要爬取相关页面中的“相关推荐”、评论等内容。
在这里插入图片描述
对于大部分网站中常见的反爬虫技术，我们采用了请求头随机UA、资源延时下载、cookie保存状态等来掩盖我们的爬虫，防止其被反爬虫技术识别。

在分词方面，我们采用的是python的pkuseg库，并加入了我们自己生成的停用词词库、保留词词典等，以进一步优化分词结果。在情感分析方面，我们使用词的情感倾向表，通过各个词的权值对热词、评论进行情感分析。

在网页展示方面，我们采用了Vue的前端和Django的后端，以便能与爬虫和分词模块更好的兼容。

三、功能介绍

1、服务器端

（1）启动服务器

我们的项目是在python的虚拟环境中运行，目前运行过程已经可以脱离编译器。因此我们首先进入python虚拟环境，进入django项目目录下，输入：

python manage.py runserver 0.0.0.0:8080

在这里插入图片描述

（2）后台主系统（控制爬虫、分词、分析模块）

  • 后台主系统将在服务器启动时自动开启
  • 主系统将在每天凌晨4~5点开启核心系统（爬虫、分词、分析模块）
  • 主系统可以使用以下命令：
    • “start”：开启主系统
    • “stop” / “end”：关闭主系统
    • “exit”：退出主系统
    • ”help“：查看帮助信息
  • 在核心系统运行时，无法关闭、退出主系统

（3）关闭服务器

关闭服务器前，需优先关闭主系统，再手动关闭服务器cmd窗口

2、网页端——未登录

（1）首页

在这里插入图片描述

（2）总览

在这里插入图片描述

（3）登录 / 注册

在这里插入图片描述
在这里插入图片描述

3、网页端——用户端

（1）单个热词查询

在这里插入图片描述

（2）单个热词信息

在这里插入图片描述
在这里插入图片描述

（3）热词相关网页查询

在这里插入图片描述

（4）总览——登陆后

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

4、网页端——管理员端

（1）热词管理

在这里插入图片描述

（2）网页管理

在这里插入图片描述

（3）链接管理

在这里插入图片描述

（4）用户管理

在这里插入图片描述

（5）增加管理员

在这里插入图片描述

（6）管理后台主系

在这里插入图片描述

四、Github项目地址

https://github.com/STK425/django_vue

版权声明：本文内容由互联网用户自发贡献，该文观点仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请联系我们举报，一经查实，本站将立刻删除。

发布者：全栈程序员-站长，转载请注明出处：https://javaforall.net/191387.html原文链接：https://javaforall.net

赞 (0)
全栈程序员-站长的头像全栈程序员-站长
0 0


相关推荐

  • 使用试验和数据创新并构建客户真正使用的产品

    使用试验和数据创新并构建客户真正使用的产品

    使用试验和数据创新并构建客户真正使用的产品

    全栈程序员-站长的头像 全栈程序员-站长
    2021年9月12日
    40
  • 点击图标打不开软件_pycharm安装完没有图标

    点击图标打不开软件_pycharm安装完没有图标

    点击图标打不开软件_pycharm安装完没有图标情况说明：Pycharm在之前都可以正常打开，但是在我修改了它的安装存储目录后，点击图标就打不开了，而且没有任何反应！条件说明：我下载的pycharm是官方网站下载的。如何解决不可打开问题：步骤1.进入你的安装pycharm的bin文件，找到pycharm.exe.vmoptions和pycharm64.exe.vmoptions步骤2：分别将其打开，将里面的jar…

    全栈程序员-站长的头像 全栈程序员-站长
    2022年8月27日
    0
  • 面试题—5种单例模式写法以及单线程和多线程下的区别

    面试题—5种单例模式写法以及单线程和多线程下的区别

    面试题—5种单例模式写法以及单线程和多线程下的区别闲来无事看之前的博客，发现单例模式只会写2中。所以再重新开一篇博客，将目前自己所能理解的几种单例模式全部总结下。______________________________________________________________________________________________________________________1、懒汉式（最基本的） 单线程版写单例模式(饿汉式)的步骤： 1):必须在该类中,自己先创建出一个对象。 2):私有化自身的…

    全栈程序员-站长的头像 全栈程序员-站长
    2022年6月13日
    26
  • Flake8学习

    Flake8学习

    Flake8学习                 转载： Python静态代码检查工具Flake8　　　Flake8简介

    全栈程序员-站长的头像 全栈程序员-站长
    2022年9月12日
    0
  • 数据库的表空间_默认表空间

    数据库的表空间_默认表空间

    数据库的表空间_默认表空间表空间的概述数据库的表空间，简而言之就是数据库存储数据的存储结构，是一种用来存储数据的逻辑空间，是数据库用来存储数据的最大逻辑单元，其下还有段、区、数据块等逻辑数据类型。表空间的存在就是为了用来存储数据库的数据对象，一个数据库可以由多个数据表空间组成，可以通过表空间来实现对数据库的调参。表空间的分类永久性表空间：在存储过程中需要永久化存储的对象，比如二维表，视图，存储过程，索引。临时表空间：临时表…

    全栈程序员-站长的头像 全栈程序员-站长
    2025年5月26日
    0
  • 互斥量Mutex的简单应用

    互斥量Mutex的简单应用

    互斥量Mutex的简单应用一、互斥量的简单介绍互斥量是一个内核对象，它用来确保一个线程独占一个资源的访问。互斥量与关键段的行为非常相似，并且互斥量可以用于不同进程中的线程互斥访问资源。使用互斥量Mutex主要将用到四个函数。下面是这些函数的原型和使用说明。1） CreateMutex函数功能：创建互斥量函数原型：HANDLECreateMutex(LPSECURITY_ATTRIBUTES…

    全栈程序员-站长的头像 全栈程序员-站长
    2022年6月26日
    28

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注全栈程序员社区公众号