1. 全栈程序员必看首页

搭建scrapy框架[通俗易懂]

全栈程序员-站长 • • 未分类 • 阅读 6

搭建scrapy框架[通俗易懂]搭建scrapy

大家好，又见面了，我是你们的朋友全栈君。如果您正在找激活码,请点击查看最新教程,关注关注公众号 “全栈程序员社区” 获取激活教程,可能之前旧版本教程已经失效.最新Idea2022.1教程亲测有效,一键激活。

Jetbrains全系列IDE稳定放心使用

1.安装scrapy

修改镜像，全局设置，只需要设置一次
pip config set global.index-url https://pypi.doubanio.com/simple

安装
pip install scrapy

搭建scrapy框架[通俗易懂]

补充：

更新安装
pip install -U scrapy

如果windows报错说没有磁盘访问权限可用这个命令
pip install –user scrapy

2.检验scrapy是否安装成功

scrapy

搭建scrapy框架[通俗易懂]

3.创建scrapy项目

scrapy startproject spider0609

搭建scrapy框架[通俗易懂]

4.创建蜘蛛程序

scrapy genspider douban movie.douban.com

搭建scrapy框架[通俗易懂]

5.pycharm打开项目并运行

pycharm->open->spider0609->file->setting->project->python interpreter 配置虚拟环境->add

搭建scrapy框架[通俗易懂]

 搭建scrapy框架[通俗易懂]

搭建scrapy框架[通俗易懂]

第一步：以管理员身份运行powershell
第二步：执行：get-ExecutionPolicy 回复Restricted，表示状态是禁止的。
第三步：执行：set-ExecutionPolicy RemoteSigned
第四步：选择Y，回车

搭建scrapy框架[通俗易懂]

 再次打开terminal即可解决

 搭建scrapy框架[通俗易懂]

 虚拟环境安装scrapy(之前装是装在全局环境的，现在是给虚拟环境装)

搭建scrapy框架[通俗易懂]

scrapy crawl douban -o douban.csv
 

版权声明：本文内容由互联网用户自发贡献，该文观点仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请联系我们举报，一经查实，本站将立刻删除。

发布者：全栈程序员-站长，转载请注明出处：https://javaforall.net/189585.html原文链接：https://javaforall.net

赞 (0)
0 0

关于作者

全栈程序员-站长的头像

全栈程序员-站长

133.5K 文章
3 粉丝
本网站汇聚当前互联网主流语音，持续更新，欢迎关注公众号“全栈程序员社区”
上一篇 2026年4月13日 下午1:45
下一篇 2026年4月13日 下午1:45


相关推荐

  • Ubuntu24.04用终端启动cursor cursor

    Ubuntu24.04用终端启动cursor

    Ubuntu24.04用终端启动cursor

    全栈程序员-站长的头像 全栈程序员-站长
    2026年3月16日
    2
  • windows程序设计第五版_程序设计中三种基本结构

    windows程序设计第五版_程序设计中三种基本结构

    windows程序设计第五版_程序设计中三种基本结构WNDCLASS结构参数及其用法WNDCLASS是一个由系统支持的结构，用来储存某一类窗口的信息,如ClassStyle,消息处理函数，Icon,Cursor,背景Brush等。也就是说，CreateWindow只是将某个WNDCLASS定义的窗体变成实例。结构WNDCLASS包含一个窗口类的全部信息，也是Windows编程中使用的基本数据结构之一，应用程序通过定义一个窗口类确定窗口的属性基…

    全栈程序员-站长的头像 全栈程序员-站长
    2022年8月18日
    9
  • 美女登场「建议收藏」

    美女登场「建议收藏」

    美女登场「建议收藏」不怕大家笑话，我大学毕业时，还是个处长，所谓处长就是没有经过女人滋润的那种，我想大家都知道我是什么意思的。其实，上大学的时候我还是有些女人缘的，毕竟在班上我的学习成绩还是走在了同学们的前列，这是一笔不小的资本。你不知道，只要到了考试前一个月左右，我是很跑火的，我们班上那些天天浸泡在女孩子堆的家伙就要开始巴结我，请我吃饭，因为他们要拿到毕业证，还是需要过我这关的，考试的时候他们好抄袭我的，我要是给他

    全栈程序员-站长的头像 全栈程序员-站长
    2025年12月3日
    8
  • System.setProperty(),System.setProperty

    System.setProperty(),System.setProperty

    System.setProperty(),System.setPropertySystem.getProperties()获得所有的系统变量System.getProperty(“os.name”)获取指定的系统变量（获取系统=windows8.1）System.setProperty(“koow”,”123″)储存在系统变量中，变量名为koow，值为123System.getProperty(“koow”)获取指定的系统变量（获取koow=12

    全栈程序员-站长的头像 全栈程序员-站长
    2022年7月12日
    22
  • getParameterValues的用法「建议收藏」

    getParameterValues的用法「建议收藏」

    getParameterValues的用法「建议收藏」<formname="checkform"method="post"action="getvalue.jsp">你希望学习哪些程式语言：<br><inputtype="checkbox"name="langtype"value="JSP">JSP　<inputtype=&q

    全栈程序员-站长的头像 全栈程序员-站长
    2022年7月22日
    35
  • ubuntu 局域网传输文件

    ubuntu 局域网传输文件

    ubuntu 局域网传输文件scp[可选参数]file_sourcefile_target参数说明：-1：强制scp命令使用协议ssh1 -2：强制scp命令使用协议ssh2 -4：强制scp命令只使用IPv4寻址 -6：强制scp命令只使用IPv6寻址 -B：使用批处理模式（传输过程中不询问传输口令或短语） -C：允许压缩。（将-C标志传递给ssh，从而打开压缩功能） -p：保留原文件的修改时间，访问时间和访问权限。 -q：不显示传输进度条。 -r：递归复制整个目录。 -v：详细方.

    全栈程序员-站长的头像 全栈程序员-站长
    2022年5月24日
    41

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注全栈程序员社区公众号