零基础入门搭建Python网络爬虫开发环境

news/2024/7/19 11:41:13 标签: python, 爬虫, 大数据, 程序人生, 经验分享

声明:此篇仅供学习参考使用 


  1. 安装Pycharm    
  2. 安装Anaconda
  3. 配置Pycharm解析器
  4. 使用清华镜像安装课程需要的框架架包
  5. 更新pip(需要上网)
  6. 分别安装requests lxmlscapybeautifulSoup4架包
  7.  测试

 1.安装Pycharm

PyCharm 是一款功能强大的 Python 编辑器,具有跨平台性

 PyCharm 的下载地址:http://www.jetbrains.com/pycharm/download/#section=windows

安装完成后请确认注册激活可用,

不会激活的小伙伴可以自行百度,网上有很多激活的方法

如下图所示则表示破解激活成功

2、安装Anaconda

 

Anaconda拥有超过250+的数据科学工具包,conda工具包和用于Windows,MacOS和Linux三种平台的虚拟环境管理系统。使用Anaconda,会让安装,运行和升级复杂的科学数据运算和机器学习环境变得及其简单

可以去清华源下载最新版的anaconda包,这比在官方网站下载快得多,地址如下:

https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/

 

3、配置Pycharm解析器,选择使用Anaconda3中内置的Python3.8作为解析器。 

 

4、使用镜像安装需要的框架架包。

 

添加如下url

https://pypi.tuna.tsinghua.edu.cn/simple/

https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud/peterjc123

https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud/pytorch/

https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main/

https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/

5、更新pip

6、分别安装requests lxmlscapybeautifulSoup4架包  (参照pip安装方式)

7、编写第一个程序

创建项目

新建Python文件Test.py

直接Ctrl+Shift+F10编译执行代码,如果环境正常,运行结果如下:


http://www.niftyadmin.cn/n/945176.html

相关文章

你真的了解白帽、黑帽、灰帽 吗?看看这个你就懂了

萌新, 白帽、黑帽、灰帽 选哪个好? 1) 什么是白帽? 【定义】白帽就是通过正常手段对网站内部就行优化,包括标题、关键字、网站结构、网站代码等,是搜索引擎提倡的网站优化方法。 【特征】利用公平、正当方法&#xf…

你的网站有漏洞,你竟然不知道 ! (网站常见漏洞)

常见的漏洞 1) 隐藏文字 黑帽作弊手段 通过在页面加入大量关键词并隐藏起来的方式提升网站排名和流量。(用户看不到、搜索引擎看到) 隐藏文字方法 文字颜色与页面背景颜色相同 文字颜色与背景颜色相似 将文字存在图片中 2) 隐藏链接(较…

不关注这些问题你的网站会有危险!(一定要收藏)

搜索引擎对网站采取不同程度的惩罚: List item作弊处罚积分机制搜索引擎惩罚的检测被惩罚的应对措施 1) 作弊处罚积分机制 轻度惩罚 :一般警告,站长小错误没有立即修改的情况。 表现:修改标题、删除重要连接、修改关键词等。 对…

2022最新版(程序员必须收藏的五个 页面优化技巧)

2022最新版(程序员必须收藏的五个 页面优化技巧) 文章目录2022最新版(程序员必须收藏的五个 页面优化技巧)[toc]一、清理垃圾代码1、产生的垃圾空格2、默认属性产生的垃圾代码3、注释语句产生的垃圾代码4、空语句产生的垃圾代码二…

通过这些操作,让你的网站日访问量过万!

文章目录1.外部链接的定义和意义定义意义1.增强页面相关性2.提高权重及信任度3.提高收录数2.外链的分类3.外链的查询方法:利用搜索引擎查询:第三方工具查询:4.Google 炸弹5.链接分析技术1.外部链接的定义和意义 定义 外链又叫反向链接或导入…

运行报错System error: net::ERR_FILE_NOT_FOUND 完美解决方法!

运行报错 :System error: net::ERR_FILE_NOT_FOUND 在使用bootstrap 过程中报错如图 问题描述: 报错信息显示没有找到对应文件 原因分析: 检查了一下,文件路径也没有错误,可能是代码的问题,我的代码如下…

软考快要开始了,怎么以最短的时间得到最多的分数(软考考试大纲最新版)

文章目录软考大纲(软考考试大纲汇编,最新版)第 1 章 系统分析师考试大纲第 2 章 系统分析师考试培训指南第 3 章 系统架构设计师考试大纲第 4 章 网络规划设计师考试大纲第 5 章 信息系统项目管理师考试大纲第 6 章 系统集成项目管理工程师考…

都快2022年了,还在纠结要学什么编程语言吗?看看哪个最适合你

先上图,不用说你自己心里都有底了吧! 下面我来分析一下排名前几位的编程语言 文章目录全面分析各种编程语言优缺点分析,及适用的人群C语言JavapythonCC#visual Basicjavascriptphpassembly languagesqlgo全面分析各种编程语言优缺点分析,及适…