时间:2021-05-02
环境
virtualbox_v6.0.14 centos_v7.1908 python_v3.8.0 mongodb_v3.2.22 pip_v19.3.1 windows pycharm-2019.2.3企业版(社区版不支持远程连接linux开发),需激活使用系统自带python2.7.5不做处理,尝试过pyenv安装3.8,但是到安装scrapy的时候报错不断,最终又卸载了pyenv重新手动编译安装。
为了保证虚拟机和宿主机能互相访问和正常通信,采用2虚拟网卡的配置方式。
在virtualbox菜单中设置–>网络,启用2个虚拟网卡(虚拟机启用,如下2图),网卡1连接方式设置为”网络地址转换nat“,可保证虚拟机访问外部网络和宿主机,网卡2连接方式设置为”桥接网卡“,可保证宿主机能访问到虚拟机。
在virtualbox虚拟机上安装centos7,系统在安装过程中最好能配置启用2网卡(centos系统启用)。
安装过程略。
启动虚拟机后使用# ip addr 可查看centos系统网卡使用及ip分配情况。enp0s3是nat网卡信息,ip默认是10.0.2.15;enp0s8是桥接模式下网卡信息,默认分配的ip和宿主机会在同一个网段下。
如果看不到某网卡的ip信息,可能是系统在安装的时候没有启用网卡,可在/etc/sysconfig/network-scripts/ifcfg-enp0s3 和 /etc/sysconfig/network-scripts/ifcfg-enp0s8中修改onboot参数为yes,然后重新启动网络服务# systemctl start network.service或者# service network restart即可。
系统使用dvd镜像安装完成后默认有ssh服务。宿主机如果使用ssh连接虚拟机需要设置防火墙开放22端口。
# firewall-cmd --zone=public --add-port=22/tcp --permanent # 防火墙开放22端口 # firewall-cmd --reload #重新加载防火墙配置 # firewall-cmd --zone=public --list-port #查看已开放端口
至此可以使用windows客户端工具ssh远程连接虚拟机访问操作,主要是方便和宿主机共享剪贴板。
使用阿里yum源可参考下面这一段
? 1 2 3 4 5 6 7 8 9 10 11 12 13 14 下载wget工具 # yum install -y wget 进入yum源配置文件所在文件夹 # cd /etc/yum.repos.d/ 备份本地yum源 # mv centos-base.repo centos-base.repo_bak 获取阿里yum源 # wget -o centos-base.repo http://mirrors.aliyun.com/repo/centos-7.repo 清理yum缓存 # yum clean all 重建缓存 # yum makecache 升级linux系统 # yum -y update ? 1 2 3 4 # netstat -nltp # 查端口是否占用 # ifconfig # 查看ip的常用命令 这些命令默认系统没有安装,可执行以下命令行安装 # yum install net-tools这里需要安装一大坨,是网上搜集+自己实践加上去的,不想折腾就都从了吧
? 1 2 # yum -y groupinstall "development tools" # yum -y install zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel gdbm-devel db4-devel libpcap-devel xz-devel libxml2-devel libxslt-devel libffi-devel添加mongodb国内镜像源 # vim /etc/yum.repos.d/mongodb.repo 粘贴以下内容
? 1 2 3 4 5 [mongodb-org] name=mongodb repository baseurl=https://mirrors.tuna.tsinghua.edu.cn/mongodb/yum/el$releasever/ gpgcheck=0 enabled=1刷新yum缓存
# yum makecache
安装mongodb
? 1 2 3 # yum -y install mongodb-org 修改mongod.conf bindip参数 # vim /etc/mongod.conf重启mongod服务
? 1 # /etc/init.d/mongod restart 或 # systemctl restart mongod.service查看mongod版本
# mongod --version
防火墙开放27017端口
? 1 2 3 # firewall-cmd --zone=public --add-port=27017/tcp --permanent # firewall-cmd --reload # firewall-cmd --zone=public --list-port安装python3.8
下载python3.8源码编译安装
? 1 2 3 # wget https://www.python.org/ftp/python/3.8.0/python-3.8.0.tgz # tar -zxvf python-3.8.0.tgz #cd python-3.8.0.tgzcheck依赖,生成makefile,
# ./configure --prefix='/usr/local/python3'
编译
# make
安装
# make install
做软链
? 1 2 # ln -s /usr/local/python3/bin/python3 /usr/bin/python3 # ln -s /usr/local/python3/bin/pip3 /usr/bin/pip3python3.7后–with-ssl不可用,执行configure的时候 不加–with-ssl也可以安装成功,如果不成功,可以在python-3.8.0/modules/setup文件中去掉以下3行的注释符
# _ssl _ssl.c \# -duse_ssl -i$(ssl)/include -i$(ssl)/include/openssl \# -l$(ssl)/lib -lssl -lcrypto可以先修改pip源路径,pipfile文件中[source]下面url属性,比如修改成:url = "https://pypi.tuna.tsinghua.edu.cn/simple"也可以直接用以下命令执行安装
? 1 2 # pip3 install --upgrade pip -i https://pypi.tuna.tsinghua.edu.cn/simple # 指定清华大学的pip源更新pip # pip3 install scrapy -i https://pypi.tuna.tsinghua.edu.cn/simple # 安装scrapy接下来会安装很多scrapy的依赖包,到安装twisted的时候会很慢,要耐心等待。看到如下图即安装成功!
安装完成后接下来配置远程开发环境请参考
https://www.cnblogs.com/xiao-apple36/p/8587086.html
听说 pipenv 吊炸天,可以一步到位安装scrapy。
另外推荐使用anaconda,可省去一堆依赖包的跨境下载,python多版本管理,scrapy安装可一键搞定。特别是windows环境,强烈建议。 欢迎交流尝试
附
centos7.7.1908清华大学的镜像路径
https://mirrors.tuna.tsinghua.edu.cn/centos/7.7.1908/isos/x86_64/centos-7-x86_64-dvd-1908.iso oracle virtualbox
https://download.virtualbox.org/virtualbox/6.0.14/virtualbox-6.0.14-133895-win.exe
windows企业版pycharm-2019.2.3
https://download.jetbrains.com/python/pycharm-professional-2019.2.3.exe?_ga=2.181479010.470914607.1571468237-1358446455.1571468237
总结
以上所述是小编给大家介绍的virtualbox centos7.7.1908 python3.8 搭建scrapy开发环境【图文教程】,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对服务器之家网站的支持!如果你觉得本文对你有帮助,欢迎转载,烦请注明出处,谢谢!
原文链接:https://blog.csdn.net/haohaifeng002/article/details/102644880
声明:本页内容来源网络,仅供用户参考;我单位不保证亦不表示资料全面及准确无误,也不保证亦不表示这些资料为最新信息,如因任何原因,本网内容或者用户因倚赖本网内容造成任何损失或损害,我单位将不会负任何法律责任。如涉及版权问题,请提交至online#300.cn邮箱联系删除。
个人使用环境WIN10x64系统,Python3.8,PyCharm2020.01.03安装过程一、安装Python3.8(自己参考其他教程)二、安装PyQt5
python3.8新功能相关文章Python3.8新功能大揭秘【新手必学】Python3.8新功能来一波(大部分人都不知道)第一步下载python3.8,官网下
Python3.8是Python语言的最新版本,它适合用于编写脚本、自动化以及机器学习和Web开发等各种任务。现在Python3.8已经进入官方的beta阶段,
前言我最近都在写一些Python3.8的新功能介绍的文章,在自己的项目中也在提前体验新的Python版本。为什么我对这个Python3.8这么有兴趣呢?主要是因
python3.6.2环境安装配置图文教程,具体如下一、需要下载的软件》python3.6.2.exe(也可以选择更新的版本)-----网址》Anaconda3