【总结】Pandas DataFrame 使用方法
2020-10-24 22:21:02   Cyberbolt

近期为参加 泰迪杯竞赛,熟悉了Pandas用法,这里做一篇记录,总结Pandas下DataFrame数据结构的各种用法。 运行环境: Ubuntu 20.04 LTS, Python 3.8.2 一、创建DataFrame 1.使用 二维列表 创建Dataframe import pandas as pd import numpy as np data_list = [[1, 2, 3], ...

阅读更多
【源码】Python3使用Requests抓取和检测电光代理API,并查询ip代理是否成功
2020-06-18 23:14:32   Cyberbolt

注:该源码对Linux原生支持,Windows可能不会区分字体颜色 电光代理成立后,做一篇笔记,记录我使用Requests抓取和测试电光代理的方法 首先点击获取电光代理(需要支付少量费用,总体质量处于市面上开放代理第一梯队) 请获取一个属于您的代理API,如我的是 https://api.super.xyz/oNtl30618YdXol/1000-china-0-http-high_anon...

阅读更多
Python3 selenium每次启动打开相同的Chrome浏览器实例,实现免Cookie登录网站
2020-05-27 23:00:57   Cyberbolt

普通方法使用selenium,每次会新建一个全新的浏览器实例,而无法保存曾经登录过的Cookie等信息。现今业务需要selenium每次打开同一个浏览器。经查阅资料,记下该笔记,以便日后查询。 本文在selenium启动Chrome时,同时加载本地的用户配置文件,这样能保证每次启动的Chrome拥有相同数据信息。这里以Linux为例,同样试用于Windows和Mac OS。 运行环境: Ub...

阅读更多
双击运行Python程序时,使用虚拟环境的解释器执行
2020-05-01 19:09:04   Cyberbolt

由于业务需求,需要鼠标双击py文件后自动运行。为了使代码拥有更强可移植性,项目使用了虚拟环境。于是产生了问题,如何在 鼠标双击py文件后,使用虚拟环境的python解释器执行,而不是系统默认解释器? 这篇笔记使用 Windows 记录,同样适用于 Linux 与 MacOS。 笔记以使用 Requests库获取百度html源码 为例,说明方法,以下为实现过程:   环境:Windows 10...

阅读更多
Python3使用绝对路径和相对路径
2020-05-01 12:56:28   Cyberbolt

记录我在Python中使用 相对路径 和 绝对路径 遇到的一些问题。(笔记以Windows为例,同样适用于 Linux 和 Mac OS) 环境:Windows 10, Python 3.8.1 一、概念及作用 绝对路径 指 完整的描述文件位置的路径。 如,Windows下创建文件 test.txt,它的绝对路径为 D:\study\Python\Python_test\test.txt ,...

阅读更多
CentOS下通过Supervisor管理虚拟环境的Gunicorn Flask项目,实现开机自启等功能
2020-04-26 15:24:14   Cyberbolt

上篇笔记 CentOS下通过Gunicorn+Nginx部署Python Flask网站,并配置https和Nginx访客日志 实现了Gunicorn部署Flask网站,采用新建 独立命令窗口 的方法实现Gunicorn后台运行。然而,实际生产环境中,我们可能需要Gunicorn 随服务器开机自启 或 系统出错时及时重启。下面记录我部署Supervisor的全过程。 这篇笔记建立于 Cent...

阅读更多
CentOS下通过Gunicorn+Nginx部署Python Flask网站,并配置https和Nginx访客日志
2020-04-23 23:40:46   Cyberbolt

搭建CyberLight后有了完整Python建站经历,在此做下记录,以便之后查询,希望能帮到初学python建站的朋友。 本次笔记的默认条件为: 1. 您已在Linux成功部署Flask开发环境,欲部署生产环境。 2.此时您已自建Flask项目目录,并安装了虚拟环境。 3.您的域名已解析到服务器ip。【此处服务器是指物理层面的服务器主机,不是用于请求响应的Web服务器】 下面是笔记内容 环...

阅读更多
Python3虚拟环境使用方法
2020-04-21 10:48:17   Cyberbolt

记录一种我常用的虚拟环境 创建 和 迁移方法,这次笔记的前提是已安装Python3并有pip包管理工具 一.虚拟环境创建方法 这里以Windows为例,下面会说明Linux 进入你的Python该项目的根目录,如我的是 首先进入该目录下的终端。按住键盘 “Shift” + “鼠标右键”,鼠标点击 “在此处打开Powershell窗口(S)” (部分电脑是cmd,只要进入终端即可) 如图,已进...

阅读更多
Python3 selenium在Windows10运行
2020-04-21 10:42:13   Cyberbolt

之前做了Linux服务端运行selenum笔记,这里再做一次Windows使用记录,备忘使用,供大家参考。我采用不添加Chrome环境变量,将Chrome驱动和py文件放置同一目录运行的。 环境: Windows 10, Python 3.8.1 一.下载Chrome驱动 Windows运行selenum需要通过Chrome驱动运行,首先需要下载和本地Chrome版本号一致的驱动。 首先查看...

阅读更多
Python3 selenium在CentOS服务端运行
2020-04-21 10:19:49   Cyberbolt

最近尝试在服务器端运行selenium,做下此笔记,其间参考了大量相关教程,感谢每一位共享学习记录的网友! 由于windows10使用的Chrome,我继续尝试在CentOS运行,终于成功!以下是学习记录: 环境:CentOS8, Python 3.6.8 一.CentOS上安装Chrome 请确保身份为root,进入CentOS终端,然后依次输入 wget https://dl.googl...

阅读更多