问道不止，技近于道
  文章分类
blog 8 windows 2 database 7 golang 5 linux 20 python 31 前端 2
Python编译 Python编译
Python编译compileall模块(编译pyc文件) 前提说明：这种方式并不能加密源码，是会被破解查看源码的!!! 如果只是为了加密，可以通过py2exe、pyinstaller或者cx_Freeze对Python程序进行打包。 h
2024-05-13 python
python 编译&打包
re模块(含正则) re模块(含正则)
re模块(含正则) python的re模块是用于正则表达式操作的核心模块之一 re模块本身知识用来操作正则表达式的，和正则本身没关系。 正则表达式是一种规则，匹配字符串的规则。 正则表达式正则规则 本身是哪一个字符，就匹配字符中的哪一个字
2024-04-24 python
python python模块
使用slurm集群对llama2进行微调(单机多卡和多机多卡) 使用slurm集群对llama2进行微调(单机多卡和多机多卡)
0. 前言 编辑于 2024-04-10，如有遇到问题，请根据此日期看官方的变更记录，以方便排查问题。 huggingface官网：https://huggingface.co/ llama2官网：https://github.com/m
2024-04-10 python
python singularity apptainer slurm aigc
logging日志模块 logging日志模块
logging日志模块什么是日志日志是对软件执行时所发生事件的一种追踪方式。软件开发人员对他们的代码添加日志调用，借此来指示某事件的发生。一个事件通过一些包含变量数据的描述信息来描述（比如：每个事件发生时的数据都是不同的）。开发者还会区分事
2023-12-05 python
python python模块
异步爬取视频完整版 异步爬取视频完整版
异步爬取视频完整版#!/usr/bin/env python3 # -*- coding:utf-8 -*- """ 还是91看剧，这次使用的是 云播 源，爬取相对复杂 思路： 1.拿到主页面的页面源代码,尝试使用video关键字找
2021-04-09 python
python 异步编程
协程及在爬虫中应用 协程及在爬虫中应用
协程及爬虫中应用协程的概念# 进程 资源分配的最小单位 # 线程 CPU执行的最小单位 # 只要是线程里的代码 就都被CPU执行就行 # 线程是由 操作系统 调度,由操作系统负责切换的 # 协程: # 用户级别的,由我们自己写的p
2021-04-09 python
python python网络编程 异步编程
celery celery
Celery 1.环境搭建pip install celery 如果是windows，则需要多安装一个eventlet pip install eventlet 2.两种celery任务结构：提倡用包管理，结构更清晰# 如果 Celer
2021-03-31 python
python Celery
python网络编程--协程 python网络编程--协程
python网络编程–协程gevent三方模块好处是：使用简单 缺点是：不能使用框架 import gevent # 导入三方模块包 from gevent import monkey # 导入gevent模块的monkey方法 mo
2019-11-26 python
python python网络编程
python网络编程--池 python网络编程--池
python网络编程–池进程池为什么要有进程池？进程池的概念： 在程序实际处理问题过程中，忙时会有成千上万的任务需要被执行，闲时可能只有零星任务。那么在成千上万个任务需要被执行的时候，我们就需要去创建成千上万个进程么？首先，创建进程需要消耗
2019-11-24 python
python python网络编程
生产者消费者模型 生产者消费者模型
生产者消费者模型生产者消费者模型，简单来说就是为了达到某件是的平衡。 比如生产食物和顾客消费食物，生产是批量的生产，顾客吃食物只能一个一个来吃，使用该模型可以限制生产的量，当量达到最高上限时暂停生产，等待消费者消费再接着进行生产。这样做的好
2019-11-24 python
python python网络编程
python网络编程--线程 python网络编程--线程
python网络编程–线程什么是线程前面说过了进程，进程最少有一个线程。进程是计算机中最小的资源分配单位，线程是cpu调度的最小单位。 什么意思呢？简单来说就是你要运行的一个程序，进程是一个代码仓库给线程分配资源的，要想让程序运行起来，cp
2019-11-21 python
python python网络编程
python网络编程--锁 python网络编程--锁
锁什么是锁？用来干什么的？我们先拿生活中的例子来说。这里用多进程说明： 购票大家都不陌生，我们购票就好比一个系统开了多进程让我们多个用户去买票，我们可以同时查询到票的数量。这时候是春节期间购票高峰期，有些票只剩下寥寥几张，而需要买这张票的有
2019-11-19 python
python python网络编程
2 / 3