字段排序
sorted_result = sorted(item.items(),key=lambda x:x[1],reverse=True)
清理字符串中的特殊字符，可用于文件命名
clean_txt = lambda str: re.sub(r'[\/\\\:\*\?\"\<\>\|]' , "_", str)
节格式化为kb、mb、gb，可用于文件大小转换
def format_size(bytes):
try:
bytes = float(bytes)
kb = bytes / 1024
if kb > 1024:
mb = kb / 1024
if mb > 1024:
gb = mb / 1024
return '%.2fGB' % gb
else:
return '%.2fMB' % mb
else:
return '%.2fKB' % kb
except:
return 'error'
PC UA随机生成
def get_ua():
first_num = random.randint(55, 62)
third_num = random.randint(0, 3200)
fourth_num = random.randint(0, 140)
os_type = [
'(Windows NT 6.1; WOW64)', '(Windows NT 10.0; WOW64)', '(X11; Linux x86_64)',
'(Macintosh; Intel Mac OS X 10_12_6)'
]
chrome_version = 'Chrome/{}.0.{}.{}'.format(first_num, third_num, fourth_num)
ua = ' '.join(
[
'Mozilla/5.0', random.choice(os_type), 'AppleWebKit/537.36',
'(KHTML, like Gecko)', chrome_version, 'Safari/537.36'
]
)
return ua
正则匹配汉字
match_zh_words = lambda text: re.findall(r'[\u4e00-\u9fa5]+',text)
输出彩色字体
print('\033[35;46m正常\033[0m')
print('\033[31;43m警告\033[0m')
print('\033[31;44m错误\033[0m')
彩色字体效果图
判断关键字是否在文本中出现
keyword_list=['a','b','c',]
flag=any(True if keyword in text else False for keyword in keyword_list)
谷歌翻译语言表
language_table={'auto': '自动选择', 'af': '南非荷兰语', 'sq': '阿尔巴尼亚语', 'am': '阿姆哈拉语', 'ar': '阿拉伯语', 'hy': '亚美尼亚语', 'az': '阿塞拜疆语', 'eu': '巴斯克语', 'be': '白俄罗斯语', 'bn': '孟加拉语', 'bs': '波斯尼亚语', 'bg': '保加利亚语', 'ca': '加泰罗尼亚语', 'ceb': '宿务语', 'zh': '中文（简体）', 'zh-TW': '中文（繁体）', 'co': '科西嘉语', 'hr': '克罗地亚语', 'cs': '捷克语', 'da': '丹麦语', 'nl': '荷兰语', 'en': '英语', 'eo': '世界语', 'et': '爱沙尼亚语', 'fi': '芬兰语', 'fr': '法语', 'fy': '弗里西语', 'gl': '加利西亚语', 'ka': '格鲁吉亚语', 'de': '德语', 'el': '希腊语', 'gu': '古吉拉特语', 'ht': '海地克里奥尔语', 'ha': '豪萨语', 'haw': '夏威夷语', 'he': '希伯来语', 'hi': '印地语', 'hmn': '苗语', 'hu': '匈牙利语', 'is': '冰岛语', 'ig': '伊博语', 'id': '印尼语', 'ga': '爱尔兰语', 'it': '意大利语', 'ja': '日语', 'jw': '爪哇语', 'kn': '卡纳达语', 'kk': '哈萨克语', 'km': '高棉语', 'ko': '韩语', 'ku': '库尔德语', 'ky': '吉尔吉斯语', 'lo': '老挝语', 'la': '拉丁语', 'lv': '拉脱维亚语', 'lt': '立陶宛语', 'lb': '卢森堡语', 'mk': '马其顿语', 'mg': '马尔加什语', 'ms': '马来语', 'ml': '马拉雅拉姆语', 'mt': '马耳他语', 'mi': '毛利语', 'mr': '马拉地语', 'mn': '蒙古语', 'my': '缅甸语', 'ne': '尼泊尔语', 'no': '挪威语', 'ny': '尼杨扎语（齐切瓦语）', 'ps': '普什图语', 'fa': '波斯语', 'pl': '波兰语', 'pt': '葡萄牙语', 'pa': '旁遮普语', 'ro': '罗马尼亚语', 'ru': '俄语', 'sm': '萨摩亚语', 'gd': '苏格兰盖尔语', 'sr': '塞尔维亚语', 'st': '塞索托语', 'sn': '修纳语', 'sd': '信德语', 'si': '僧伽罗语', 'sl': '斯洛文尼亚语', 'so': '索马里语', 'es': '西班牙语', 'su': '巽他语', 'sw': '斯瓦希里语', 'sv': '瑞典语', 'tl': '塔加洛语（菲律宾语）', 'tg': '塔吉克语', 'ta': '泰米尔语', 'te': '泰卢固语', 'th': '泰语', 'tr': '土耳其语', 'uk': '乌克兰语', 'ur': '乌尔都语', 'uz': '乌兹别克语', 'vi': '越南语', 'cy': '威尔士语', 'xh': '班图语', 'yi': '意第绪语', 'yo': '约鲁巴语', 'zu': '祖鲁语'}
时间戳转日期时间
get_date = lambda n: time.strftime("%Y-%m-%d %H:%M:%S", time.localtime(time.time() - 60 * 60 * 24 * n))
def convert_to_datetime(timestamp):
timeArray = time.localtime(timestamp)
datetime= time.strftime("%Y-%m-%d %H:%M:%S", timeArray)
return datetime
B站AV号转BV号
alphabet = 'fZodR9XQDSUm21yCkr6zBqiveYah8bt4xsWpHnJE7jL5VG3guMTKNPAwcF'
def dec(x):
# bv to av
r = 0
for i, v in enumerate([11, 10, 3, 8, 4, 6]):
r += alphabet.find(x[v]) * 58 ** i
return (r - 0x2_0840_07c0) ^ 0x0a93_b324
def enc(x):
# av to bv
x = (x ^ 0x0a93_b324) + 0x2_0840_07c0
r = list('BV1**4*1*7**')
for v in [11, 10, 3, 8, 4, 6]:
x, d = divmod(x, 58)
r[v] = alphabet[d]
return ''.join(r)
print(dec(alphabet)) # -4566132193
print(enc(dec(alphabet))) # BV1dR4X1D7Um
展示日期信息，便于天气展示
import datetime
def show_date():
"""
展示日期信息，便于天气展示
:return:
"""
date = str(datetime.date.today())
year, month, day = date.split('-')
week_day_dict = {
0: '星期一',
1: '星期二',
2: '星期三',
3: '星期四',
4: '星期五',
5: '星期六',
6: '星期日 ',
}
now = datetime.datetime.now()
date_index = now.weekday()
date_time = f'{year}年{month}月{day}日 {week_day_dict[date_index]}'
return date_time
print(show_date()) # 2022年09月03日 星期六
解决最新Pyecharts无Map
pip install pyecharts==0.5.1
图片base64硬编码
import base64
def img_to_base64(filename):
with open(filename, 'rb') as open_icon:
b64str = base64.b64encode(open_icon.read())
return b64str
提取url中的参数
import urllib.parse
def extractParams(url):
parsed = urllib.parse. urlparse(url)
querys = urllib.parse.parse_qs(parsed.query)
querys = {k: v[0] for k, v in querys.items()}
return querys
print(extractParams('https://www.baidu.com/s?ie=UTF-8&wd=python')) # {'ie': 'UTF-8', 'wd': 'python'}
分块下载文件
import requests
link="http://www.xxxx/com/video/123.mp4"
file_name="123.mp4"
rsp = requests.get(link, stream=True)
chunk = 2048 # 每次读取2M，分块读取
with open(file_name, 'wb') as f:
for i in rsp.iter_content(chunk):
f.write(i)
自动解码text，用于requests得到的response.content二进制解码
def text_encoding(text):
try:
import cchardet
if isinstance(text, bytes):
encoding = cchardet.detect(text)['encoding']
print('encoding', encoding)
if encoding is None:
encoding = 'UTF-8'
text = text.decode(encoding, 'ignore')
except ModuleNotFoundError as e:
print(e)
e = repr(e).split("\'")[-2]
print(f'now install module:{e}')
import os
os.system('pip install cchardet')
return text_encoding(text)
return text
