摘要: 本篇文章主要来爬取网易云音乐的音频文件。 进入一首歌点击播放,从该请求中找到了音频文件的地址 查看载荷情况,a56爆大奖在线娱乐现在问题的重点就是找到载荷是怎么构建的 通过查看该请求的启动器,一层层向上找参数是在哪个地方构建的 打断点定位到第一个位置,发现参数已经构建完成,a56爆大奖在线娱乐通过调用堆栈继续向前找参数构建的位置 阅读全文
posted @ 2024-06-27 16:34 Mrterrific 阅读(13) 评论(0) 推荐(0) 编辑
摘要: 分析发送请求的过程 该动态请求返回的数据是响应数据,想要的结果就在其中,但明显是加密过的,a56爆大奖在线娱乐下一步要模拟发送请求,并找出是如何加密的。 看一下请求的载荷,多发几次请求,发现只有这两个参数是变化的,a56爆大奖在线娱乐下一步要找到这两个参数是如何构建的,才能模拟发出请求。 在源代码中搜索,找到发送请求的位置,搜索内 阅读全文
posted @ 2024-06-26 10:22 Mrterrific 阅读(12) 评论(0) 推荐(0) 编辑
摘要: 1.python调用execjs执行js代码解决execjs执行js时产生的乱码报错,需要在导入该模块之前,让Popen的encoding参数锁定为utf-8. 具体做法,如下 切记,不要去改源码,要不然其他程序会炸 from functools import partial # 这玩意儿能锁定一个 阅读全文
posted @ 2024-06-26 10:14 Mrterrific 阅读(2) 评论(0) 推荐(0) 编辑
摘要: 示例为调用huggingface的大模型,使其流式输出 from fastapi import FastAPI, Request import requests import json import os from pydantic import BaseModel from transformer 阅读全文
posted @ 2024-06-13 09:49 Mrterrific 阅读(31) 评论(0) 推荐(0) 编辑
摘要: python实现单例模式 在Python中实现单例模式可以通过装饰器、元类或者直接在类中实现。以下是一个使用装饰器实现的单例模式示例: def singleton(cls): instances = {} def get_instance(*args, **kwargs): if cls not i 阅读全文
posted @ 2024-06-11 16:06 Mrterrific 阅读(20) 评论(0) 推荐(0) 编辑
摘要: import random import os import re import requests import asyncio import aiohttp import time from lxml import etree from Crypto.Cipher import AES from 阅读全文
posted @ 2024-06-11 15:55 Mrterrific 阅读(15) 评论(0) 推荐(0) 编辑
摘要: 1.打开filebeat支持nginx模块 [root@es-node1 /etc/filebeat]#ls fields.yml filebeat.reference.yml filebeat.yml filebeat.yml.bak modules.d [root@es-node1 /etc/f 阅读全文
posted @ 2024-04-11 10:32 Mrterrific 阅读(20) 评论(0) 推荐(0) 编辑
摘要: 1.收集nginx日志 学习背景:access.log,error.log目前日志混杂在一个es索引下。 改进filebeat配置 https://www.elastic.co/guide/en/beats/filebeat/current/elasticsearch-output.html 加上日 阅读全文
posted @ 2024-04-11 10:30 Mrterrific 阅读(9) 评论(0) 推荐(0) 编辑
摘要: ELK 是elastic公司提供的一套完整的日志收集以及展示的解决方案,是三个产品的首字母缩写,分别是ElasticSearch、Logstash 和 Kibana。该组合版本会统一发布。 ElasticSearch简称ES,它是一个实时的分布式搜索和分析引擎,它可以用于全文搜索,结构化搜索以及分析 阅读全文
posted @ 2024-04-11 10:26 Mrterrific 阅读(23) 评论(0) 推荐(0) 编辑
摘要: 1.官网提供snap快照备份恢复 https://www.elastic.co/guide/en/elasticsearch/reference/7.9/snapshot-restore.html 环境要求 要求所有es节点,挂载同一个共享目录,可以使用NFS。 注意背景 [root@devops0 阅读全文
posted @ 2024-04-11 10:22 Mrterrific 阅读(99) 评论(0) 推荐(0) 编辑