Code # -*- coding:utf8 -*- import string import urllib2 import re import time import random class CSDN_Spider: def __init__(self,url): self.myUrl = url self.datas = [] print u"爬虫已启动...." def csdn(self): url = self
左边主机，右边从机；USB 有主机控制器 UHC 和从机控制器 UDC，主机侧有 USB Device Driver，从机侧有 USB Function Driver。
来源：猿天地 链接：http://cxytiandi.com/blog/detail/1699 刚好今天博客功能正式上线，然而上线之后出了一个bug java.lang.IllegalStateException: Cannot create a session after the response has been committed 意思是说在response提交之后不能操作session了，我也就奇怪了，本地开发的时候没出现这个问题啊。 唯一不一样的是线上用的nginx做转发,还有就是我是从一个act
Linux系统文件操作主要是通过块设备驱动来实现的。 块设备主要指的是用来存储数据的设备，类似于SD卡、U盘、Nor Flash、Nand Flash、机械硬盘和固态硬盘等。块设备驱动就是用来访问这些存储设备的，其与字符设备驱动不同的是：
最近很少用 deepin 在线或者使用客户段听音乐了，喜欢下载到本地听那些熟悉的歌曲。
1、字符设备驱动: 当我们的应用层读写(read()/write())字符设备驱动时,是按字节/字符来读写数据的,期间没有任何缓存区,因为数据量小,不能随机读取数据,例如:按键、LED、鼠标、键盘等 2、块设备: 块设备是i/o设备中的一类, 当我们的应用层对该设备读写时,是按扇区大小来读写数据的,若读写的数据小于扇区的大小,就会需要缓存区, 可以随机读写设备的任意位置处的数据，例如 普通文件(.txt,.c等),硬盘,U盘，SD卡。 3、块设备结构： 段(Segments)：由若干个块组成。是Linux内存管理机制中一个内存页或者内存页的一部分。 块 (Blocks)： 由Linux制定对内核或文件系统等数据处理的基本单位。通常由1个或多个扇区组成。（对Linux操作系统而言） 扇区(Sectors)：块设备的基本单位。通常在512字节到32768字节之间,默认512字节 应用程序进行文件的读写，通过文件系统将文件的读写转换为块设备驱动操作硬件。
Video4Linux2（V4L2）是一个用于Linux操作系统的视频设备驱动框架。它提供了一个统一的接口，用于在应用程序和视频设备之间进行通信和交互。
由于项目的需要，需要做一个简单监控服务器的CPU利用率、CPU负载、硬盘使用率、内存利用率和服务器的各个端口的开启情况的程序，并把结果通知到监控平台，如果出现异常，监控平台打电话或者发短信通知给具体的运维人员
1. mqtt第三方库支持openssl a, 编译openssl库（我使用的是1.0.1），在mqtt源码目录下创建openssl文件夹，并拷贝编译完成的库文件与头文件到此文件夹下。 b, 修改mqtt（源码从git上获取https://github.com/eclipse/paho.mqtt.c.git ）编译选项，PAHO_WITH_SSL，OPENSSL_SEARCH_PATH。修改后需要重新清除，重新编译。
程磊，某手机大厂系统开发工程师，阅码场荣誉总编辑，最大的爱好是钻研Linux内核基本原理。
协议是一种约定，在使用socket api接口的的时候，比如网络套接字的博文中写的示例代码，都是按字符串的方式来接收的，但是如果传输的是结构体的数据，就需要考虑以下问题：
上图这个服务器“优化”是不是似曾相识，网上有太多太多这样的文章，核心调优方案就是开启 tcp_timestamps 和 tcp_tw_recycle。诚然这个“调优“，确实如毒品一般让业务瞬间得到虚幻一般的高潮，但是他的危害也如毒品一般让业务一步步陷入深渊。
本篇我将为你介绍一个工具 - k6 ，它和 K8s 并没有什么直接的关系，它是一款开源的性能压测工具。
然后，要用protobuf把它编译成对应的语言代码。 首先安装protoc，偷个懒，别人早就编译好了。直接用就行。
昨天晚上为了下载保存某位csdn大牛的全部博文，写了一个爬虫来自动抓取文章并保存到txt文本，当然也可以 保存到html网页中。这样就可以不用Ctrl+C 和Ctrl+V了，非常方便，抓取别的网站也是大同小异。
TCP有限状态机 TCP服务 创建TCP服务的四个基本步骤： socket – 创建socket套接字。 bind – 绑定要监听的IP地址。 listen – 开始监听客户端连接请求。 accept
在前面文章《LTE模组可以被VPP直接接管喽！！！》中介绍使用af-packet插件将linux 内核接口映射到vpp中，并通过vpp dhcp client插件实现lte拨号上网的功能，本文主要介绍af packet实现机制，对阅读代码有所帮助。
大家好，又见面了，我是你们的朋友全栈君。 What is a transparent bridge and why to use it? Few lines of dry theory first
工作函数 uv__fs_work 做的事情很简答 根据要做的操作类型做对应的操作函数调用，uv__fs_read 根据系统类型采取合适的读取函数，可以简单的视为调用read从fd读数据即可；
若存在dnslog回弹结果，将会生成/result/xxx_dnslog.html文件，没触发dnslog则不会生成该文件。
yum install -y wget && wget -O install.sh http://download.bt.cn/install/install_6.0.sh && sh install.sh ed8484bec
研究IO也很久了，一直无法串联bio和块设备驱动，只知道bio经过IO调度算法传递到块设备驱动，怎么过去的，IO调度算法在哪里发挥作用，一直没有完全搞明白，查看了很多资料，终于对块设备驱动有所理解，也打通了bio到块设备。
我们经常在一些公众号里回复信息，微信公众号都会自动回复信息，区别于微信平台的自动回复，有的公众号上面的自动回复，则更像是一个机器人客服。下面小编就教大家如何搭建微信公众号机器人。
由于不同块设备（如磁盘，机械硬盘等）有着不同的设备驱动程序，为了让文件系统有统一的读写块设备接口，Linux实现了一个 通用块层。如下图中的红色部分：
最近项目组在做Prometheus指标采集和告警，其中用到了Prometheus的exemplar特性，由于该特性比较新，当前支持该特性的存储有比较少。因此需要自行实现exemplar功能。
在这篇文章中，我将使用一个简单的 HTTP 基准测试在 Linux 内核的网络堆栈和由 DPDK 提供支持的内核旁路堆栈之间进行正面性能比较。 我将使用 Seastar 运行我的测试，Seastar 是一个用于构建高性能服务器应用程序的 C++ 框架。 Seastar 支持构建使用 Linux 内核或 DPDK 进行网络连接的应用程序，因此它是进行此比较的完美框架。
（编码encode()） pat=r"(.*?)" data=re.findall(pat,reponse) print(data[0]) ```python #创建自定义opener from u
开发过程中，很多时候处于公司内网，而有些时候需要外部能够访问到本地部署的服务，那么我们需要一个中转，其中ngrok就是这样一个比较优秀的服务。 源码编译 证书生成 cd ngrok openssl genrsa -out rootCA.key 2048 openssl req -x509 -new -nodes -key rootCA.key -subj "/CN=ngrok.xxxx.org" -days 5000 -out rootCA.pem openssl genrsa -out device.ke
前言 性能是我们日常生活中经常接触到的一个词语，更好的性能意味着能给我们带来更好的用户体检。比如我们在购买手机、显卡、CPU等的时候，可能会更加的关注于这样指标，所以本篇就来做一个性能评测。 性能也一直是我们开发人员一直追求的一个目标，我们在做语言选择，平台选择，架构选择的过程中都需要在性能之间做衡量。 同样性能对 .NET Core 团队来说也是至关重要的，一项新技术的诞生，除了对生产力的提高，还有技术团队对性能的追求。 今天，我们就来做一个对比测试，来看看微软的这样新技术性能到底怎么样，俗话说的好：“是
之前的博文都是通过urllib2进行http访问，接下来我要说一个利器啊！requests模块，无法用语言对他进行赞扬了，需要的，有兴趣的，可以去了解下，移步官方中文文档：
从代码中可以看出，只有 MappedFile 的大小等于或大于 CommitLog 的大小并且开启文件预热功能才会预加载文件。 CommitLog 文件的大小默认为 1 G。
linux centos8 安装php7 nginx1.4 mysql8 ，运行php网站，各个模块从零开始配置
Linux里的信号量是一种睡眠锁，调用者试图获得一个已被占用的信号量时，信号量会将其推入一个等待队列，让其睡眠。当该信号量被释放后，等待队列中的任务会被唤醒，获得该信号量。
所以，将进程与 CPU 进行绑定可以提高 CPU 缓存的命中率，从而提高性能。而进程与 CPU 绑定被称为：CPU 亲和性。
默认情况下，mmc_test.c是独立的文件，并没有编译到内核中，需要我们到menuconfig中手动打开。
网上关于BIO和块设备读写流程的文章何止千万，但是能够让你彻底读懂读明白的文章实在难找，可以说是越读越糊涂！
Express 是基于 Node.js 平台，快速、开放、极简的 Web 开发框架
前些天，移动端的同事跑来问：某些API需要传输大数据，Nginx服务器能否支持Gzip请求？一方面可以节省移动端流量；另一方面还可以加快传输速度，提升用户体验。对于Apache来说，利用SetInputFilter，可以很轻松的实现这个功能，那么Nginx如何做呢？
libuv经过Node.js的实践和应用，已经证明非常之成熟，本来之前项目用的是这个：clsocket https://github.com/DFHack/clsocket 当初选它的主要原因是它支持Windows、Linux、Mac OSX（我猜测的），但致命的缺点就是仅支持阻塞的TCP，这样就会导致一个问题，在连接游戏服务器、聊天服务器的时候游戏主界面会直接被卡死，等连接成功后才能恢复正常。而LuaSocket之前游戏也替换过，发现的问题主要是依赖lua的循环检测是否有新的数据（定时器），从而导致明显的界面延时。Cocos2d-x 3.x版本因为性能大幅提升，似乎此问题感受并不明显，而我们因为项目历史明显，lua 与 C++结合的很死，本身跑起来就一卡一卡的。
urllib2.urlopen(url[, data[, timeout[, cafile[, capath[, cadefault[, context]]]]])
自定义基础镜像官方文档看完后最还是google一下如何构建,tar cv --files-from /dev/null | docker import - scratch，使用docker images查看scratch的大小为0B，基础镜像已经构建成功，接下来把golang程序构建镜像
使用win11的ubuntu22.04子系统： ☞ Win11使用WSL2安装Ubuntu22.04并启用GUI应用 zhangrelay@LAPTOP-5REQ7K1L:~/cppcode$ cat /etc/lsb-release DISTRIB_ID=Ubuntu DISTRIB_RELEASE=22.04 DISTRIB_CODENAME=jammy DISTRIB_DESCRIPTION="Ubuntu 22.04 LTS" ---- 安装： sudo apt install build-
Node.js是一个基于Chrome V8引擎的JavaScript运行环境.Node.js使用了一个事件驱动，非阻塞式I / O的模型，使其轻量又高效。
ARP欺骗是一种在局域网中常用的攻击手段，目的是让局域网中指定的（或全部）的目标机器的数据包都通过攻击者主机进行转发，是实现中间人攻击的常用手段，从而实现数据监听、篡改、重放、钓鱼等攻击方式。 在进行ARP欺骗的编码实验之前，我们有必要了解下ARP和ARP欺骗的原理。 3.1.1 ARP和ARP欺骗原理 ARP是地址转换协议（Address Resolution Protocol）的英文缩写，它是一个链路层协议，工作在OSI 模型的第二层，在本层和硬件接口间进行联系，同时对上层（网络层）提供服务。我们知道
libpcap为了提高效率，调用setsockopt(handle->fd, SOL_PACKET, PACKET_RX_RING,(void *) &req, sizeof(req))时采用kmalloc分配内存。 可以参考: https://www.kernel.org/doc/Documentation/networking/packet_mmap.txt kmalloc底层依赖linux的slab内存分配机制，在2.6.22内核之后，slub取代slab成为默认的内存分配器。空间和时间上都有所提升。
Node.js 小知识 记录一些工作中或 “Nodejs技术栈” 交流群中大家遇到的一些问题，有时一个小小的问题背后也能延伸出很多新的知识点，解决问题和总结的过程本身也是一个成长的过程，在这里与大家共同分享成长。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
云直播
