爬虫需谨慎,你不知道的爬虫与反爬虫套路!

摘要:爬虫与反爬虫,是一个很不阳光的行业。这里说的不阳光,有两个含义。第一是,这个行业是隐藏在地下的,一般很少被曝光出来。很多公司对外都不会宣称自己有爬虫团队,甚至隐瞒自己有反爬虫团队的事实。这可能是出于公司战略角度来看的,与技术无关。第二是,这个行业并不是一个很积极向上的行业。很多人在这个行业摸爬滚打了多年,积攒了大量的经验,但是悲哀的发现,这些经验很

 window 下python2.7与python3.5两版本共存设置

摘要:(1)在Path环境变量中检查以下4个变量(Path中的环境变量是以分号隔开的): 1.c:\Python27 2.c:\Python27\Scripts 3.c:\Python35 4.c:\Python35\Scripts(2)进入Python2.7安装目录,把python.exe重命名为python2.exe (3)进入python3.5安装目录。找到python.exe程序,把它重命名为python3.exe(4)最后打开命令行界面测试一下 执

  创建局域网内的离线YUM仓库

摘要:在早先的教程中,我们讨论了如何使用 ISO 镜像和在线 Yum 仓库的方式来创建自己的 Yum 仓库 。创建自己的 Yum 仓库是一个不错的想法,但若网络中只有 2-3 台 Linux 机器那就没啥必要了。不过若你的网络中有大量的 Linux 服务器,而且这些服务器还需要定时进行升级,或者你有大量服务器无法直接访问互联网,那么创建自己的 Yum 仓库就很有必要了。当我们有大量的 Linux 服务器

 谈谈搭建堡垒机的几条原则

摘要:总结一下这几年使用堡垒机的经验教训,和大家做一个分享,无论是使用自建堡垒机还是采用一些商用方案,通用的原则是不会变的。希望对大家有所帮助,如果有遗漏的地方,欢迎补充和指教。原则1:一要建立个人帐号的概念,必须做到一人一个帐号,绝不允许多个人共用个人帐号,更不能允许共同账号登录堡垒机。原则2:从本机到服务器上每一道防线的安全等级应该是等同的。一定一定不

 RHCE-mount_fdisk 挂载和卸载文件系统

摘要:存储管理概念硬件和存储设备通常划分为更小的块,称为分区。分区是划分硬盘的一种方法。不同的部分可以通过不同的文件系统进行格式化或用于不同的目的存储设备由一个特殊文件类型表示,其称为块设备。块设备存储在/dev目录中。 RHEL中检测到第一个SCSI、 PATH/SATA或USB硬盘驱动器是/dev/sda,第二个是/dev/sdb以此类推。该名称代表整个驱动器。 /dev/sda上的第一个主分区是/dev

 RHCE-df 检查文件系统

摘要:检查文件系统-df若要对文件系统挂载点和可用空间的大小有个简略的了解,可以运行df命令。不带参数运行时,它将报告所有已挂载的普通文件系统的总磁盘空间、 已用磁盘空间和可用磁盘空间。它将报告本地和远程系统,以及已用空间占总磁盘空间的百分比若要改善输出大小的可读性,可使用两个不同的用户可读选项-h和-H。 -h报告的单位是KiB(2^10)或MiB(2^20)或GiB(2^30),而使用

 RHCE- du 检查文件系统

摘要:检查文件系统-du显示某一特定目录树使用的空间详细信息,支持-h和-H选项以递归方式显示当前目录树中所有文件的大小 Linux du命令也是查看使用空间的,但是与df命令不同的是Linux du命令是对文件和目录磁盘使用的空间的查看,还是和df命令有一些区别的.1.命令格式:du [选项][文件]2.命令功能:显示每个文件和目录的磁盘使用空间。3.命令参数:-a或-all 显示目录中个别文

 RHCE-ln文件间的连接

摘要:管理文件间的链接-硬连接命令:ln 源目标    新创建的目标硬链接是新的目录条目,其引用文件系统中的现有文件。文件系统中的每一文件默认具有硬链接。为节省空间,可以不复制文件,而创建引用同一文件的新硬链接。新硬链接如果在与现有硬链接相同的目录创建,则需要具有不同的文件名,否则需要驻留于不同的目录中。指向同一文件的所有硬链接具有相同的权限、链接

 RHCE-find,locate

摘要:locatelocate根据locate数据库中的文件名或路径返回搜索结果。该数据库存储文件名和路径信息以普通用户搜索条目时,调用locate搜索的用户必须对包含匹配元素的目录树拥有读取权限,才能返回结果locate数据库每日自动更新。使用updatedb可手动更新实例:搜索名称或路径包含“ passwd”的文件locate passwd部分匹配也会返回结果locate image选项:-i:不区分大小写搜索-n:限制lo

 Linux中为硬盘分区打label标签

摘要:#首先要明白为什么要打label       通俗的说Lable就是给linux系统下的设备取一个比较直观的名字,方便用户识别。因为在linux下任何硬件设备都对应一个文件,如文件/dev/hda对应第一个磁盘,hda是系统自定义的名字,当应用它时很难搞清楚在系统中他在什么地方,所以我们通常把它的LABLE改成和这个磁盘要挂载的路径同样的名字,如/home,(改变LABEL名称用e2lab

 RHCE-RPM软件包和yum

摘要:RPM软件包和yumRPM是红帽开发的软件包管理器RPM软件包文件采用软件包名称组合方式命名:name-version-release.architecturename:描述其内容的一个或多个词语(httpd-tools)version:是原始软件的版本号(2.4.6)release:是基于该版本的软件包的发行版号,由软件打包商设置,后者不一定是原始软件开发(7.el7)ARCH:是编译的软件包可以运行的这种处理器架构下。“ noarch”表

 RHCE-sftp复制文件

摘要:使用sftp远程传输文件如果想要在上传文件到SSH服务器或从中下载文件时使用交互工具,可以使用sftp工具。 sftp的会话与典型的FTP会话相似,但使用SSH服务器的安全身份验证机制和加密数据传输功能命令:sftp  [user@]remote_host注:sftp会话接受各种命令,这些命令在远程系统上运行的方式与本地文件系统上相同帮助文件:sftp> helpAvailable commands:bye  &n

 RHCE-rsync同步文件

摘要:rsyncrsync---远程文件传输rsync比scp更高效,因为仅通过网络复制两者不同处,以使他们保持同步[root@desktop0 ~]# cat /etc/services | grep rsync   #listen 873rsync           873/tcp                   &

 RHCE-scp复制文件

摘要:SCPSSH还可用于安全的将文件从一台主机复制到另一台主机。 scp命令可将文件从远程主机传输到本地系统,或者反之。它利用SSH服务器进行身份验证和加密数据传输命令:scp 本地path     [user@]remotehost:/path#推命令:scp  [user@]remotehost:/path    本地path #拉注:user@可选,如果没有scp命令调用当前本地用户。在启动传输之前,

 RHCE-tar打包压缩文件

摘要:tar 并不是压缩程序,因为它打包之后的大小跟原来一样大。所以它不是压缩程序,而是打包程序。而我们习惯上会先打包,产生一个.tar 文件,再把这个包裹拿去压缩。 .tar.gz 的文件名就是这么来的。也有人觉的 .tar.gz 这样的名称太长了,其实浓缩为 .tgz意思也是一样的。命令:tar [-选项] [打包文件名] [文件]操作tar命令-常用选项:c:打包产生新文件t:列出包中的文件x:解开

 使用tab自动补全mysql命令

摘要:注意:自动补全是客户端命令,必须切换到数据库下才能使用 1.使用mysql --help查看mysql的命令参数 注意--auto-rehash       Enable automatic rehashing. One doesn't need to use                       'rehash' to get table and field completion, but startup     &nb

 RHCE-Timedatactl 时间管理

摘要:Timedatactl 时间同步 时间同步只同步时间,不同步时区,时区需要自已配置 UTC时区不变,我们东8区,本地时间为UTC+8小时,就是现在本地的时间 查询语句:列出了已知时区的数据库:timedatectl  list-timezones更改当前时区系统设置:timedatectl  set-timezone         Asia/Shanghai更改当前时

 RHCE-chronyd,rsyslog,Journalctl系统日志管理

摘要: Systemd-journald 收集的日志一般是内存的日志,重启后消失可以收集来睡在内核,启动过程的早期阶段,标准输出,系统日志以及守护进程启动和运行期间的消息 Rsyslog 进程将日志写入到/var/log目录中  常用的系统日志:/var/log/dmesg        核心启动日志/var/log/message    系统报错

 RHCE-nmcli,traceroute,hostnamectl,dns服务器网络配置

摘要:UGH 主机路由UG  网关路由 [root@server0 ~]# route -nKernel IP routing tableDestination     Gateway         Genmask         Flags Metric Ref    Use Iface0.0.0.0         17

 RHCE-ssh登录远程服务器

摘要:ssh登录远程服务器:[-l login_name]Ssh –l root remotehost 修改端口号:[-p port]Ssh –p portnumber    remoteuser@remotehost 登录远程服务器并执行命令并返回到本地:[user@]hostname [command]Ssh remoteuser@remotehost  hostname   公钥加密(client),私钥解密(server)  RSA Ssh 是自签名证
分页:« 21 22 23 24 25 26 27 28 29 30 »
Powered by AKCMS