作者文章归档:admin

Linux ntp时间服务器


安装ntp服务安装ntp服务

yum –y install ntp

配置详解 /etc/ntp.conf

1. restrict

作用:对ntp做权限控制 - ignore:忽略所有类型的NTP连接请求 - nomodify:限制客户端不能使用命令ntpc和ntpq来修改服务器端的时间 - noquery:不提供NTP网络校时服务 - notrap:不接受远程登录请求 - notrust:不接受没有经过认证的客户端的请求

【如果没有用任何参数,那么表示不做任何限制】

例子:restrict 192.168.31.0 mask 255.255.255.0 nomodify #允许网段:19

Read more

大数据~Hadoop3.3.1+CentOs7 分布式原创


简介

最近在接触大数据相关的项目,项目需求:Hadoop3.3.1 数据库 + CentOs7 环境部署,本着自以为很简单的心态开始部署,结果由于网上教程过于老旧,导致部署过程中查找资料较多,踩过的坑不计其数,本着技术共享的心态特将此次实际部署过程完整的发布出来,以便大家少走弯路,保证如果细心看完之后能够通过本篇文章一站式部署成功,不用在东奔西走去搜集各种资料和踩坑。 想要完全掌握一个新架构,就需要知其然再知其所以然,这样以便日后进行修改和维护,所以本文将从零开始直至完全部署完毕,细节和重点将给各位画出来。

一、Hadoop数据库是什么

Hadoop数据库是一个分布式框架数据库,属于非关系型数

Read more

如何在谷歌开发者工具中寻找元素的xpath路径


如何在谷歌开发者工具中寻找元素的xpath路径?

关于这个问题,有不少同学比较疑惑,这里录了几个小视频请同学参考:

取总页数方法取总页数方法

http://i.hddly.cn/media/0jZaWtmKEF.mp4

取数据项目中的名称

http://i.hddly.cn/media/9eedQaRsuz.mp4

Read more

加载webdriver异常的问题


原先脚本如下

def __init__(self):
        self.browser = webdriver.Chrome()
        self.browser.set_page_load_timeout(30)

Error:

D:\app\python3\python.exe D:/demo/musics/__init__.py
2021-12-15 22:58:10 [scrapy.utils.log] INFO: Scrapy 2.5.1 started (bot: musics)
2021-12-15 22:58:10 [scrapy.utils.log] IN

Read more

Python SSL证书验证问题解决方案


在requests访问https的站点时,如:

url = 'https://bigdata.hddly.cn/wp-content/plugins/captcha-code-authentication/captcha_code_file.php'
rqg = requests.get(url, headers=headers, proxies=proxies)

会报错:

raise SSLError(e, request=request) requests.exceptions.SSLError: HTTPSConnectionPool(host='bigdat

Read more

终端协议分析工具Fiddler


原视频: 进入

想要Fiddler抓取移动端设备的数据包,其实很简单,先来说说移动设备怎么去访问网络,看了下面这张图,就明白了

可以看得出,移动端的数据包,都是要走wifi出去,所以我们可以把自己的电脑开启热点,将手机连上电脑,Fiddler开启代理后,让这些数据通过Fiddler,Fiddler就可以抓到这些包,然后发给路由器(如图):

  1. 打开Wifi热点,让手机连上(我这里用的360wifi,其实随意一个都行)

  1. 打开Fidder,点击菜单栏中的 [Tools] –> [Fiddler Options]

  1. 点击 [Connections] ,设置代理端口是8888, 勾选

Read more

服务端与客户端保持连接的两种方式


服务端与客户端保持连接的两种方式

<EMBED src='https://haokan.baidu.com/v?vid=2634565104120722444&pd=pcshare' width=100% height=400px type=audio/mpeg loop='false'> </EMBED> 视频链接: 点击进入

Session方式

<EMBED src='https://haokan.baidu.com/v?vid=8229078867943883745&pd=pcshare' width=100% height

Read more

简单了解一下什么是Selenium


网络信息抓取技术任务2.2使用Selenium抓取网页,那什么是Selenium呢,下面我们简单了解一下: [1]什么是Selenium

<div align=center> <EMBED src='https://haokan.baidu.com/v?vid=2836932434457847496&pd=pcshare' width=100% height=400px type=audio/mpeg loop='false'> </EMBED></div>

<div align=center> <EMBED src='

Read more