Hexo处理爬虫
经过观察，我的小破站居然有一堆的爬虫在搜集。说起来，我这个整站大小才33M，一天整站的流量大约1GB，光Google的爬虫居然能有七八百兆的流量。也不知道它们都在干嘛。 2024.10 山西大同·云冈石窟内的一群鸭鸭 软约定Hexo本身输出的是一堆静态HTML页，其渲染生成的目标文件夹public下的内容是会被清空，然后再生成当期新的内容。所以，类似wordpress之类动态网站根目录直接丢robots.txt来组织官方爬虫的行为是不行的。 123456789101112131415161718192021222324252627282930313233343536# 创建robots.txttouch blog/source/robots.txt# _config.yml配置渲染豁免skip_render:- "robots.txt"# 指定robots.txt内容User-agent: GooglebotUser-agent: AdsBot-GoogleUser-agent: BaiduSpiderUser-agent: YisouSpiderUse...
Hexo升级迁移
现有的Hexo架构已经用了三年年，随着Nodejs、hexo和theme-butterfly的大版本升级，现有的系统也该update一下了。基本情况是系统从RockyLinux9换成了Fedora，Nodejs由18升级到21，Butterfly主题由4.2升级到了5.2，Hexo也升级到了7.3。 2024.09.30 摄于内蒙古·呼和浩特市·泽成冰煮羊 基础软件 操作系统软件使用Fedora 40 1234dnf update -ydnf install -y wget curl htop fail2ban rsyslogmkdir -p .config/htoptouch .config/htop/htoprc 部署Nginx 1234567891011121314151617181920212223242526272829303132333435363738394041424344454647484950dnf install -y wget curl nginx dnf install -y netdatasystemctl enable --now nginxs...
煤海浮影
这次国庆期间，有幸再次拜访了大同。除了云岗石窟、古城墙、刀削面和晋式火锅外，还去了晋华宫的煤矿博物馆。它的正式名称为晋华宫国家矿山公园，就在云岗石窟正对面，车程大概十五分钟左右，就在一篇矿工家属区的后面。这个景点就是同煤集团下属一个老矿场改建而来，在改建之时还在生产出煤。 2024.10 山西大同·云岗 晋华宫到处都是煤炭元素，甚至给儿童玩耍的秋千就是拿矿工日常上下班的猴车改造的。其最主要的景点就是它的井下游览，这个是全国唯一一个正在生产之中的矿道改建的煤炭博物馆。门票价格为85元，不分男女老幼，统一价格85元。另外，游览还必须要支出5元的导游讲解费，这个会有小姐姐组织带领游览。“上工”需要先乘坐小火车从地面下降一百多米才能到坑口，期间巷道的四壁还在不断冒水。导游的小姐姐表示这都是正常的地下水渗漏，一直有水泵在排水和通风。井下展示了大量的煤矿生产科普资料和设备。该矿井自1950年代开始采掘，大跃进事情是同煤重点矿，后来复原了很多当时的井下场景。这个是在煤炭开采期间于生产煤层中发现的完整的树木化石。这个是展示了当年使用木制支护是进行加固的场景。整个矿场的巷道总长二十多公里，现...
面试题目
如何防止数据丢失在数据存储管理中，防止数据丢失和最小化故障损失需要从预防措施、实时监控、快速响应机制和容灾备份多个维度构建完整的数据保护体系。以下是结合华为存储设备的详细策略： 一、预防措施：从源头降低数据丢失风险1. 冗余架构设计 RAID级别优化 避免使用RAID 0（无冗余），优先选择RAID 6（允许双盘故障）或RAID 10（高性能+冗余）。 华为存储支持智能RAID 2.0+技术，可将物理硬盘划分为更细粒度的块（CK），提升重建效率。 多副本与纠删码（EC） 针对分布式存储（如OceanStor Pacific），启用多副本（如3副本）或EC（如8+4），容忍节点级故障。 2. 数据保护技术 快照（Snapshot） 定期为关键业务LUN/文件系统创建快照（如每小时一次），保留最近24小时快照。 华为存储支持秒级快照，通过“差分位图”技术减少性能影响。 克隆与远程复制 使用HyperClone创建完整数据副本，用于开发测试或应急恢复。 配置HyperReplication（异步/同步）将数据复制到异地容灾...
网络安全等级保护定级、测评、实施与运维
等级保护制度是适用于中国当前实际的一种有效的网络安全管理方法。开展信息安全等级保护工作是保护信息化发展、维护国家信息安全的根本保障，是信息安全保障工作中国家意志的体现。 2024.09 山西大同 云岗石窟 信息安全法律法规及标准规范网络安全法律政策体系法律 中华人民共和国宪法 中华人民共和国刑法 中华人民共和国国家安全法 中华人民共和国网络安全法 中华人民共和国密码法 中华人民共和国保守国家秘密法 中华人民共和国电子签名法 行政法规 中华人民共和国计算机信息系统安全保护条例 中华人民共和国计算机信息网络国籍联网暂行规定 商用密码管理条例 计算机软件保护条例 规章、地方性法规以及规范文件 计算机病毒防治管理办法 计算机信息系统保密管理暂行规定 计算机信息系统安全专用产品检测和销售许可证管理办法 网络安全标准系统基础标准 计算机信息系统安全保护等级划分准则 GB17859-1999 信息安全技术 网络安全等级保护实施指南 GB/T 25058-2019 系统定级标准 信息安全技术 网络安全等级保护定级指南 GB/T 22240-2020 信息安全技术...
系统规划与管理-进阶
2024.10 摄于北京朝阳·国贸地铁站 IT服务规划设计规划涉及处于整个IT服务生命周期的前端，帮助IT服务提供方了解客户需求并进行全面需求分析，然后通过服务要素、服务模式和服务方案的具体设计，最终形成SLA。其主要目的在于： 设计满足业务需求的IT服务 设计SLA、策略方法和指标 设计服务过程及其控制方法 规划服务组织架构、人员编制、岗位及任职要求 识别风险，定义风险控制措施和机制 识别和规划支持服务所需的技术及资源 评估IT服务成本，制定服务预算，控制服务成本 制定服务质量管理计划 IT服务规划设计活动规划设计的活动 服务需求识别 服务目录设计 服务方案设计 服务模式设计 服务级别设计 人员要素设计 过程要素设计 技术要素设计 资源要素设计 服务成本评估 服务级别协议设计 关键成功因素 确保规划设计考虑全面 当服务变更或补充规划设计的任一独立元素时，要综合考虑有关职能、管理和运营层面问题 明确重点，充分沟通 策划、实施、检查和改进(PDCA) 服务目录管理目的 为所有商定服务提供单一、连贯的信息来源 确保所有获准使用相关服务的人能够知道这些信息 种类 业...
系统规划与管理-基础
2024.07 摄于北京朝阳花家地·中央美院·毕业作品展 信息系统综合知识信息的定义和属性 信息就是能够用来消除不确定性的东西。 信息的基本概念 本体论 认识论 香农的信息熵公式 信息的传输模型 信源 信宿 信道 编码器 译码器 噪声 信息的质量属性 精确性 完整性 可靠性 及时性 经济性 可验证性 安全性 信息化信息化是推动经济社会发展转型的历史过程。综合利用各种信息技术，改造、支撑人类的各项政治、经济、社会活动，并把贯穿于这些活动中的各种数据有效、可靠的进行管理，经过符合业务需求的数据处理，形成信息资源，通过信息资源的整合、融合，促进信息交流和知识共享，形成新的经济形态，提高经济增长质量。 产品信息化 企业信息化 产业信息化 国民经济信息化 社会生活信息化 信息化的主体是全体社会成员，是一个长期的过程，包含社会的一切领域，手段是基于现代信息技术的先进社会生产工具，途径是创建信息时代的社会生产力，推动社会生产关系及社会上层建筑的改革，目标是使国家综合实力、社会的文明素质和人民的生活质量全面提升。 我国信息化的短板： 缺乏核心技术 信息资源开发利用不够 信息基...
「控制论与科学方法论」
最伟大的东西是世界上最简单的东西，它和你自己的存在一样简单 2019.9 摄于北京大兴国际机场 控制与反馈可能性空间控制论和系统论的研究开始于可能性空间。世界上许多事物并不是从一开始就注定要发展成现在这个样子的。在事物发展的初期，它们往往有多种发展的可能性，由于条件或者存粹机遇的关系，最终才沿着某个特定的方向发展下去。 控制论是关于控制的理论： 被控制的对象必须存在多种发展的可能性 人可以在被控制的对象的多种发展可能性中进行选择 控制的概念与事物发展的可能性密切相关。我们将事物发展变化中面临的各种可能性集合称为这个事物的可能性空间。 人通过选择改造世界事物变化具有不确定性，也就是事物的矛盾性。事物的矛盾性，使事物的可能性空间至少面临着肯定自身和否定自身的两种状态。从不确定性的角度来看待事物的发生和发展，是现代科学和经典决定论的一个重要区别。现代科学已经不再仅仅处理那些必然发生的事情，而是处理那些最有可能发生的事情。 控制，归根结底是一个在事物可能性空间中进行有方向的选择的过程。因此，一切的控制过程，实际都是由三个基本环节构成： 了解事物面临的可能性空间是什么 在可...
简述HPC
高性能计算 (HPC:High Performance Computing) 是一种利用强大处理器集群并行处理海量多维数据集（也称为大数据）并以极高速度解决复杂问题的技术。 几十年来，超级计算机（搭载数百万个处理器或处理器核心的专用计算机）一直是高性能计算的关键。如今，越来越多的组织在托管在本地或云端的高速计算机服务器集群上运行 HPC 服务。HPC 工作负载揭示了重要的新洞察分析，推动了人类知识的进步，并创造了显著的竞争优势。例如，HPC 用于 DNA 测序、自动化股票交易，并运行人工智能 (AI) 算法和模拟（例如自动驾驶汽车），实时分析来自物联网传感器、雷达和 GPS 系统的 TB 数据流，以做出瞬间决策。 2024.08 摄于山东济南 马路边一个树枝长得特别舒展的行道树 HPC的内容主要包括： 大规模并行计算 并行计算在多台计算机服务器或处理器上同时运行多个任务。大规模并行计算是利用成千上万至数百万个处理器或处理器内核进行并行计算。 计算机集群（也称 HPC Cluster） HPC Cluster 由多台联网的高速计算机服务器组成，并配备用于管理并行计算工作负...