我最终换PVE解决方案了! ESXi下面驱动的网卡有断流的情况。 家里之前的虚拟化解决方案是一台塔式的HP机器,虽然各方面都很强劲但是特别在夏天的时候,功耗高、音量高、温度高的三高问题,一直让我想去做点什么。 一直想找一款迷你主机,我的期待是,双网口,低功耗,大内存,优异性能,优良存储扩展的小主机。之前关注过因特尔NUC、MINISFORUM这两个主机都是不错的,但是要不然是价格、性能、网卡、内存…
10 Comments月度归档: 2022 年 11 月
尝试用netty写了个日志收集服务,类似于logstash的功能,因为我们才采集日志的时候可能有很多的策略要去做,logstash的功能不够支撑,所以尝试使用netty自己写。 看了一些netty的教程,大概是以下几个步骤 new两个 NioEventLoopGroup 一个是bossGroup,一个是workerGroup new一个ServerBootstrap 搞出来的对象暂且叫b b.gr…
Leave a Comment偶然机会需要用到Python来翻译资料,调研一番发现googletrans这个插件还不错。 安装好插件,尝试写了个demo 发现始终报错 最后查阅资料发现需要升级库的版本。。。 Hi guysThis problem has been solved in new version. please install 4.0.0rc1 versionpip install googletrans==4.0…
Leave a Comment在写爬虫时,使用python自带的json模块将网页中需要的信息输出保存到json文件中,发现json文件中的中文 格式全是类似于”\u5176\u5b83”的形式。可见该模块将输出的中文进行了 编码,将utf-8码直接变成了 ascii字符的形式。所以这些字符无法直接阅读。 要直接输出中文需要使用 json.dump()函数的 ensure_ascii=False选项。同时需要采用 codecs…
Leave a CommentWordPress网站一般会有开放的接口来获取网站元数据 参考:https://developer.wordpress.org/rest-api/reference/posts/ 例如这个样例网站:https://www.sonymusic.com/ 获取他们博客列表接口为: https://www.sonymusic.com/wp-json/wp/v2/posts 一般读接口都是不保护的,你直接…
Leave a Comment1.插件安装 需要安装一个WordPress插件,名字叫:JWT Authentication for WP-API 2.编写代码 首先你需要获取提交文档的一个token。 然后再用这个token来提交文档 参考资料:
Leave a Comment背景 一直非常喜欢一个网站 https://www.examples.com/,想着这个网站如果突然不在了可怎么办?就想着有什么办法能帮这个网站保存下来。 正好之前玩过Python爬虫,想着能不能帮网站爬下来,试试吧? 网站爬取 分析 我之前做爬虫一般需要分2步骤的,第一步是拿到要抓取目标站点的页面url,这一般都是独立算法的,第二步是抓取页面内容,然后分析页面内容拿到想要的数据。 获取完整网站地…
Leave a Comment背景 尝试抓取一个网站的资源做一些分析,发现直接curl或者Python的request请求下来的资源不对,用html打开发现是Cloudflare的一个保护页。有此可知这个网站是被保护了,一般的请求肯定是不行了。 方案 在进行很多尝试之后发现一个python库可以解决这个问题(cfscrape) ,这个库只支持python3+。 使用很简单,可以使用,但是我发现一个问题,用这个库请求到的页面居然…
Leave a Comment升级完idea之后,打开项目,很多包找不到,更新maven依赖,提示我:Could not transfer artifact com.xxx:1.7.2 from/to maven-default-http-blocker (http://0.0.0.0/): Blocked mirror for repositories: [libs-releases 大概意思是,一个叫 maven-defa…
Leave a Comment想装一个idea插件,发现插件各种报错。 查不到什么原因,看了下我的idea版本,还是2019年的,心想可能是我的版本太低了吧? 看了一眼官网已经出到 2022.2.3了。升级下idea呗? 下载官方最新版本,双击安装, 替换安装,安装完成,启动。。 闪退。。 启动。。。闪退。。。。 我滴妈,咋回事啊? 难道是我的操作系统版本不对? 升级下系统吧,我的Mac系统好像是有个大版本要升级。 花了半天升…
3 Comments