univerone

Hugo Zzo Theme

Sun, 19 Jan 2020 21:13:42 +0900

Make a blog with hugo zzo theme!

Hugo zDoc Theme

Sun, 19 Jan 2020 21:13:42 +0900

Make a documentation with hugo zdoc theme!

常用的Shell命令

Tue, 26 Sep 2023 14:39:03 +0800

最近在看“The Missing Semester of Your CS Education”这个公开课，内容不算太难，不讲编程语言或者理论，而是讲解怎样能够构建更加便利的编程环境，如何使用像shell,git, gdb这些工具，可以当作一种查漏补缺。我才看到前两节课，主要讲shell scirpt的编写和简单的linux命令，也比较有启发，所以用这个博客记录下来。

Latex排版的技巧记录

Wed, 05 Aug 2020 22:00:28 +0800

我在2017年的时候第一次接触Latex，从当时到现在都只会使用现成的模板来写文档，安装也麻烦，修改也麻烦，overleaf也麻烦（网速也不好，编译的时候总会突然的crash），综合起来它给我的印象就是两个字———“麻烦”。年少轻狂的时候用Latex写实验报告觉得蛮拉风，到后来更喜欢用markdown来写各种笔记。然而Latex的排版以及生成PDF的方便还是非常诱人滴，最近因为需求又开始重拾Latex排版了，并且需要自己修改样式，因此记录一下学到的东西。

使用Github Action进行自动部署

Fri, 24 Jul 2020 14:46:26 +0800

最近接触了“持续集成”的概念，就是代码提交之后的自动化测试、打包、部署等工作，github actions就是一个持续集成的工具，给代码托管在github上的开源项目带来了便利。我的需求是依据多个markdown文档生成pdf文件，为了排版需要使用sphinx、pandoc以及LATEX环境，部署环境比较复杂，因此尝试使用github actions。

使用ImageMagick处理图片

Sun, 19 Jul 2020 12:52:07 +0800

上一篇文章制作每日一句插件的过程中，使用了 ImageMagick 来自动生成打卡图片，其生成速度较快，而且命令行参数很多，作为一个开源的命令行图像处理工具，本篇博文来挖掘一下更多的用法，为了活学活用，插图均由 ImageMagick 来进行生成。

FFmpeg处理视频的常见用法

Sun, 12 Jul 2020 07:51:15 +0800

20200713更新：这篇博文写于去年，最近进行了较大的调整重新发布。

FFmpeg是一个用处极为广泛的开源视频以及音频工具，官网上的介绍是“A complete, cross-platform solution to record, convert and stream audio and video.”，正如其言，很多下载、转码、剪辑音视频的软件都将FFmpeg作为基础的组成部分。FFmpeg的主要工具有ffmpeg,ffprobe以及ffplay，最近在处理音视频文件时经常用到ffmpeg，惊讶于其功能的强大，遂写下此博文来记录一下常用的基础操作。

typescript版每日一句插件

Thu, 09 Jul 2020 21:37:08 +0800

最近的任务是写一个每日一句的wechaty插件，目前的构思是先使用padplus token写出typescript版本的插件，之后再写python版本的，正好今天看到了很棒的参考项目，因此希望能迅速搭建一个简单的项目框架出来，再予以完善。

关于个人网站页面优化的二三记录

Fri, 03 Jul 2020 22:10:01 +0800

最近在搞博客的优化，真的是非常折腾了，审美也在不断的变化，总体上来说还是收获很多的，在此记录一下自己的一点心得。

Python Wechaty简单体验

Tue, 23 Jun 2020 09:51:18 +0800

最近接触了自动化微信机器人的开源项目wechaty，跟其他的微信机器人框架不同，它可以支持ipad以及windows客户端模拟登录，主要体现在puppet以及token上面（当然这一块的具体理论我自己还没有搞懂），目前就简单记录一下如何启动python wechaty项目吧。

ubuntu服务器部署Hadoop以及Hive环境

Sun, 21 Jun 2020 20:26:23 +0800

最后一次hadoop作业与hive有关，在本地部署需要安装的东西很多比较麻烦，因此在服务器上练习一下相关环境的配置。

Deepin Linux安装常用软件

Sun, 21 Jun 2020 19:34:20 +0800

最近又开始折腾重装系统了，这次尝试了据说颜值很高的deepin，装完之后发现确实很好看，而且还能运行微信和QQ，满足了。因为后来装Nvidia驱动又进入不了图形界面了，所有又重新安装了一遍，这次就记录一下我在deepin上安装的软件吧。

Datacamp课程资料解析

Fri, 20 Mar 2020 11:27:52 +0800

最近需要频繁的在datacamp上完成课程作业，而datacamp的视频加载特别慢，如果能够将视频打包下载就好了。因此尝试在之前写的go爬虫的基础上增加下载datacamp视频以及字幕的功能。

在Docker中的Hadoop环境进行调试

Thu, 27 Feb 2020 10:29:16 +0800

在实际使用中，需要编写java程序来执行hadoop中的运算任务。为了方便调试代码，使用IDEA来编辑，本机的hadoop环境是在docker中运行的，如果可以用IDEA连接hadoop环境，直接显示代码在hadoop集群中的运行结果，就会比较方便。

Caddy网站部署踩坑记

Sat, 22 Feb 2020 10:55:57 +0800

之前用Caddy的时候觉得特别容易上手,最近稍微修改了一下服务器,重新部署网站,发现还是踩了很多坑.Caddy已经出了2.0了,尝试过使用一次但文档实在是太少了,也不知道怎么部署,而1.0的维护也看起来不太行,讨论的人也不多的样子.

使用docker在单机上搭建hadoop集群

Wed, 19 Feb 2020 16:42:56 +0800

这个学期正好选了hadoop的课程，也是第一次接触分布式运算的概念，感觉真是特别新鲜。由于条件限制，没有那么多机器可以用来搭建集群，因此只能在单机上进行，为了模拟多个节点，可以使用docker.本次的目标是搭建一个namenode,两个datanode.

Hyperledger Fabric 2.0 尝鲜安装配置

Wed, 12 Feb 2020 11:52:22 +0800

现在是2020年的2月中旬，虽然现在疫情的导致返校时间不断延长，但是马上就要在线上课了，假期也算是快结束了。非常抱歉的是假期开始（也就是一个月前）定的许多计划都没有完成，其中就包括我们kcoin小组的上链工作。今天刚准备上手的时候发现了官方出了2.0的正式版本，就想尝试一下从头开始安装配置。let’s go!

几个非常好用的文本处理工具的简单用法（持续更新中）

Fri, 07 Feb 2020 12:14:36 +0800

最近在进行小组项目的过程中需要进行数据处理，尤其是数据的清洗整理，再次过程中发现了linux的几个命令行下的文本处理工具（awk、sed等）真的特别好用，即使是大文件处理起来也非常高效，之前也使用过，但一般是需要用什么就搜索什么，这次整理一下常用的或者非常好用的命令以供以后参考。

使用strapi搭建api接口

Fri, 31 Jan 2020 14:32:41 +0800

由于小组项目需要搭建api接口，实现数据库的查询功能，在网上搜索了一下准备使用比较容易上手的strapi（gin不好意思你看起来有点难）来搭建，先在本机上调试最后部署到服务器。

使用github pages及hugo创建个人网站

Mon, 27 Jan 2020 11:46:50 +0800

github pages可以用来搭建自己的个人网站，所有的网页文件存储在自己的github仓库中，十分方便轻量，而且还可以进行版本控制。另外，目前几种主流的博客框架如jekyll、hexo、hugo等都比较成熟，可以制作出很美观的个人网站。之所以选用hugo是因为安装比较方便。

manjora下Texlive+VS Code安装配置

Tue, 21 Jan 2020 09:47:12 +0800

之前尝试过在Windows环境下配置LaTex，一直没有成功，用起来也不太方便。后来使用的在线LaTex编辑器overleaf（它和sharelatex好像已经合并了），用起来也很方便，但网速有点慢，有时候还有点卡壳，好久没用了也不知道现在改善了没有。LaTex排版给我的感觉就是非常简洁规范，看起来赏心悦目，beamer制作的ppt也很好看。有加上最近有使用LaTex的需求（没错，美赛我又来了），就决定尝试在主力机上配置LaTex，TeX发行版使用的是Tex Live，编辑器选用的是VS Code，我觉得它特别适合写一些前端的东西，而且同步github也比较方便。

Manjora安装Nvidia驱动血泪史

Tue, 17 Dec 2019 21:47:01 +0800

最近几天被重装系统快整疯了，什么工作都没有完成，一开始是原来的Arch Linux用的好好的卸载了个软件就不能进入系统了，命令行模式都不行，我一直怕滚动更新滚炸了所以基本上就不更新，结果还是莫名其妙就坏了，有点怀疑自己是不是不应该逞强用Arch，因为感觉它的社区年轻有活力，而且软件包特别全，基本上官方+aur就啥都有，但是自己又懒得参与社区讨论，基本上就没啥debug能力。

Hyperledger Fabric 1.4.4的环境配置

Tue, 17 Dec 2019 18:15:48 +0800

最近在kcoin小组里参与智能合约的部分，需要用到Hyperledger Fabric,之前在环境配置这里一直卡了好久，所以想把整个过程记录下来，为之后环境重装做一个参考。

go实战一：爱课程网视频以及课件爬虫

Mon, 23 Sep 2019 14:29:09 +0800

最近在上《离散数学》课程，听说屈婉玲老师的讲的三学期的《离散数学》更为系统、全面，在网上搜索了一下，爱课程网站保留了该课程的课堂视频以及课件，想下载下来以供参考。

最近正好接触go语言，因此我想尝试一下最近刚刚学习的go 语言来进行爱课程的爬虫，达到我期望的带目录结构的下载效果同时能够实现并发下载达到较好的下载速度。

hugo博客使用git talk评论系统

Tue, 13 Aug 2019 15:33:58 +0800

又到了闲着没事美化博客的时间啦，之前一直用的评论系统是hugo默认的disqus,虽然还没有收到一个评论，偶尔看到别人的博客有用git talk做评论的,也想尝试一下（或许也可以试一下来必力呢）

Archlinux安装以及常用软件推荐

Mon, 12 Aug 2019 19:01:59 +0800

又回到Arch Linux的巨坑了，犹记得两年前第一次接触到Arch Linux的时候光是安装就用了好几天才稿明白，才弄出能用的图形界面，后来滚动更新还是滚坏了。但是 arch 的优点就是软件包特别多、更新快，安装起来也很方便，所以最近又用回arch啦，这次安装比较顺利，也配置好了喜欢的桌面环境。

linux更改默认python版本

Mon, 29 Jul 2019 09:32:48 +0800

大部分linux发行版默认的python版本为2.7,然而在使用时经常会遇到提示“DEPRECATION: Python 2.7 will reach the end of its life on January 1st, 2020. Please upgrade your Python as Python 2.7 won’t be maintained after that date. A future version of pip will drop support for Python 2.7.
”，而且python3的部分语法与python2不兼容，因此将python默认版本切换到python3.6是非常有必要的。

[Python爬虫系列]3— scrapy采集AKC网站犬类图片

Wed, 13 Mar 2019 19:26:37 +0800

Scrapy是一个比较成熟的爬虫框架，可以用来进行大规模爬虫。好久没用过啦，也想再回顾一下。本项目使用Scrapy下载AKC（AMERICAN KENNEL CLUB,美国养犬俱乐部）网站上的所有犬类图片，想自己制作一个每天定时发布微博的素材。

Docker的基本使用

Fri, 08 Mar 2019 22:19:20 +0800

Docker 可以让开发者打包他们的应用以及依赖包到一个轻量级、可移植的容器中，然后发布到任何流行的 Linux 机器上，也可以实现虚拟化。
容器是完全使用沙箱机制，相互之间不会有任何接口（类似 iPhone 的 app）,更重要的是容器性能开销极低。
之前安装tensorflow时尝试了在docker下安装，程序运行在一个独立的环境里，感觉上相当于一个虚拟机。这篇博客记录了使用docker打包程序以及下载到主机上运行的全过程，

Python Conda使用

Fri, 08 Mar 2019 11:32:37 +0800

Conda 是为 Python 程序创建的一个开源的软件包管理系统和环境管理系统，用于安装多个版本的软件包及其依赖关系，并在它们之间轻松切换。Anaconda 是一个用于科学计算的 Python 发行版，支持 Linux, Mac, Windows, 包含了众多流行的科学计算、数据分析的 Python 包。
Miniconda 是一个 Anaconda 的轻量级替代，默认只包含了 python 和 conda。本文简单介绍centos7 下conda的安装（miniconda）以及简单使用。

[Python爬虫系列]2— 信息采集自动发微博

Thu, 07 Mar 2019 19:22:47 +0800

几个月之前就有做这个项目的想法，自动采集数据并推送。折腾和调试了很久终于有了下面这个半成品，之所以说是半成品是因为这个程序在没有图形界面的服务器还是运行不了（就是新浪微博的验证过不了），而且主要适用于等级较高的微博帐号。
数据采集其实也不难，主要难点是微博的模拟登录（使用selenium以及chrome），所以本文章主要介绍这一部分。

百度云下载限制破解

Tue, 05 Mar 2019 13:55:16 +0800

现在很多资料都是上传到百度云里进行加密下载，以前用百度云还可以直接下载小文件（不用登录），现在好像都必须通过百度云软件以及会员才能有正常的下载速度，真的不太方便（其实上传到github就很好呀）。所以这篇博客记录一下亲测可用的百度云文件下载方法。

Wordpress简易建站教程

Thu, 28 Feb 2019 17:11:26 +0800

目前这个网站使用的是hugo来建站，用起来也很简单方便，可是原生的拓展功能不够多（当前我自己写博客用就很方便），如果想要实现更加复杂的功能的话可能还是需要其它的建站工具——比如说wordpress。

WordPress是网络上最流行的博客系统，允许从其后端CMS和组件更新，自定义和管理网站。之前一直使用wordpress来建站，后来又想换一个简单一点的建站系统就换用hugo了。最近想做一个项目，所以就重新上手wordpress啦。

使用FTP下载上传文件

Sun, 24 Feb 2019 18:19:23 +0800

FTP是文件传输协议（File Transfer Protocal）的简写，主要完成与远程计算机的文件传输。FTP采用客户/服务器模式，客户机与服务器之间利用TCP建立连接，客户可以从服务器上下载文件，也可以把本地文件上传至服务器。

在实际生活中，很多文件（尤其是大文件）需要通过FTP进行下载，所以熟练掌握一些基本的FTP使用方法是很有必要的。

[Python爬虫系列]1— 音乐平台外链以及歌词提取

Tue, 12 Feb 2019 16:45:23 +0800

20200624更新
之前准备网站背景音乐的时候，需要提供音乐的播放链接（同时也可以下载音乐）以及相关的歌曲信息，而主流的音乐平台一般并不提供外链，而网上的一些文章里提供的提取外链方法大多已经失效（尤其是qq音乐等安全性较高的平台）。本文章整合了四个主流音乐平台的音乐外链以及歌词的提取方法，并亲测可用。另外，非批量提取音乐外链可以使用一个非常万能的工具：https://music.liuzhijin.cn/

使用Git以及Github进行版本控制

Mon, 11 Feb 2019 23:14:54 +0800

git是一个很好用的版本控制系统，使用它可以很好的完成项目的多人协作、版本恢复等任务。本博客的源代码就是保存在github里进行本地到远程服务器的同步的，本篇博文记录一下常见的git命令以及git与github交互，也是方便自己使用啦。

hugo博客增加音乐插件以及RSS订阅

Thu, 31 Jan 2019 17:02:40 +0800

一直以来我都很想给自己的博客修饰一下，通过更改hugo模板的css文件给网站增加了背景，变得好看了一些。

以前用wordpress建站的时候可以给网站安装很多插件来实现复杂的功能，而hugo则没有这些插件，但存在好用的template功能来实现自主添加功能。

此次使用aplayer这个html5播放器给网站增加音乐播放功能。

NCBI-BLAST安装与配置

Fri, 21 Dec 2018 10:40:17 +0800

BLAST全名 Basic Local Alignment Search Tool，是一个非常有名的生物学工具，可以用来进行多序列比对，如果是简单的使用网页版（https://blast.ncbi.nlm.nih.gov/Blast.cgi）
就够了，但很多生物信息学工具都需要NCBI-BLAST作为依赖软件进行安装。
本文就简单介绍以下基于官网教程的NCBI-BLAST的安装以及所需数据库的建立，基本使用的话可以参考最下方的参考中的中文教程。

php-resque+Redis搭建web server的任务处理消息队列

Wed, 19 Dec 2018 00:00:00 +0000

在建立web server提供在线的数据处理服务时，如果默认在后台处理（把表单提交给jsp或者php文件），那么整个处理过程完成后用户才能关闭页面，这对于处理时间较长的web server来说非常不实用。

这时候可以用php-resque来建立一个任务处理的消息队列，用户提交表单后，表单的数据存入数据库，生成任务ID以及特定的结果界面。用户可以将结果界面收藏，一段时间后再查看任务完成后自动更新的结果。

基本思想：
用户提交表单，将序列信息提交到数据库里，生成任务ID以及进行中的空html文件，然后进行处理，处理完成后将结果传回空的html界面中。

CentOS7 Tensorflow GPU开发环境配置

Thu, 13 Dec 2018 16:18:55 +0800

之所以安装centOS7，也是因为它支持CUDA10.0. 之前一直听说过tensorflow和GPU编程，也一直没有机会实践。
现在就尝试一下搭建支持GPU的tensorflow的环境吧。

linux下设置每日更新的bing壁纸

Thu, 13 Dec 2018 00:00:00 +0000

20190308更新
bing已经停止维护每日故事的接口

装了新的系统就总想折腾一下好看的桌面，一直都很喜欢bing网站上每日更新的图片，所以就像把这个爬下来做每日壁纸，windows和部分linux发行版都有已经开发的软件可以实现，在网上也有很多API可以直接调用。我找到了一个加水印版本的代码改动了以下就能很好的运用，还可以抓取每日的壁纸背后的故事,虽然这个加水印确实有些难看，我也不知道也什么用。

CentOS安装配置

Wed, 12 Dec 2018 00:00:00 +0000

之前从来没有尝试过CentOS linux,之所以用这个系统一方面是想装CUDA 10.0，另一方是尝试以下Red Hat系的系统。安装过程十分方便，把DVD版本的景象写入U盘即可（我推荐一个工具rufus，以dd形式写入就行），之后就是图形化的安装界面了，本文主要介绍一些安装后个人喜欢的软件和配置。

caddy hugo git部署博客系统

Tue, 11 Dec 2018 00:00:00 +0000

Caddy 存在的意义在于不需要繁琐的编译 Nginx、Apache，只需要运行 Caddy 就完成了 HTTP 服务器的搭建，如果你有自己的域名，还能自动配置 Let’s Encrypt 实现 HTTPS 加密，使用的是 HTTP/2 协议.

gentoo linux 安装平铺式桌面-awesome

Mon, 29 Jan 2018 00:00:00 +0000

20190729更新

现在已经脱了gentoo linux的坑啦，还是不太适合作主力工作的系统

很不幸，之前重装了gentoo linux系统，完事具备，只差Xorg-server，无论如何，startx总是不成功，错误原因有“no screens found”，不得已从头开始装。gentoo linux安装还是比较难的，而且更新和维护也比较复杂，所以不建议刚接触linux的同学使用。

树莓派无显示器安装系统

Mon, 29 Jan 2018 00:00:00 +0000

本文主要介绍对于没有显示器的树莓派3B进行系统安装的过程。

About Me

Mon, 01 Jan 2018 00:00:00 +0000

自我介绍

Mon, 01 Jan 0001 00:00:00 +0000