Posts

最近需要频繁的在datacamp上完成课程作业，而datacamp的视频加载特别慢，如果能够将视频打包下载就好了。因此尝试在之前写的go爬虫的基础上增加下载datacamp视频以及字幕的功能。 ...

在实际使用中，需要编写java程序来执行hadoop中的运算任务。为了方便调试代码，使用IDEA来编辑，本机的hadoop环境是在docker中运行的，如果可以用IDEA连接hadoop环境，直接显示代码在hadoop集群中的运行结果，就会比较方便。 ...

之前用Caddy的时候觉得特别容易上手,最近稍微修改了一下服务器,重新部署网站,发现还是踩了很多坑.Caddy已经出了2.0了,尝试过使用一次但文档实在是太少了,也不知道怎么部署,而1.0的维护也看起来不太行,讨论的人也不多的样子. ...

这个学期正好选了hadoop的课程，也是第一次接触分布式运算的概念，感觉真是特别新鲜。由于条件限制，没有那么多机器可以用来搭建集群，因此只能在单机上进行，为了模拟多个节点，可以使用docker.本次的目标是搭建一个namenode,两个datanode. ...

现在是2020年的2月中旬，虽然现在疫情的导致返校时间不断延长，但是马上就要在线上课了，假期也算是快结束了。非常抱歉的是假期开始（也就是一个月前）定的许多计划都没有完成，其中就包括我们kcoin小组的上链工作。今天刚准备上手的时候发现了官方出了2.0的正式版本，就想尝试一下从头开始安装配置。let’s go! ...

最近在进行小组项目的过程中需要进行数据处理，尤其是数据的清洗整理，再次过程中发现了linux的几个命令行下的文本处理工具（awk、sed等）真的特别好用，即使是大文件处理起来也非常高效，之前也使用过，但一般是需要用什么就搜索什么，这次整理一下常用的或者非常好用的命令以供以后参考。 ...

由于小组项目需要搭建api接口，实现数据库的查询功能，在网上搜索了一下准备使用比较容易上手的strapi（gin不好意思你看起来有点难）来搭建，先在本机上调试最后部署到服务器。 ...

github pages可以用来搭建自己的个人网站，所有的网页文件存储在自己的github仓库中，十分方便轻量，而且还可以进行版本控制。另外，目前几种主流的博客框架如jekyll、hexo、hugo等都比较成熟，可以制作出很美观的个人网站。之所以选用hugo是因为安装比较方便。 ...

之前尝试过在Windows环境下配置LaTex，一直没有成功，用起来也不太方便。后来使用的在线LaTex编辑器overleaf（它和sharelatex好像已经合并了），用起来也很方便，但网速有点慢，有时候还有点卡壳，好久没用了也不知道现在改善了没有。LaTex排版给我的感觉就是非常简洁规范，看起来赏心悦目，beamer制作的ppt也很好看。有加上最近有使用LaTex的需求（没错，美赛我又来了），就决定尝试在主力机上配置LaTex，TeX发行版使用的是Tex Live，编辑器选用的是VS Code，我觉得它特别适合写一些前端的东西，而且同步github也比较方便。 ...

最近几天被重装系统快整疯了，什么工作都没有完成，一开始是原来的Arch Linux用的好好的卸载了个软件就不能进入系统了，命令行模式都不行，我一直怕滚动更新滚炸了所以基本上就不更新，结果还是莫名其妙就坏了，有点怀疑自己是不是不应该逞强用Arch，因为感觉它的社区年轻有活力，而且软件包特别全，基本上官方+aur就啥都有，但是自己又懒得参与社区讨论，基本上就没啥debug能力。 ...