博文

CharlesTermux发布，谈谈命令行神器Termux

-
最近我的平板被我重置了，发现重新安装好多包好麻烦，所以弄了一个和 CharlesScripts 一样的东西，区别在于这里面功能减少了一些，所以可以写安装脚本了。里面做了一个一键安装脚本，直接一键用上我的配置。 网址在这里： https://github.com/the0demiurge/CharlesTermux Termux简介 Termux有点像一种Linux发行版（当然不是），使用apt作为包管理器，只支持很有限（却很够用）的部分软件，支持ssh（或者作为ssh服务器），可以用python写代码（虽然好多库都装不上），可以写c语言（有clang编译器和gcc，当然gcc要费点力气才装的上），甚至texlive和graphviz都有。 如果出差的话，可以用安卓平板做紧急开发了，配上realvnc，加上罗技的k380蓝牙键盘，能作为超级本的廉价替代品了。 题外话，上个学期我跨校区上课的时候，用它写论文，很给力。 部署方法 运行命令： apt update;apt install -y curl;bash -c "$(curl -fsSL https://git.io/vdUkk)" 功能 自动解决powerline字体等问题，安装fish，omf，tmux，ipython并配置主题，添加源，可以用apt装scipy，numpy，octave等。 可以自动备份安装列表，fork本项目之后可以将你自己维护的列表上传到自己的github。 关于快捷键 我常用的是以下几个功能： 音量键+和Q一块按，会出现一条常用按键。  把这个黑条向左滑，会出现一个输入框，便于粘贴和编辑。 把屏幕向左/向右滑动可以切换终端
发表评论
阅读全文

[已失效] OpenShift v3 如何自定义域名

-
图片
经过好几天的探索找到了问题的解决办法，例子请看我的网站 ss.pythonic.life 用一句话来说，就是在 OpenShift 的后台增加一条路由，指向你的域名。 具体步骤： 在选择网页界面登陆之后 Open Web Console，选择你的项目 在左侧选择 Applications，选择 Routes 3. 选择右上角的 Create Route，把 Hostname 改成你想用的域名就可以了 4. 在你的域名提供商设置好 CNAME 记录，其中目标为 OpenShift 默认的域名 如果我的回答帮到了你，不妨 Star/Fork/Code Review 一下 这个我放在 OpenShift 上的小网站项目
发表评论
阅读全文

深度学习服务器使用指南（三）：如何让终端里面的任务一直运行

-
简介： 如果你用ssh连到远程服务器跑任务，如果连接断开或者本地电脑关机，那这个任务进程是会被kill掉的。为了避免这种问题，我将在这里介绍3个方法。 1. ssh 在上一篇指南里提了一下，用ssh的T参数： ssh user@host -T "command" 可以提交一个命令之后断开连接，在服务器开一个进程一直跑任务，用起来当然不是很方便，而且有的软件也不支持这么提交，但是不需要配置或者安装特殊的软件。 2. vnc 在第一篇指南中配置好 vnc 之后，可以在 vnc 里面进行各种操作，事后断开 vnc 的连接也没关系。当然，当 vnc 服务器关闭的时候，之前打开的所有软件包括任务都会被 kill 。 3. tmux 当你只想用ssh连接服务器，可以使用 tmux 进行操作。 tmux 可以随意断开连接，再重新连回去，类似于 vnc 吧，优点在于只需要终端操作。     操作指南： 启动tmux：$tmux 断开连接：Ctrl+b, 按完组合键之后按d 重新连接：首先，输入 tmux ls 查看已经打开的会话；找到想要连接的会话之后输入 tmux attach -t <会话名称> 就连回去了。其中，第一个会话的会话名称为 “0”, 那么直接 tmux attach -t 0 就能连接回来第一个会话，其他的以此类推。
发表评论
阅读全文

Cross-Entropy Method (CEM, 交叉熵方法) 与强化学习

-
前言 之前阅读 Deep Reinforcement Learning: Pong from Pixels 的时候 ， 作者在文中最后提到“ One should always try a BB gun before reaching for the Bazooka. In the case of Reinforcement Learning for example, one strong baseline that should always be tried first is the  cross-entropy method (CEM) , a simple stochastic hill-climbing “guess and check” approach inspired loosely by evolution. ” （如果你做强化学习，就应该先用最原始的方法即CEM先测试一下，当然试验结果也可以充当benchmark进行对比。） 由于（居然）没找到相关的中文资料，我就来简要介绍一下吧。 简介 交叉熵方法是一种蒙特卡洛方法，主要用来优化和重要性采样。和进化算法类似，在空间中按照某种规则撒点，获得每个点的误差，再根据这些误差信息决定下一轮撒点的规则。交叉熵方法之所以叫这个名字，是因为该方法（从理论上来说）目标是最小化随机撒点得到的数据分布与数据实际分布的交叉熵（等价于最小化 KL 距离），尽量使采样分布（撒的点）与实际情况同分布。 该方法适当选取撒点规则就可以适应多目标优化等情况，在组合优化中也有许多应用。本文主要讨论 CEM 在强化学习的策略优化中的应用。 CEM 流程 简介说得花里胡哨，可是实际应用起来基本没有交叉熵什么事，实际应用通常是以下步骤： 首先，建模，将问题的解参数化。比如强化学习中，假设状态 S 为一个 n 维向量，动作总共有 2 种，最简单的想法就是建立一个 n 维参数向量 W ，求 S T   $\times$ W 得到一个标量 Q ，当 Q > 0 则采取第一种动作，否则采取第二种。强化学习问题转化为优化问题。（接下来其实可以使用任何优化算法求解最优的 W ，只不过交叉熵方法可以很快很稳定地收敛。） 假设参数 W 属于高斯分布，随机设置一个 n 维向量 $\mu...
阅读全文

关于为什么Q-Learning与DQN有效

-
图片
前言： 我之前看了不少Q-Learning的介绍和deep mind的两篇论文：play atari with deep reinforcement learning与human control through deep reinforcement learning，后来复习的时候思考了很久为什么DQN会有效，按照 a painless q learning tutorial 里面的例子写了一个 Q-Learning的代码 和 Q-Learning笔记 ，想明白了原因。如果理解有误欢迎指正。 本文假设读者明白q-learning和DQN，如果不够明白请参考上面提到的三篇资料和我写的笔记 Q-Learning: Q-Learning是通过迭代来更新Q表的，在更新Q值时，采取ϵ-greedy实际上就是以ϵ的概率进行贪心，$1-\epsilon$的概率进行蒙特卡罗。Q表按照下面的公式进行更新： 从公式中可以看出，当前位置的Q值（价值）等于当前位置的瞬时回报+在当前位置采取所有动作之后的最大Q值（价值）。 以a painless q learning tutorial中的例子为例，如下图所示（左图为地图，右图中的数字表示回报$R(state, action)$： 使用这个地图定义Q表和R(回报)表： 当我们的目标为5时，我们定义到达5的回报为100,经过第一轮迭代之后，Q表中$$[1,5]、[4,5]、[5,5]$$的Q值就是$$R(any state, 5) + \gamma \times Max[Q(next state, all actions)]=100+\gamma  \times 0=100$$，其他"[状态,动作]对"的Q值为0.而重点在于之后的迭代，当遇到第二轮迭代的时候，$$[3,1]、[3,4]、[0,4]$$的Q值由0变为$$0+\gamma \times100$$,实际上Q值在不断地向所有可行初始位置反向扩散，由于$\times<1$，而距离目的地越近，Q值也就越大。也就是说，选择Q值最大的路径就是最优路线。 观看Q表的扩散，可以运行我写的小程序，使用jupyter notebook运行。 地址在 这里 ，也可以通过网页直接观察在我电脑...
阅读全文

如何在终端（apt）使用ShadowSocks代理--tsocks简介及教程

-
2019年6月12日更新：不再建议使用tsocks，建议使用proxychains-ng 有的时候安装Google的包，还是会连接失败，而apt本身不支持socks代理。近期hosts不给力，所以还是要靠ShadowSocks。这里简要介绍一下tsocks。 安装方法： 用apt就能装 配置方法： 编辑/etc/tsocks.conf 如果没有以下信息，则加入： local = 127.0.0.0/255.0.0.0 server = 127.0.0.1 server_type = 5 server_port = 1080 其中，第一行指定不走代理的ip'，我们指定凡是127开头的都不走代理。server_type官方要求为5才能用，剩下俩看名字就知道是干啥的，采取默认即可。 使用方法： tsocks command 测试： tsocks curl ip.cn tsocks curl google.com 使用apt： sudo tsocks apt update 注意：经过尝试发现sudo要放在tsocks前面，否则apt会走不了代理。 可以试试我写的 apt bash小脚本 ，把它放到/usr/local/bin并加入可执行权限就可以运行。
发表评论
阅读全文

免费ShadowSocks帐号分享网页

-
之前在 这里 写的一个小爬虫，我把它做成了网页，放在了openshift-v3上面，这样就不用自己部署了。 点击这个链接查看： ss . pythonic . life 如果你想部署到自己的服务器或openshift帐号上，可以 点击这里 查看源码和部署指南。 如果用起来觉得不错，不妨给我加个星呗～ 这里可以直接看我的网页：
阅读全文

此博客中的热门博文

最方便的电子词典库+macOS支持

-
前言 经常使用词典查单词就会发现大多数词典都很难满足自己的需求。经过多年查字典的经历我总结了一套查字典的需求如下： 能够快速看到释义，要求短小精悍 再少见的词汇或缩写都有收录 看不懂中文释义时能够给出英文释义 能看到近义词反义词 最好能有例句 作为Linux用户，跨平台是必须的 上述四个需求实际上是互相冲突的。有英文释义和例句（比如厚厚的牛津词典及其电子版）的词典不短小精悍，要耐着性子从很长的篇幅里面寻找到释义，很烦；简明词典内容太少，近义词和英文释义就不指望了。单个词典显然无法解决问题，需要多个词典组合来满足所有需求。本文将介绍我使用的词典库系列。 词典库推荐 ECDICT， 简明英汉字典增强版 最强的简明英汉词典，收录非常全面，是我使用频率最高的词典库，平时查单词扫一眼就能知道单词的意思。推荐ECDICT-ultimate，词汇收录得更广。官方GitHub项目中没有提供可供macOS自带词典使用的字典库，因此我写了一个python脚本将官方提供的字典进行了转换。ECDICT-ultimate中的英文是来源于WordNet的释义，很容易看懂。我转换的macOS版词典可以选择是否显示英文/人名释义，比官方提供的格式看起来要好很多。 WordNet 虽然WordNet算是一个数据库，网上能搜到很多名为WordNet的词典。WordNet将词汇与Thesaurus相结合，英文释义简单易懂，比我看过的许多英英辞典更轻松理解词汇的含义。WordNet包含近义词反义词，背单词时很方便。英文词典是绝对必要的，许多单词看中文完全无法理解，只有看英文释义才能理解；或者有的词汇有多个看起来没有关联的含义，阅读英文释义时能够理解不同含义之间的关联（比如course这个单词，看中文释义感觉它的含义非常多，看英文才明白本来是指“道路”的“道”）；有不同的单词中文释义是一样的，但看英文释义才能明白这不同单词的区别。 Thesaurus Thesaurus严格来说不是一个词典，而是类似于中文的“辞海”，例句、近义词反义词都有，随便找一个就行，属于不常看但没有也不行。 词典软件推荐 QStarDict 比较简单轻量，GoldenDict虽然比这个显示效果好但占用太多系统资源。本词典软件可以设置划词后使用快捷键翻译，很方便。 sdcv 命令...
阅读全文

MacBook日文键盘四种输入模式输入法切换（同样适用于其他布局的键盘）

-
前言 以前买了个日文键盘的MacBook，日文键盘与中文键盘布局差别不小，不过适应了之后发现其实日文键盘用起来比普通键盘布局更加舒服。而且比普通键盘多了两个输入法切换键，最近就再考虑把这两个键利用起来。 工具 Karabiner-Elements 方法 日文键盘比普通键盘多了“英数”和“かな”键，前者将输入法强制切换到英文，后者强制切换到平假名。由于我主要使用中文输入法和Dvorak布局的英文键盘，偶尔使用日文输入法和qwerty布局，使用这两个键可以很方便地进行四种输入模式的切换，如下所示： 英数 -> Dvorak fn+英数 -> qwerty かな-> 中文 fn+かな -> 日文 通过编写配置文件即可。值得注意的是切换到日文的部分我并没有直接使用切换语言的api，而是将fn+かな直接映射为かな键，这与后文提到的macOS的bug有关。 问题与Walkaround macOS有个历史悠久的bug是输入法切换api在cjk之间互相切换时输入法指示器显示已切换却无法使用该输入法，解决方法是切换为英文输入法后再切换到前一个输入法（可以在karabiner-elements里面自动实现）。  输入法切换为英文时不会像之前按英数键一样自动将输入一半的内容直接提交为英文，而是出现一个不会消失的输入法框。解决方案是使karabiner-elements先触发一次英数键后再切换键盘布局。 使用上述walkaround之后输入法切换不够稳定，有的时候可能切换不到中文输入法或有的时候かな键变成了切换为日文。解决方法是将按一次键触发的多个动作中最后一个动作延迟触发，比如我使英数键或かな键弹起时触发最后一个动作。 如果没有在karabiner-elements里面专门设置键盘布局的话默认会按照美式布局进行映射，会发现各别日文独有的按键没识别到，不要忘记设置好。 总结： 输入法的切换存在两种方式，有状态和无状态。有状态即默认的使用caps lock在两种输入模式之间转换，而无状态是不论当前处于何种输入模式直接切换到指定输入模式。无状态切换更省心，既不需要每回都去看输入法指示器，也不会忘记切换输入法而导致需要删掉使用错误输入法打的字。我发现我的博文能解决的问题实在是小众得不能更小众，以汉语为母语的dvorak键盘布局与日文键盘使用...
阅读全文

[SOLVED] Supermicro cannot connect to VGA video port or iKVM

-
图片
Error Message: iKVM doesn't support add-on VGA device.  Please change the D-SUB connector to Add-on VGA device… TL;DR: Go HERE  and download Supermicro IPMI Utilities and install on your own PC Connect your server to the network (NOTICE: YOU MAY HAVE MORE THAN ONE NETWORK PORT, AND IF YOU DO NOT KNOW WHICH PORT SHOULD CONNECT TO THE NET, CONNECT THOSE ALL), power on and press "DEL" during startup until that error message come out There will be an IP showing on screen, keep it in your mind Go to your own PC, enter that IP on your web browser, if  you see a webpage below, go to next You may log in and change default username and password. The default username and password are both "ADMIN" Run IPMIView (downloaded at STEP 1). If you are using Windows, it's easy, and go to next step. In my PC (Ubuntu), you can just type:     tar xvaf IPMIView_2.13.0_build.170504_bundleJRE_Linux_x64.tar.xz     cd IPMIView_2.13.0_build.1705...
阅读全文