2017-05-12

scpできなくて私もハマった

linux

問題

scpがエラー無く終わるが、何も転送されていない

% scp otiai10@foobar.com:~/test.txt ~/
Enter passphrase for key '/User/otiai10/.ssh/foobar': 
foobar
%
% ls -la | grep test.txt
% # ← あれーん？

tl;dr, 解決

リモート側の.bashrcでログイン時にログインしたホスト名を出力するようにしていたのが原因だったっぽい？（ナンデ？）

# リモートの~/.bashrc

### 以下をコメントアウトしたら動いた
hostname

参考

ログ

問題の発覚

% scp otiai10@foobar.com:~/test.txt ~/
Enter passphrase for key '/User/otiai10/.ssh/foobar': 
foobar
%
% ls -la | grep test.txt
%

なんもない？ scpコマンドにはverbose logを出す-vオプションがあるので調査

% scp otiai10@foobar.com:~/test.txt ~/
#
# 略
#
debug1: Entering interactive session.
debug1: pledge: network
debug1: Sending command: scp -v -f ~/test.txt
Sink: foobar
foobar
Sending file modes: C0640 37 test.txt
debug1: client_input_channel_req: channel 0 rtype exit-status reply 0
debug1: client_input_channel_req: channel 0 rtype eow@openssh.com reply 0
debug1: channel 0: free: client-session, nchannels 1
debug1: fd 0 clearing O_NONBLOCK
debug1: fd 1 clearing O_NONBLOCK
Transferred: sent 3264, received 2992 bytes, in 0.1 seconds
Bytes per second: sent 22591.7, received 20709.0
debug1: Exit status 1
%

確かにExit status 1してるし、sentに対してrecievedが少ないが、なんとも情報が少ない。ググってギリギリそれっぽいのがこれだった。

scpが出来なくて超ハマったメモ（原因は.bashrc） : akiyan.com

sshも繋がるしWinSCPも出来たのでなかなか原因にたどり着くことができませんでした。同じような状況のときは.～rcを調べてみるといいかもしれません…。

f:id:otiai10:20170512131857j:plain

それな。~/.bashrcを確認しても、だいたい環境変数のexportとかしてるだけでそれっぽいものが無いけど、以下のブロックを見つけた

# {{{ PROMPT
if [[ `hostname` =~ foobar ]]; then
    hostname
else
    export PS1="\e[1;34m\]$\e[m\] "
fi
# }}}

foobarサーバだったらfoobarを出力し、それ以外だったらプロンプト（コマンド受け付けるところの左のやつ）をシンプルに $ （色付き）だけにするというやつ。「まさかぁ〜」と思いつつコメントアウトしたら動いた。問題を切り分けて、どうやら hostname を実行している箇所だけが問題だったということが判明して事なきを得たが、結局原因はわかっていないです。教えてエロいひと。

DRY

はじめてUNIXで仕事をする人が読む本 (アスキー書籍)

作者: 木本雅彦,松山直道,稲島大輔
出版社/メーカー: KADOKAWA / アスキー・メディアワークス
発売日: 2014/03/25
メディア: Kindle版
この商品を含むブログ (5件) を見る

2017-05-11

vimのcolorschemeで勝手にドキドキするvimrc

vim

わけあってリモートサーバでvimでがんがんコードの編集する仕事をしており、あと単調なので、なんかドキドキしたいと思い、1時間ごとにcolorschemeを勝手に変えるvimrcの断片を書いたのでメモ

追記 2017/05/15

id:foooomioさんありがとうございます！助かりました！

function! s:ColorSchemeLottery()
    let schemes = ["koehler", "zellner", "peachpuff", "slate", "murphy", "delek"]
    let l = len(schemes)
    let i = strftime("%H") % l
    return schemes[i]
endfunction
execute 'colorscheme ' . s:ColorSchemeLottery()

これでリストだけ更新すればよくなった。

以下原文、読まなくてよい。

これ動かない

なんで…

function! s:ColorSchemeLottery()
    let schemes = ["koehler", "zellner", "peachpuff", "slate", "murphy", "delek"]
    let l = len(schemes)
    let i = strftime("%H") % l
    return schemes[i]
endfunction

colorscheme s:ColorSchemeLottery()

" E185: Cannot find color scheme 's:ColorSchemeLottery()'
" と言われる。関数呼び出しが呼び出しと戻り値ではなく引数として食わせる文字列として評価されている

とりあえずこうした

function! ColorSchemeLottery()
    let h = strftime("%H") % 6
    if h == 0
        colorscheme koehler
    elseif h == 1
        colorscheme zellner
    elseif h == 2
        colorscheme peachpuff
    elseif h == 3
        colorscheme slate
    elseif h == 4
        colorscheme murphy
    else
        colorscheme delek
    endif
endfunction

call ColorSchemeLottery()

Vimテクニックバイブル　?作業効率をカイゼンする150の技

作者: Vimサポーターズ
出版社/メーカー: 技術評論社
発売日: 2011/09/23
メディア: 単行本（ソフトカバー）
購入: 19人クリック: 661回
この商品を含むブログ (37件) を見る

2017-04-14

RedHatにGo言語をインストール（というか配置）

$ cd
$ mkdir -p opt/src
$ cd opt/src
$ wget https://storage.googleapis.com/golang/go1.8.1.linux-amd64.tar.gz
$ tar zxvf go1.8.1.linux-amd64.tar.gz
$ mv go ~/opt/.go # GOROOT用
$ mkdir -p ~/proj/go # GOPATH用
$ export GOROOT=~/opt/.go
$ export GOPATH=~/proj/go
$ export PATH=$GOROOT/bin:$GOPATH/bin:$PATH
$ go version
go version go1.8.1 linux/amd64

確認

$ go get github.com/otiai10/primes/primes
$ which primes
~/proj/go/bin/primes
$ primes p 100
[2 3 5 7 11 13 17 19 23 29 31 37 41 43 47 53 59 61 67 71 73 79 83 89 97]

いけてる。Goのインストールは手軽で明確でほんとに好きだなあ。

DRYな備忘録として

プログラミング経験者がGo言語を本格的に勉強する前に読むための本

作者: 天田士郎
発売日: 2017/03/10
メディア: Kindle版
この商品を含むブログを見る

2017-04-13

Macにsamtoolsをインストール

bioinformatics

ゴール

macOS Sierra上でsamtoolsコマンドが使える

参考

ログ

% cd
% mkdir opt
% mkdir opt/src
% cd opt/src
% wget https://github.com/samtools/htslib/releases/download/1.4/htslib-1.4.tar.bz2
% tar jxvf htslib-1.4.tar.bz2
% cd htslib-1.4
% ./configure --prefix=$HOME/opt
# 中略
configure: error: liblzma development files not found
# 後略

ふむ

http://unix.stackexchange.com/questions/185244/cmake-error-could-not-find-liblzma-missing-liblzma-include-dir

% brew search liblzma
lzma is now part of the xz formula.
% brew search lzma-devel
lzma is now part of the xz formula.
% brew search xz-devel
No formula found for "xz-devel".

lzmaはxzになったけど、liblzmaの名前で探しにこられててnot foundとなっているような気がする。xzを入れればいいのかな。

% brew install xz
% ./configure --prefix=$HOME/opt
# いけたっぽい
% make
# warningは多数出てるけどとりあえず最後まで行ったっぽい
% make install
% ll ~/opt
total 0
drwxr-xr-x   7 otiai10  staff   238  4 13 10:24 .
drwxr-xr-x+ 39 otiai10  staff  1326  4 13 10:06 ..
drwxr-xr-x   5 otiai10  staff   170  4 13 10:24 bin
drwxr-xr-x   3 otiai10  staff   102  4 13 10:24 include
drwxr-xr-x   7 otiai10  staff   238  4 13 10:24 lib
drwxr-xr-x   3 otiai10  staff   102  4 13 10:24 share
drwxr-xr-x   4 otiai10  staff   136  4 13 10:06 src

コマンドPATHを通す

% which htsfile
htsfile not found
% export PATH=$HOME/opt/bin:$PATH
% which htsfile
/Users/otiai10/opt/bin/htsfile
% man htsfile
# いい感じ

LIBRARY PATHを通す

export LD_LIBRARY_PATH=$HOME/opt/lib:$LD_LIBRARY_PATH

samtoolsのインストール

% cd $HOME/opt/src
% wget https://github.com/samtools/samtools/releases/download/1.4/samtools-1.4.tar.bz2
% tar jxvf samtools-1.4.tar.bz2
% cd samtools-1.4
% ./configure --prefix=$HOME/opt
% make
% make install

確認

% which samtools
/Users/otiai10/opt/bin/samtools
% man samtools

イケてる。

はじめてのバイオインフォマティクス (KS生命科学専門書)

作者: 藤博幸
出版社/メーカー: 講談社
発売日: 2006/12/18
メディア: 大型本
購入: 1人クリック: 8回
この商品を含むブログ (7件) を見る

DRYな備忘録

2017-03-26

RustをMacにインストールしてHelloWorldとFizzBuzz

rust

追記 2018/02/25

brewで入れると色々横着なので、ちゃんとインストールし直した。

otiai10.hatenablog.com

以下原文、読まなくていいです。

Rust、話題なので、やってみる。ミーハーなので。

brew install rust

% brew install rust
% rustc -V
rustc 1.16.0
% cargo -V
cargo-0.17.0-dev (f9e5481 2017-03-03)

Hello, Rust!

% cd
% mkdir -p proj/rust/playground/hello
% cd proj/rust/playground/hello

Hello World - Rust By Example

fn main() {
    println("ハロー, Rust!");
}

% rustc hello.rs
error[E0423]: expected function, found macro `println`
 --> hello.rs:2:5
  |
2 |     println("ハロー, Rust!");
  |     ^^^^^^^ did you mean `println!(...)`?

error: aborting due to previous error

%

めっちゃ親切やん

fn main() {
-    println("ハロー, Rust!");
+    println!("ハロー, Rust!");
}

% rustc hello.rs
% ./hello
ハロー, Rust!
%

できた

Write & Runがだるい

コンパイルして、実行ファイルを実行、っていう流れがだるいな、って思ったら、cargo runというのがあるっぽい。本当はプロジェクトつくるときにcargo newするのが作法のようで、cargo newするとtestsも自動的につくってくれるっぽい。いいっぽい。今回は後からCargo.tomlを追加した。

FizzBuzz

こういう感じにしたい

% fizzbuzz 15
1
2
fizz
4
buzz
fizz
7
8
fizz
buzz
11
fizz
13
14
FizzBuzz!!!

こうなった

use std::env;

fn fizzbuzz(x: i8) {
    for i in 1..(x + 1) {
        match (i % 3, i % 5) {
            (0, 0) => println!("FizzBuzz!!!"),
            (0, _) => println!("fizz"),
            (_, 0) => println!("buzz"),
            _ => println!("{}", i),
        }
    }
}

fn main() {
    match env::args().last().unwrap().parse::<i8>() {
        Ok(x) => fizzbuzz(x),
        Err(err) => println!("数字を指定してください: {}", err),
    }
}

結果

% cargo run 18
    Finished dev [unoptimized + debuginfo] target(s) in 0.0 secs
     Running `target/debug/fizzbuzz 18`
1
2
fizz
4
buzz
fizz
7
8
fizz
buzz
11
fizz
13
14
FizzBuzz!!!
16
17
fizz

いい感じ。成果物です。

github.com

コミットの細かさには定評がある僕です。

参考

雑感

とりあえず書き始めたけど、思ったより難しくて、ちゃんとチュートリアル読まなあかんな、と思った
わりと楽しく書けそう

Programming Rust: Fast, Safe Systems Development

作者: Jim Blandy,Jason Orendorff
出版社/メーカー: Oreilly & Associates Inc
発売日: 2017/12/21
メディア: ペーパーバック
この商品を含むブログを見る

2017-02-20

webpackのプロジェクトでWebWorker書いててつまずいたメモ

javascript webpack

まずnew Worker(“./my/worker”) というやつ

Workerのコンストラクタにファイルパスを渡すやつからしてwebpackだとどう解決されるのか問題。

以上を参考にして、まず

npm install --save-dev worker-loader

つぎに、webpack.config.jsで

var plugins = [
    new webpack.LoaderOptionsPlugin({
        options: {
            worker: {
                output: {
                    filename: "dest/js/worker.[id].js",
                }
            }
        }
    })
];

として、自作のWorkerを使いたいほうは、

var Worker = require("worker-loader?inline!../../../Workers/my/worker");

とかしとくと

webpack 2.2の標準出力では

Child worker:
                  Asset     Size  Chunks             Chunk Names
    dest/js/worker.0.js  4.59 kB       0  [emitted]  main
       [1] ./~/babel-loader/lib!./src/js/Components/Workers/my/worker.js 1.24 kB {0} [built]
        + 1 hidden modules

となって、生成物としては、以下の648がWorkerを引っ張る共通処理、649が、648を使って自作のWorkerを提供する処理になっているので、

/***/ 648:
/***/ (function(module, exports) {

// http://stackoverflow.com/questions/10343913/how-to-create-a-web-worker-from-a-string

var URL = window.URL || window.webkitURL;
module.exports = function(content, url) {
    try {
        try {
            var blob;
            try { // BlobBuilder = Deprecated, but widely implemented
                var BlobBuilder = window.BlobBuilder || window.WebKitBlobBuilder || window.MozBlobBuilder || window.MSBlobBuilder;
                blob = new BlobBuilder();
                blob.append(content);
                blob = blob.getBlob();
            } catch(e) { // The proposed API
                blob = new Blob([content]);
            }
            return new Worker(URL.createObjectURL(blob));
        } catch(e) {
            return new Worker('data:application/javascript,' + encodeURIComponent(content));
        }
    } catch(e) {
        return new Worker(url);
    }
}

/***/ }),

/***/ 649:
/***/ (function(module, exports, __webpack_require__) {

module.exports = function() {
    return __webpack_require__(648)("/** 略 **/", __webpack_require__.p + "dest/js/worker.0.js");
};

このWorkerを使いたいほうでは、649を使ってWorkerインスタンスを作っていることが予想される。以下の通り。

var Worker = __webpack_require__(649);

const worker = new Worker();

となって、うまいことWorkerをwebpackでロードできている感じになった。

importScriptsがどこなの問題

importScripts inside web worker loses context when using worker-loader · Issue #4234 · webpack/webpack · GitHub

このエントリ書いてるのが2017/02/19 (CET) で、このissueが立ったのが02/08、コントリビュータがbugのlabelをつけたのが02/17なので、なかなかホット。実際、webpackの成果物で、importScriptsをしている部分を見ると、

前

importScripts("../foo.js", "../bar.js");

後

importScripts("../foo.js", "../bar.js");

となっており、webpack@2.2.1の時点でimportScripts内のコンテキストは解決されず、生成されたworkerなjsファイル（今回のケースでいうとdest/js/worker.0.js）に対する相対pathを書く必要がある。

TODO: このissueに動きがあったらここに追記する

番外: Chrome拡張において

Chrome拡張においてうまいことdest/js/worker.0.jsというworkerから相対pathでimportScriptsしてくれなかったので、完全なURLを渡す必要があり、以下のようにした。

自作Worker

import imports from "../imports";

const _init = (data) => {
    imports(data.root)("dest/js/nice-lib-x.js", "dest/js/cool-lib-y.js");
};
onmessage = (ev) => {
    switch(ev.data.cmd) {
    case "init": return _init(ev.data);
    case "なんか他のこといろいろ": return _awesome_action(ev.data);
    default:
        return;
    };
};

自作べんりimports関数

/**
 * Workerのコンテキストではchromeは参照できないので、
 * Chrome拡張自体の持つルートディレクトリのURLを
 * アプリケーション側からもらって、それをimportScriptsする必要があるよ。
 */
export default function imports(root) {
    return function() {
        // ↑
        // ここをアローで書くと、argumentsの参照がwebpackによって
        // カリー化関数自体のargumentsに固定されてしまうので
        // functionキーワードで書く必要がある
        if (!root) throw "importScriptsする場合は必ずrootを指定してください";
        const _root = root.replace(/\/+$/, "/"); // ケツの/の重複をきれいにするだけ
        importScripts(...Array.prototype.map.call(arguments, path => _root + path));
    };
}

自作Worker呼ぶ方

var Worker = require("worker-loader?inline!../../../Workers/my/worker");

const worker = new Worker();
worker.postMessage({
    cmd: "init",
    root: chrome.extension.getURL("/")
});

これでうまい感じに

chrome-extension://{extensionId}/dest/js/nice-lib-x.jsに定義した色々が自作Workerの中でアレできるようになった。

雑感

webpackちょっとわかってきた
さいきんReact/ReactNativeばっかり書いてて頭おかしくなりそう
ベルリンのスタートアップはいろいろつらい。早く日本に帰りたい
ベルリンは好きだ
- ビール安い
- ソーセージをはじめ、肉が安い
- 食材が安いので料理がたのしい
SAOの劇場版、ドイツでやってるっぽい

sao-movie.net

DRYな備忘録として

初めてのJavaScript 第3版 ―ES2015以降の最新ウェブ開発

作者: Ethan Brown,武舎広幸,武舎るみ
出版社/メーカー: オライリージャパン
発売日: 2017/01/20
メディア: 単行本（ソフトカバー）
この商品を含むブログを見る

改訂新版JavaScript本格入門 ?モダンスタイルによる基礎から現場での応用まで

作者: 山田祥寛
出版社/メーカー: 技術評論社
発売日: 2016/09/30
メディア: Kindle版
この商品を含むブログを見る

2017-02-09

react-routerでページを共通Layoutに乗せたりログイン画面は乗せなかったりするルーティングの設定

javascript reactjs

import React from 'react';
import ReactDOM from 'react-dom'
import {Router, Routes, browserHistory} from 'react-router';

import {MyFancyLayout} from '../../layouts';
import {
    LoginPage, // これと
    HomePage,
    SettingPage,
    NotFoundPage, // これは、レイアウト適用外
} from '../../pages';

ReactDOM.render(
    <Router history={browserHistory}>
        <Route path="/login" component={LoginPage} />
        <Route path="/" component={MyFancyLayout}>
            <IndexRoute component={HomePage} />
            <Route path="/home" component={HomePage} />
            <Route path="/settings" component={SettingsPage} />
        </Route>
        <Route path="*" component={NotFoundPage} />
    </Router>,
    document.querySelector('div#app')
);
// こうしとくと、MyFancyLayoutコンポーネントにおいて
// ネストされたroutesで指定されたコンポーネントが
// props.childrenとして得られるので、renderとかで使えばよい

IndexRoute を定義しないと、/がレンダリングされない
MyFancyLayoutのRouteで*とするとMyFancyLayoutのprops.childrenがundefinedになる

のでちょっとハマった

DRYな備忘録として

入門 React ―コンポーネントベースのWebフロントエンド開発

作者: Frankie Bagnardi,Jonathan Beebe,Richard Feldman,Tom Hallett,Simon HØjberg,Karl Mikkelsen,宮崎空
出版社/メーカー: オライリージャパン
発売日: 2015/04/03
メディア: 大型本
この商品を含むブログ (2件) を見る