使用 comm 指令，找尋存在 A 檔案卻不在 B 檔案內的關鍵字

這個需求是為了過濾一些條件，找出某筆資料存在 A 檔案，卻不在 B 檔案的用法。這時用 comm 這個指令就能達成功效（通常都還會用 sort/uniq 指令搭配）：

$ cat /tmp/a.log
1
2
3
4
5


$ cat /tmp/b.log
3
5
8
9


$ comm -23 /tmp/a.log /tmp/b.log
1
2
4


[Mac] 使用 Screen 與 RS232 裝置互動，進行 log 分析 @ Mac 10.11.5

今天又跑去偷看 embedded linux 的 console 了，用法(/dev/tty.usbserial 跟 driver 有關)：

$ screen /dev/tty.usbserial 115200

若需要仔細看 screen output 時，可以把加大 screen output buffer 或是把 log 寫到檔案

加大 screen buffer size (支援200000 line 輸出) :

ctrl + a + : + scrollback 200000

若覺得還要用 ctrl + a + [ 去追 log 實在很不方便，就是試試把log寫出來吧

ctrl + a + H

如此就會蹦出個 screenlog.0 檔案，可以搭配 vim, tail -f + grep 來使用，例如追蹤 download、upgrade 字眼：

$ tail -f screenlog.0 | grep "download\|upgrade"

如此交叉使用，應該可以解 bug 吧...

[Linux] 透過 du + sort 指令，查詢資料儲存最大量的目錄 @ Ubuntu 14.04

還滿常用 du -hd1 的指令，可以列出當下目錄的使用情況，且只列出一層子目錄。然而，列完後又想要排序，以此更快抓到問題 :P 發現 sort -h 指令頗好用：-h, --human-numeric-sort, compare human readable numbers (e.g., 2K 1G)

所以連續技：

$ du -hd1
...
13M     ./Cache
552M    ./Uploads
340K    ./css
1GB     .

$ du -hd1 | sort -h
...
340K    ./css
13M     ./Cache
552M    ./Uploads
1GB     .

Ansible 筆記 - 找尋本機端資源並部署至遠端機器，包含複雜 shell 指令、資源尋找錯誤處理、hosts 之間變數傳遞等

這個需求其實還滿簡單實現的，但為了想要達成更仔細的錯誤偵測，後來越改越複雜 XD 順便筆記一下。完整的使用情境：每次部署遠端機器前，本地端會有一個 package 產出(rpm)，透過 find 指令找到最新產出的 package 後，再部署到遠端機器（其實也可以把架設 yum server 來搞定啦 XD）

最簡單的方式，使用 vars 紀錄：

- hosts: YourTargetServers

  vars:
    rpm_dir: "/data/rpm/production/"
    rpm_name_prefix: "packagename*"
    rpm_find_command: "find {{ rpm_dir }} -name '{{ rpm_name_prefix }}' -printf '%T@ %p\n' | sort -n | tail -1 | cut -f2- -d ' ' "
    rpm_path: "{{ lookup('pipe', 'rpm_find_command') }}"

  tasks:
    - name: find rpm prefix name
      debug: msg="{{rpm_name_prefix}}"

    - name: find rpm command
      debug: msg="{{rpm_find_command}}"

    - name: find rpm path
      debug: msg="{{rpm_path}}"

這樣算是收工了，但是 rpm_path 若沒找到時，卻無法有洽當的錯誤偵測 Orz

所以第一次再改成這招：

- hosts: YourTargetServers

  vars:
    rpm_dir: "/data/rpm/production/"
    rpm_name_prefix: "packagename*"
    rpm_find_command: "find {{ rpm_dir }} -name '{{ rpm_name_prefix }}' -printf '%T@ %p\n' | sort -n | tail -1 | cut -f2- -d ' ' "

  tasks:
    - name: find rpm prefix name
      debug: msg="{{rpm_name_prefix}}"

    - name: find rpm command
      debug: msg="{{rpm_find_command}}"

    - name: find rpm path
      local_action: command /bin/bash -c "{{ rpm_find_command }}"
      sudo: False
      failed_when: " '' != rpm_path_result.stderr"

    - name: get rpm path
      debug: msg="{{ rpm_path_result.stdout }}"

但這樣仍有個缺點，那就是若有 roles 等一堆工作，會變成那堆工作做完才會跑 tasks，這時就會希望先偵測本地端的資料在跑 roles 工作，於是乎又改成：

- hosts: loclahost

  vars:
    rpm_dir: "/data/rpm/production/"
    rpm_name_prefix: "packagename*"
    rpm_find_command: "find {{ rpm_dir }} -name '{{ rpm_name_prefix }}' -printf '%T@ %p\n' | sort -n | tail -1 | cut -f2- -d ' ' "

  tasks:
    - name: find rpm prefix name
      debug: msg="{{rpm_name_prefix}}"

    - name: find rpm command
      debug: msg="{{rpm_find_command}}"

    - name: find rpm path
      local_action: command /bin/bash -c "{{ rpm_find_command }}"
      failed_when: " '' != rpm_path_result.stderr"

    - name: get rpm path
      debug: msg="{{ rpm_path_result.stdout }}"

- hosts: YourTargetServers

  vars:
    rpm_path: "{{ hostvars['localhost']['rpm_path_result']['stdout'] }}"

  tasks:
    - name: find rpm path
      debug: msg="{{rpm_path}}"

如此一來，就可以先確保在 localhost 把資源準備齊了，再進行遠端部署動作，也包含偵錯處理啦。

iOS 開發筆記 - 修正 Launch Image 失效問題

換了 Xcode 7.0.1 後，想說認真一下填滿 Images.xcassets 中的 LaunchImage，但始終沒有成功，總覺得一直讀取 Storyboard 的資料！

最後終於搞懂了，記得清空 Launch Screen File 欄位就沒問題啦。

若有碰到 ERROR ITMS-90475 iPad Multitasking support 的問題，再到 info.plist 塞入：

<key>UIRequiresFullScreen</key>
<string>YES</string>

即可解決。

[SQLite] 跨 database (db file) 進行 Table JOIN

使用 SQLITE - Attach 這個指令即可：

$ ls
a.sqlite3 b.sqlite3
$ sqlite3
sqlite> attach 'a.sqlite3' as adb
sqlite> attach 'b.sqlite3' as bdb
sqlite> .tables
adb.user  bdb.data
sqlite> SELECT adb.user.id, adb.user.name, bdb.data.info FROM adb.user, bdb.data WHERE adb.user.id = bdb.data.id

[Linux] 找尋 PHP 檔案內，用到 mysql_* 函數的檔案清單 @ Ubuntu 14.04

三個月前用過又忘了 Orz  還是筆記一下：

$ find /path/target -name "*.php" -exec sh -c 'cnt=`grep -c "mysql_" {}` && test $cnt -gt 0 && echo {}' \;

[Linux] 讓 git checkout/diff 略過 file permission 屬性

最近把 git 當作 deployment 過程的一環，接著就會碰到一個問題，有時因為需求要調整 file permission ，此時就會造成 git checkout 失敗，要求要先 merge 在行動。雖然 file permission 容易出現在 Windows / Linux ，但在 Linux 環境用 git 當作 deployment 時，也常有身份、權限的改變而造成一樣的影響。

解法：

$ git config core.fileMode false

或

$ git -c core.fileMode=false diff
$ git -c core.fileMode=false checkout

[PHP] 使用 Memory Cache (php://memory) 加速 File Handle 操作

最近使用 maxmind / MaxMind-DB-Reader-php 時，發現大量處理很慢，研究一下 src / MaxMind / Db / Reader.php 後，發現 DB 沒有一口氣讀進記憶體使用，就找一下如何將檔案搬進 Memory 後，一樣用 File Handle 對 memory 操作，如此可以降低 source code 的更動。

用法(以 src / MaxMind / Db / Reader.php 為例)：

$this->fileHandle = @fopen($database, 'rb');
if ($this->fileHandle === false) {
throw new \InvalidArgumentException(
"Error opening \"$database\"."
);
}

$this->fileSize = @filesize($database);
if ($this->fileSize === false) {
throw new \UnexpectedValueException(
"Error determining the size of \"$database\"."
);
}

// Add by changyy
$fp = fopen("php://memory", 'rb+');
if(is_resource($fp)) {
fputs($fp, fread($this->fileHandle, $this->fileSize) );
rewind($fp);
fclose($this->fileHandle);
$this->fileHandle = $fp;
}

使用的結果，在 Linode 2048 的機器上，測試 20k 筆資料，未加時約 65 秒，加了可以進步到 40 秒附近，稍微失落 Orz 此外，可以用 memory_get_peak_usage() 來的知記憶體的增減。