Python 開發筆記 - 使用 Gitlab API 列出 Projects、Branches 和 Commits

剛好碰到需要製作 Gitlab 整合類服務，開發完後就把很基礎的項目整理成小工具來支援 JSON 輸出，未來可以跟 jq 做一堆連續技：

• github.com/changyy/gitlab-api-helper
• pypi.org/project/gitlab-api-helper/

用法：

% virtualenv venv

created virtual environment CPython3.11.5.final.0-64 in 120ms

...

% source venv/bin/activate

(venv) % 

(venv) % pip3 install gitlab-api-helper

(venv) % ./venv/bin/gitlab-api-helper 

{

    "info": [

        "config file not found: .env",

        "--api empty"

    ],

    "result": null,

    "version": "1.0.0"

}

usage: gitlab-api-helper [-h] [--apiSetupConfig APISETUPCONFIG]

                         [--apiAccessToken APIACCESSTOKEN] [--api API]

                         [--sinceType {day,week,month}]

                         [--sinceNumber SINCENUMBER]

                         [--lookup {project,branch,commit}]

                         [--lookupProjectID LOOKUPPROJECTID]

                         [--lookupBranch LOOKUPBRANCH]

A Simple Tool for Gitlab API Usage

options:

  -h, --help            show this help message and exit

  --apiSetupConfig APISETUPCONFIG

                        Read Default Info from config file

  --apiAccessToken APIACCESSTOKEN

                        Using Gitlab API with private_token.

  --api API             Gitlab API URL

  --sinceType {day,week,month}

                        commit date range type

  --sinceNumber SINCENUMBER

                        commit date range value

  --lookup {project,branch,commit}

                        query result

  --lookupProjectID LOOKUPPROJECTID

                        Gitlab Project ID

  --lookupBranch LOOKUPBRANCH

                        Branch Name

剩下就看 github.com/changyy/gitlab-api-helper 或 pypi.org/project/gitlab-api-helper/ 的簡介囉

[Linux] OpenSSL AES-128 加解密 @ macOS 13.2.1, OpenSSL 3.1.2 1 Aug 2023

總覺得我是不是以前也寫過這類筆記? 查了下快十年前 XD 用的是 openssl des3 

由於工作中太常接觸 AES-128 加解密了，想要筆記一下方便未來查詢，而透過 openssl command 也方便交叉驗證程式是否正確，這次就仿 openssl des3 筆記：

明文：

% cat /tmp/input.txt

Hello World

% md5 /tmp/input.txt

MD5 (/tmp/input.txt) = e59ff97941044f85df5297e1c302d260

% hexdump /tmp/input.txt 

0000000 6548 6c6c 206f 6f57 6c72 0a64          

000000c

產生加解密的 Key 值：

% dd if=/dev/urandom of=/tmp/password bs=1 count=32

32+0 records in

32+0 records out

32 bytes transferred in 0.000303 secs (105611 bytes/sec)

% md5 /tmp/password 

MD5 (/tmp/password) = 92eeb8e1bec70865650e1f96e5cd1819

% hexdump /tmp/password 

0000000 cf23 5006 70d0 bf1e 0e9e a70c 10f0 ecd6

0000010 dc01 e156 d818 bff2 2e3e f859 28c9 a91d

0000020

% hexdump -v -e '/1 "%02x"' -n 16 /tmp/password 

23cf0650d0701ebf9e0e0ca7f010d6ec

產生加解密的 IV 值（其實同 Key 值產生即可，目前改用另一招）：

% date | md5

5d6476c85eca3ec56fda4913f5578b83

使用 OpenSSL AES-128 加密：

% openssl enc -e -aes-128-cbc -in /tmp/input.txt -out /tmp/encrypt.txt -K 23cf0650d0701ebf9e0e0ca7f010d6ec -iv 5d6476c85eca3ec56fda4913f5578b83

% hexdump /tmp/encrypt.txt

0000000 c3d4 cb0a d845 182c 319e afdf b29c c484

0000010

使用 OpenSSL AES-128 解密：

% openssl enc -d -aes-128-cbc -in /tmp/encrypt.txt -out /tmp/output.txt -K 23cf0650d0701ebf9e0e0ca7f010d6ec -iv 5d6476c85eca3ec56fda4913f5578b83

% md5 /tmp/output.txt 

MD5 (/tmp/output.txt) = e59ff97941044f85df5297e1c302d260

% cat /tmp/output.txt 

Hello World

工作上很容易 Key 值是一個 32 bytes 的 binary 檔案，且不加入輸出至檔案的方式，可以立即看解密的內容，連續動作如下：

% openssl enc -d -aes-128-cbc -in /tmp/encrypt.txt -K $(hexdump -v -e '/1 "%02x"' -n 16 /tmp/password) -iv 5d6476c85eca3ec56fda4913f5578b83

Hello World

收工

Command line 批次顯示圖片寬高 @ Mac OS X 10.11.6

使用 sips 指令即可：

$ sips
sips 10.4.4 - scriptable image processing system.
This tool is used to query or modify raster image files and ColorSync ICC profiles.
Its functionality can also be used through the "Image Events" AppleScript suite.
Try 'sips --help' or 'sips --helpProperties' for help using this tool

用法：

$ find . -name "*.jpg" -exec sips -g pixelHeights -g pixelWidth {} \;

GAE 筆記 - 在 Ubuntu Server 上傳 Google App Engine 程式碼 @ Ubuntu 14.04

最近嘗試在 Ubuntu server 開發，以前常在 Windows 、 Ubuntu Desktop 和 Mac OSX 等視窗介面，最近 Google App engine 也把認證的部分換了，以前是在 Google App engine tools 上輸入帳號密碼，現在都改用 OAuth 認證方式，實在方便。

若要在 Ubuntu server 上運行 Google App Engine ，透過 Command line 即可完成測試跟發佈：

測試：

$ cd /path/gae/project
$ python -m py_compile *.py && dev_appserver.py --port=8080 .

發佈：

$ cd /path/gae/project
$ python -m py_compile *.py && appcfg.py --oauth2 --noauth_local_webserver -A YourGAEProjectID update .
過程只需再用 browser 瀏覽指定的 link 以及完成 oauth 的認證即可發布啦！

[Linux] 使用 find -exec 之 Commands 與 Pipe 用法

原先打算：

$ find -name "*.sql" -exec tar -zcf - {} | dd of={}.tgz \;
dd: find: missing argument to `-exec'
unrecognized operand `;'
Try `dd --help' for more information.

改用 sh 來包：

$ find -name "*.sql" -exec sh -c 'tar -zcf - {} | dd of={}.tgz' \;
40984+1 records in
40984+1 records out
20984096 bytes (21 MB) copied, 3.51398 s, 6.0 MB/s


[OSX] 使用 Command line 啓動 VNC 和設定連線密碼 @ Mac OSX 10.8

如果說，都用 Mac OS X 遠端 Mac OS X，那的確不太需要設定 VNC 密碼，因為會轉換到 Mac OS X 自己的協定，但如果是從 Windows/Linux 連到 Mac OS X 的話，設定密碼還是安全一點點。

啓動 VNC：

$ sudo defaults write /var/db/launchd.db/com.apple.launchd/overrides.plist com.apple.screensharing -dict Disabled -bool false
$ sudo launchctl load /System/Library/LaunchDaemons/com.apple.screensharing.plist

設定 VNC 密碼：

$ sudo /System/Library/CoreServices/RemoteManagement/ARDAgent.app/Contents/Resources/kickstart -activate -configure -access -off -restart -agent -privs -all -allowAccessFor -allUsers -clientopts -setvncpw -vncpw VNC_PASSWORD
Starting...
bind(): Address already in use
com.apple.screensharing: Already loaded
Activated Remote Management.
Stopped ARD Agent.
Stopped VNC Privilege Proxy
buffalo: Set user remote access.
macports: Set user remote access.
ookon: Set user remote access.
Set the client options.
Setting allow all users to YES.
Setting all users privileges to ##########.
Done.