文章

超實用 parallel 指令教學

江湖闖久了，遇到資料處理相關的工作是常有的事，譬如為一堆 jpg 圖檔產生縮圖(thumbnail)，或者把一堆 TSV 檔轉換成 CSV 格式，又或者把一堆資料夾分別用 tar 指令壓縮起來，諸如此類的。

針對這些情況，我個人很常用 awk 指令(詳見 awk 指令教學)產生所需要的指令，再丟到 shell 逐一執行，例如：

$ ls -l *.jpg | awk '{ print "tar -czvf "$9".tar.gz "$9}' | sh

上述指令中 ls -l *.jpg | awk '{ print "tar -czvf "$9".tar.gz "$9}' 的部分是為每 1 個 jpg 檔案產生 1 個對應的壓縮指令的字串，例如當前資料夾下有 a.jpg 與 b.jpg 2 個檔案的話，就會產生下列 2 行字串：

tar -czvf a.jpg.tar.gz a.jpg
tar -czvf b.jpg.tar.gz b.jpg

上述字串再以 | sh 交給 shell 執行。

不過這種用法的缺點就是指令會逐一執行，如果有 300 個檔案，每個處理要 1 秒，那麼就得等待 300 秒才能完成工作。

如果能夠將這些工作平行處理，將可以大大減少執行時間，這就是本文要介紹的 parallel 指令的最大用途，讓人能在 shell 中平行處理多個指令，增加執行速度。

Posted on  Nov 23, 2023  in  Unix-like 命令列教學  by  Amo Chen  ‐ 8 min read

如何在 macOS 上為 iOS 裝置裡的瀏覽器網頁除錯(Debugging websites in Chrome on iOS)

隨著各種手持智慧型裝置的盛行，一個網頁可能會在不同尺寸上的螢幕呈現，因此網頁設計勢必要考慮響應式設計(responsive design)，如不考慮響應式設計不僅容易造成使用者困擾之外，也可能會影響 SEO 分數，例如 Google 對有考量 mobile-first 設計的網站有加分。

雖然可以在瀏覽器的開發者工具調整螢幕尺寸，藉此查看網頁在不同裝置、螢幕尺寸的表現，不過最好還是實際在手持裝置內測試過會比較安心，因為我們無法保證手持裝置內的瀏覽器實作方式會跟其他平台一樣，這些差異就可能造成網頁的呈現不符預期。

但是要為手持裝置裡的瀏覽器網頁除錯，需要做一些設定才行，本文記錄如何在 macOS (例如 MacBook )上為 iOS 裝置(例如 iPhone ) 裡的瀏覽器網頁除錯(debugging)的設定過程。

Posted on  Nov 19, 2023  by  Amo Chen  ‐ 3 min read

以 bfg 指令清除含密碼、金鑰的 Git commits

眾所周知，版本控制系統會將所有的變更都存起來，因此我們能夠隨意回溯到任一版本，這些變更也包含你不小心提交存有機密資料的檔案，或是帳號密碼等字串。

對於版本控制不熟的使用者來說，可能會以為再提交 1 個已經刪除機敏資料的 commit 就安全了，實則不然，有心人士依然可以透過回溯版本或者在 .git 版本控制系統的資料夾內用工具撈出各種疑似帳號密碼的字串，進而入侵你的系統。

實際上也確實有數起資安事故是由於版本控制系統中含有帳號密碼等資訊所造成。

所以要從清理機敏資料，一定要連版本控制系統內的變動紀錄都要一併清理才安全！

本文將教導如何以 bfg 指令安全地清除含有密碼、金鑰等機敏資料的 commits 。

Posted on  Nov 8, 2023  in  Git 版本控制  by  Amo Chen  ‐ 3 min read

Python 細說 type() 與 Metaclass

Python 的類別定義有個神奇的參數，稱為 metaclass , 範例如下：

class Meta(type):
    pass

class A(metaclass=Meta):
    pass

這個參數不是繼承(inheritance), 但是它到底具體是做什麼的呢？就讓本文娓娓道來吧！

Posted on  Oct 26, 2023  in  Python 程式設計 - 高階  by  Amo Chen  ‐ 4 min read

Python __slots__ 介紹與教學

__slots__ 是 Python 類別必須認識的屬性，這個屬性為我們帶來節省記憶體資源以及增加存取(access)類別屬性(attribute)效率的好處，但相對地，它也犧牲原本方便擴充類別屬性的易用性。

總的來說，它是寫出高效率 Python 程式碼的一環，平常用不到它沒有關係，但如果要榨出更多記憶體資源以及效能的話， __slots__ 是一定能派上用場。

本文將透過各種範例認識 __slots__ 並學會如何運用它。

Posted on  Oct 16, 2023  in  Python 程式設計 - 中階  by  Amo Chen  ‐ 4 min read

Python - super() 函式與 MRO 詳解

Python 的物件導向程式設計(OOP)有 2 個一定要懂的東西：

  1. super() 函式
  2. MRO(Method Resolution Order) / 方法解析順序

如果不懂得這 2 個東西，就無法徹底解放類別(class)的力量，甚至可能導致寫出不夠彈性而且冗長的程式碼。

super() + MRO = 超級瑪利歐？（誤

本文將從 super() 函式開始講解，說明 Python 的 MRO(Method Resolution Order) ，並介紹 MRO 的特性在實務上的應用。

如果你無法正確回答以下範例結果的執行結果，那麽推薦你看完本文：

class Parent(object):
    NAME = 'Parent'
    def __str__(self):
        return self.NAME

class Child(Parent):
    NAME = 'Child'
    def __str__(self):
        return super().__str__()

c = Child()
print(c)

正確答案為： Child

Posted on  Oct 6, 2023  in  Python 程式設計 - 中階  by  Amo Chen  ‐ 6 min read

Python 的 typing.Protocol 怎麼使用？

Python 3.8 之後 typing 模組 新增 1 個 typing.Protocol 的 class 可以使用，這個 class 很適合用來給一些有實作特定方法的 class 們做 type annotation 。

舉個常見的交通工具作為例子，假設我們有 1 個函數接受任何有實作 move() 方法的 instance:

def move(x):
    x.move()

這時候可以用 typing.Protocol 將參數 x 加上 1 個 type hint, 讓彼此知道此處不管型別，只管是否有實作 move() 方法：

from typing import Protocol

class Movable(Protocol):
    def move(self):
        ...

def move(x: Movable):
    x.move()

加上 typing.Protocol 是否看起來清晰很多？

Posted on  Sep 25, 2023  in  Python 程式設計 - 中階  by  Amo Chen  ‐ 4 min read