閱讀582 返回首頁    go Python


Python 麵向文檔編程的正確姿勢

秦人不暇自哀,而後人哀之;後人哀之而不鑒之,亦使後人而複哀後人也! --論麵向文檔編程的重要性

作者:HarryZhu

如果想看見識一個人寫代碼的功力,注釋其實是區分老司機和小鮮肉的一個顯著的分界線(有沒有觀察到你們公司的領導基本都在開會或者寫文檔),通常情況下老司機的文檔量與代碼量是1:1的比例,而新人往往認為寫完功能模塊就已經可以完成任務了。生產環境中需要麵對現實中大量複雜的業務邏輯和數據校驗並與各方對接,文檔質量和代碼質量就被提升到了相同的高度。很多人沒有寫注釋的習慣,大多數不是因為懶惰,一方麵是沒有意識到寫文檔的好處,另一方麵是不了解這方麵的工具。畢竟從管理上依賴於人的主動性是遠不如依賴於工具有效的。本文介紹如何利用Python注釋提升文檔書寫的質量以及效率的小技巧。

在實際生產中,機器學習工作現在看起來,白天像是個算法工程師的活,晚上就變成運維+測試了。Python 一直以來也都受到測試工程師和運維工程師的偏愛,下麵是幾個經典的注釋活用case。

用注釋寫單元測試:

單元測試是代碼開發環節必不可少的一環,對於Bug定位和代碼質量而言是非常重要的。現在最廣為人知的單元測試框架就是Unittest,它借鑒了Java中成熟的單元測試框架的JUnit。即使像Django還對這個框架有特殊的支持,然而在實現Unittest的時候會感覺確實比較囉嗦,setup,teardown...在維護單元測試的時候很多時候感覺力不從心。

一個巧妙的方式可以是通過 ,用 注釋的方式來完成單元測試,由於每個方法 下麵都先跟著一段測試用例,然後緊跟著就是代碼正文,這樣一來很方便我們測試現有代碼的質量,另一方麵又便於修改。

舉個例子:

上麵是官網提供的一個求N的階乘函數示例,在 中通過 符號來開始一個單元測試,之後換行輸入預期結果即可。實際上就是複製粘貼一下調試過程和結果,真的再簡單不過了,想實現TDD也因此變得非常輕鬆。

用注釋寫API文檔:

在我們完成機器學習模型後,想要提供一個對外服務的接口以貢獻我們的算力時就需要完備的API文檔,也是通過API的調用才能為我們的模型提供源源不斷的校驗數據,對於提升模型效果有非常實際的意義。對大多數人而言調用API來完成開發都是一件比較開心的事情,因為我們可以少做很多工作就可以實現強大功能。然而,當我們需要對外提供API時就要麵臨不一樣的考驗了,接口鑒權、接口設計、版本控製、並發問題、日誌埋點...這些都是需要麵對的新問題,而利用 可以很好地解決這些API文檔中常見的諸多問題,相當於通過模板提升了我們的接口設計的能力。

為Python提供了一種類似於 的方式來寫API文檔,從語法上看比較類似於 R中的 ,都需要用戶以 xxx 符號作為一個開頭,隨後書寫相關的定義和功能。

舉個例子:

下麵是一個API接口的定義方法,最核心的部分就是

路由

GET/POST方法

名稱/分組

參數與調用例子

(這年頭沒有用例的代碼都是耍流氓)

我們可以直接擼一個官方示例來學習如何使用apidoc。

首先,下載示例源碼

然後,安裝 組件

接著,利用官方代碼來製作一個例子,並且訪問即可。

幾個參數的含義如下:

:input,表示輸入的文件夾

:output,表示輸出文件夾

:template,表示模板文件,通過替換模板我們可以修改文檔皮膚

在 example 文件夾下,我們需要在apidoc.json 中填寫配置文件,定義文檔的header和footer部分內容,其餘的文件會被自動識別出其中的 作為API文檔的一部分。

由於 的官方文檔非常簡單清晰,所以這裏不過多強調語法。

還為我們提供了接口調試的功能,在實際使用的時候要注意:

我們需要一個web server 才可以使用這個接口調試的功能

要注意跨域的問題。

通過版本對比,我們還可以快速排查API接口的變化情況。需要注意的是這個功能要求我們要將曆史的文檔記錄也要保存在該目錄下的文件中,通常我們可以把曆史的注釋輸出到一個特定文件中保存。

總的來說,雖然,API文檔的書寫並不是一件難度非常高的事情,卻能體現係統模塊設計和用戶體驗設計的功力,我們應該對那些無代碼示例,無版本控製的API文檔say no!

用注釋寫命令行接口

利用 ,我們可以在注釋中直接聲明文件的命令行傳入參數,而不需要通過 變量來捕獲輸入值再做判斷,這在調用運維腳本或者若幹任務調度腳本的時候尤其管用,極大地提升了CLI的效率。

舉個例子:(此處代碼僅供參考)

隨後,我們可以在命令行中成功調用

這裏的 arguments 將傳出一個字典對象,以Key-Value的形式將命令行中的輸入值捕獲。

總結

如果真的要從數據擼到模型、接口,那麼一排注釋的畫麵真是美得不敢想象。

歡迎大家留言討論,給出更多應用案例,交流分享。

題圖:pexels,CC0 授權。

最後更新:2017-10-08 16:00:08

  上一篇:go Python 信號機製的探索和思考
  下一篇:go Python 將Excel表中多列數據去重後快速合並成一列