現狀和問題
- 開發插件的功能A的時候隨手建立場景, 測試插件的功能A. 測試通過后,測試場景就被丟掉.
- 發現插件的功能A有bug時, 修改代碼, 然后隨手建立場景, 測試bug. 測試通過后,測試場景就被丟掉.
- 添加功能B, 測試功能B通過后, 在使用的時候發現之前的功能A卻產生了bug, 應該是在添加功能B的時候產生的bug.
- 在開發人員流動大的公司里, 一個開發人員離職了, 他所開發的代碼交接給后續的開發人員.
? 后續開發人員很難了解原先代碼的設計思路和細節, 同時在添加新功能時難免會引入bug.
?
一個可行的解決方法:
- 在開發過程中, 每增加一個新功能, 都應該寫相應的testcase.
- 在開發過程中, 開發人員自己如果經常執行這些testcase(回歸測試), 那么就能保證修改的代碼不引入新的bug
- 一個開發人員離職了, 他所開發的代碼交接給后續的開發人員. 后續開發人員看testcase,了解插件的功能如何使用.
? 在添加新功能的時候, 把之前所有的testcase都執行一遍, 就能保證之前的功能沒有問題. 如果有問題的話, 也能構及時發現.

新的問題:
- 一個插件可能有大大小小十幾個功能, 全部測試下來可能要十幾分鐘. 每次修改一下代碼都要花這十幾分鐘做回歸測試的話,
? 一天下來也寫不了多少代碼. 這樣的開發效率太低.
解決方法:
- 做自動化測試. 把原先手動測試的工作讓程序來做.


關于automation
框架
??? - 自己寫
??? - 使用python unittest

如何寫testcase
有了測試框架之后, 還需要有testcase. 才能讓自動化測試真的有效. 關于如何寫好testcase, 這里有一寫個人的經驗.
- testcase里一般使用unittets.assert()來測試某個變量的值是否等于正確的值.
- 如何比較數組
? 比如, 如果要測試一個deform插件. 需要判斷變形后的點的坐標是否正確. unittets.assert()不能比較list類型, 所以需要我們自己寫.
? 要比較normal, nv等數據, 也需要這么做.
- 如果要測試一個shader該怎么寫testcase? 怎么判斷物體上的每個像素的值都是正確的呢?
? 可以把第一次渲染出的圖片保存, 作為正確的圖片(參考圖片), 以后每次渲染出的圖片和參考圖片做比較. 我簡稱這種方法為"參考圖比較".
?
? 其實, 對于判斷vertex position, normal, nv 都可以用這種方法做回歸測試.
? 測vertex position的話, 渲染一張圖就能看得出點的坐標是否正確;
? 測vertex normal的話, 給mesh賦一張材質,渲染一張圖就能看得出點的normal是否正確;
? 測vertex uv的話, 給材質賦一張checker紋理,渲染一張圖就能看得出點的uv是否正確;
?
? 怎么樣? 是不是覺得這個方法非?？? 事實上, 如果你沿著這條路走下去的話, 你會發現實際上這是個無比大的坑! 但幸好這個坑還是有出路的.
? 所以, 我的建議是, 盡量不用"參考圖比較"的方法, 而使用數組比較position, normal, nv這些值. 但如果要測試shader的話, 除了"參考圖比較"的方法之外, 我沒有想到更好的方法.
?
? 下面說一下"參考圖比較"的方法, 以及會遇到哪些問題:
? - 圖片格式
??? 備選項: jpg, exr, png, bmp, ...
??? 以下是我選擇圖片格式的依據:
??? - 圖片文件盡可能小.
??? - 方便查看. 比如, 我雙擊圖片就可以查看, 如果能直接在文件管理器里瀏覽其縮略圖就更好了.(所以, exr格式被剔除)
??? - 跨平臺. (bmp在linux不太好, 所以被剔除)
??? 似乎jpg, png都是不錯的選擇. 但jpg是有損壓縮. 為了避免壓縮導致圖片不一致, 我最終還是選擇png格式.
? - 如何比較兩張圖片是否一致
? - 用什么渲染器來渲染參考圖
??? 備選項:mayaSoftware, mentalray, arnold,
??? - 最好是maya自帶的渲染器, 因為使用起來方便.
??? - 所以, 似乎mayaSoftware是首選. 但如果你用這個渲染器, 會發現每次渲染的圖片都不一致(雖然人眼不出差異). 出來的圖片根本不適合做參考圖.
??? - 其次, mentalray每次渲染的圖片是一致的. 但是, 相同maya版本, 不同平臺下, mentalray渲染的圖片有時會不一致. 更糟糕的是, 不同maya版本的mentalray渲染的圖片差異很大.
????? 為什么? 因為mentalray在不斷的更新, 比如采樣的方法變了, 渲染出的圖片肯定就不一樣了.

- 如何制作testcase的maya文件
? - 批量更新testcase的maya文件, 是一件非常痛苦的事情 運行自動化測試的一些技巧

轉載于:https://www.cnblogs.com/yaoyansi/p/4761651.html

總結

以上是生活随笔為你收集整理的Automation Test in Maya Plugin Development的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。