在生成式AI蓬勃發展的時代，確保其回應品質和準確性成為一項重要挑戰。蛻變測試是一種有效的方法，可以用來驗證生成式AI回覆的強健性和一致性。這種測試方法通過微小的改變輸入，觀察生成的回覆是否有所變化，從而評估模型的表現。

本次案例將探討如何使用蛻變測試，在於生成式AI回覆上提升信心值，將以實際例子分析運用蛻變測試的效果及重要性，並探討生成式AI自動化測試方法和蛻變測試的關係，如何在每次的驗證過程中，修改prompt及如何問問題達到最終的答案目的。

最終希望透過蛻變測試，我們可以更全面地了解生成式AI的回覆品質，發現模型的潛在問題並提出改進建議。這將有助於提高生成式AI的品質和可靠性，為其應用提供更大的信心和價值。

通過本次演講，將深入了解生成式AI測試的方法和技巧，並能夠運用這些知識來提高生成式AI的品質和可靠性。從手動測試至自動化測試的心路歷程，探索測試左移帶來的效益，使觀眾可更有信心地應用生成式AI技術，並為未來的發展打下堅實的基礎。