Devin を使ったコードカバレッジの向上
初期プロンプト
.env ファイルを作成し、アプリケーションをローカルで実行できるようにします。Devin と一緒に作業する際は、VS Code を自分で開いて手動で編集したり、Devin が作業しているファイルを確認・レビューしたりすることもできます。
カバレッジのベースラインを確立する
改善計画の作成
コードレビュー
チュートリアル
コードカバレッジ
Devin はコードベースのテストスイートを分析し、チームのコードカバレッジを高めるための追加テストを作成できます。
本番環境で稼働しているアプリケーションのほとんどは、コードカバレッジが 100% ではありません。エンジニアリングチームはシビアに優先順位を付ける必要があり、限られた時間から最大の効果を得るために、クリティカルパスのテスト作成に注力しがちです。Devin は、コードベースの既存のテストスイートのスタイルを分析し、クリティカルではないものの依然として重要な関数のカバレッジを拡大することで、このギャップを埋めることができます。
この例では、RealWorld 仕様に基づくオープンソースの Typescript サンプルアプリケーションを扱います。このアプリケーションにはすでにいくつかテストがありますが、カバレッジは十分に網羅的ではありません: https://github.com/SeuRonao/realworld-express-prisma
完全な Run はこちらから確認できますし、そのままこの後の本文を読み進めて、Devin のプロセスの各ステップの要点を追っていくこともできます。この投稿では、Editor や Shell など、Devin の Workspace のさまざまな部分を順に取り上げていきます。
まず、Devin に開発環境のセットアップと、アプリケーションの既存コードカバレッジの評価を行うよう指示するシンプルなプロンプトから Run を開始します。
続いて Devin は、自身の Shell でテストスイートを実行します。Devin の大きな利点の 1 つは、チームのコードを変更・作成できるだけでなく、自身の Browser と Terminal から直接作業し、コードベースや開発環境、さらには稼働中のアプリケーションに対して、より高レベルな操作を行えることです。
ここから、実際のタスクであるコードカバレッジの向上に進みます。デフォルトではほとんどカバレッジがないことから、profileViewer.ts が最初に取り組むのに適した対象のようです。次のステップについて Devin にプロンプトを入力すると、プロセス全体を通して何が起きているかを逐一報告してくれます。
Devin は新しいファイルも共有してくれるので、それをダウンロードしてレビューできます。あるいは、この新しいファイルをもとに GitHub 上で直接 Pull Request を作成するよう Devin に依頼する こともでき、その場合は通常のコードレビュー プロセスの一部として確認してもらえます。ここではファイルをダウンロードする手間を省くため、Devin に組み込まれているエディタ上でそのままレビューすることにしました。