ChatDevを使用して、仮想ソフトウェア会社にソフトウェア開発を外注する

概要

ChatDevを使用して、Pythonの計算機アプリを生成してみたので紹介します。

ChatDev

ChatDevは、ソフトウェアを開発する過程にLLMを取り入れたシステムです。ソフトウェアを開発する過程を4つのステップ(設計、コーディング、テスト、ドキュメント作成)に分けて、それぞれの工程でチャットのようにコミュニケーションを取りながら進めていく仕組みです。

GitHubによると、ChatDevは、CEO、CTO、プログラマ、テスターなどが在籍する仮想のソフトウェア会社であり、「プログラミングを通してデジタル世界に革命を起こす」ことを理念としています。
仮想のソフトウェア会社ってなんだ？と思いますが、簡単にいうとChatGPTなどのLLMを使用して、ソフトウェアを生成してくれるツールです。

外注してみる

環境構築

以下の環境で確認しました。

• Windows
• Python 3.9.15
  • 公式によるとPython3.9以上が必要です

以下のコマンドで構築します。

$ git clone https://github.com/OpenBMB/ChatDev.git
$ cd ChatDev
$ pip install -r requrements.txt
Linux
$ export OPENAI_API_KEY="your_OpenAI_API_key"
Windows
$env:OPENAI_API_KEY="your_OpenAI_API_key"

計算機アプリを開発してもらう

ソフトウェアを生成してもらうには以下のコマンドを使用します。

$ python run.py --task "[description_of_your_idea]" --name "[project_name]"

--taskに生成してもらいたいソフトウェアの説明、--nameにプロジェクト名を指定します。
--modelでGPT_3_5_TURBOやGPT_4を指定することもできます。
今回は「シンプルな計算機GUIアプリ」を開発してもらいます。

$ python run.py --task "Create a simple calculator GUI application." --name "calc"

実行するとザーっとログが流れ始め、しばらく待ちます。今回は500秒ほどかかりました。
成果物はWareHouseディレクトリに作成されており、--nameで指定した名前がついています。
中身は以下のようになっていて、コード、マニュアル、生成時のログなどが置かれています。

calc.prompt
calc_DefaultOrganization_20230901134458.log
calculator.py
ChatChainConfig.json
main.py
manual.md
meta.txt
PhaseConfig.json
requirements.txt
RoleConfig.json

マニュアルにしたがって、依存ライブラリをインストールして実行してみます。

$ cd WareHouse\todo__DefaultOrganization_20230901134458
$ pip install -r requirements.txt
ERROR: Could not find a version that satisfies the requirement tkinter==8.6 (from versions: none)
ERROR: No matching distribution found for tkinter==8.6

が、tkinterのインストールに失敗しました。requirements.txtには書かれていますが、tkinterは標準ライブラリに含まれているためここはスキップします。

$ python main.py

まさにtkinterで作られたような画面が出ました。
ボタンを押して計算してみましたが、ちゃんと計算できています。
ただし、クリアボタンが無いため、テキストボックスの部分をバックスペースで消す必要があります。
いじわるして0除算をしてみところ、

クラシュせずにエラーメッセージが表示されました。エラー処理もできているようです。

納品されたコード

コードを見てみましょう。main.pyとcalculator.pyの2つが生成されています。

main.py

'''
This is the main file of the calculator application.
'''
import tkinter as tk
from calculator import Calculator
def main():
    root = tk.Tk()
    calculator = Calculator(root)
    root.mainloop()
if __name__ == "__main__":
    main()

calculator.py

'''
This file contains the Calculator class which represents the GUI calculator.
'''
import tkinter as tk
class Calculator:
   def __init__(self, root):
       self.root = root
       self.root.title("Calculator")
       self.entry = tk.Entry(self.root, width=30)
       self.entry.grid(row=0, column=0, columnspan=4, padx=10, pady=10)
       self.create_buttons()
   def create_buttons(self):
       buttons = [
           '7', '8', '9', '/',
           '4', '5', '6', '*',
           '1', '2', '3', '-',
           '0', '.', '=', '+'
       ]
       row = 1
       col = 0
       for button in buttons:
           tk.Button(self.root, text=button, width=5, command=lambda button=button: self.button_click(button)).grid(row=row, column=col, padx=5, pady=5)
           col += 1
           if col > 3:
               col = 0
               row += 1
   def button_click(self, button):
       current = self.entry.get()
       if button == '=':
           try:
               result = eval(current)
               self.entry.delete(0, tk.END)
               self.entry.insert(tk.END, str(result))
           except ZeroDivisionError:
               self.entry.delete(0, tk.END)
               self.entry.insert(tk.END, "Error: Division by zero")
           except Exception:
               self.entry.delete(0, tk.END)
               self.entry.insert(tk.END, "Error")
       else:
           self.entry.insert(tk.END, button)

「シンプルな計算機GUIアプリを作って」とお願いしたとおりなのか、かなりシンプルなコードですね。ボタンをグリッド表示して、計算式は文字列をそのままevalで評価しているようです。(任意コードを実行できてしまいますね...)
manual.mdには使い方と仕様が記載されてました。ドキュメントも整備されていて、しっかり開発してくれています。

開発の様子

生成中はログが高速で流れますが、このときにソフトウェアを開発するための議論が行われています。
その様子をWebアプリ上で再生することができます。再生するためには、ChatDevのルートディレクトリで以下を実行します。

$ python online_log/app.py
please visit http://127.0.0.1:8000/ for demo
 * Serving Flask app 'app'
 * Debug mode: on
please visit http://127.0.0.1:8000/ for demo

Flaskでサーバが立ち上がるので、ブラウザでアクセスし、Chat Replayボタンをクリックします。

左下のFile Uploadボタンをクリックし、先ほど生成されたログファイル(calc_DefaultOrganization_20230901134458.log)を指定後、Replayボタンをクリックするとログが再生されます。

おおまかには、CEO、CPO、CTOが仕様を決めた後、プログラマーとレビュアーでコードをブラッシュアップする、という流れでした。
これを見ると本当に会社として動いている感じがします。

カスタマイズ

ChatDevのアーキテクチャは以下のようになっており、生成されたChatChainConfig.json、PhaseConfig.json、RoleConfig.jsonを変更することで、ChatDevソフトウェア会社をカスタマイズすることができるようです。

詳細はWikiに記載されていますが、公開されているサンプルのコンフィグを参考にするのがよいかもしれません。

まとめ

ChatDevを使用して、仮想ソフトウェア会社(実態はChatGPT)に計算機アプリを開発してもらいました。
付属のWebアプリ上で開発の履歴を見ることができました。
カスタマイズの方法を理解して、もう少し複雑なものを作らせてみたいと思います。

参考

• https://note.com/sumeragi_0258/n/ncf0c1bd92375