なぜ自動テストの導入は失敗するのか？ - プログラマーの脳みそ

開発室の雑談。営業側のマネージャが言うには 「今のプロジェクトで自動テストの導入を試みている話をしたら、XXXさんのところでも過去にいくつか導入を試みたけどもみんな上手くいかなかったって話になって」 なるほど？ まあ確かに自動テストはシステム開発にとって魅惑の技法ではあるものの、では導入がうまくいっているか？ というと普及率は低いと言わざるを得ない。私がお手伝いしたプロジェクトでは、元請け側から自動テストをやるお達しが来たわけだが、紆余曲折あって掛け声倒れのような状態になってしまった。 ビジネス書の煽りタイトルのような本件だが、古式ゆかしき受注生産の業務システム開発プロジェクトに自動テストを導入しようとして失敗する事例を聞いたので、僕なりに分析して見出した要素を挙げておこうと思う。 V字モデル ソフトウェア開発の手法としてV字モデルというものがある。 オーダーメイドでシステムを作るにあたっ

[hogeaegxa]

V字でのテストフェーズではバグが出る想定数が決まってて、コーディング時にバグを潰すような真似をすると、テストフェーズでバグが少なすぎてテストしてんのかって叱責されるからな

[Phenomenon]

V字とやらがダメなんじゃないかと思ったらそういう結論だった。コーディングと設計を分離させるとか論理的におかしいんだよな。コーディングは設計そのものだよ。(テ→デ)

[t_motooka]

悪いのはV字モデルではなくて請負契約に基づいた開発体制なのでは？ そこを変えないと自動テストをきちんと扱えていたとしても同じ失敗を繰り返しそう。

[baronhorse]

2021年の記事とは思えねー

[Rinta]

端的に言うと、内製のプロジェクトじゃないから。受託開発では自動テストを導入するメリットがあまり無いと思う。内製は保守と運用まで見ることを考えなければならないので自動テストを導入すると工数圧縮の恩恵を受

[n_231]

V字モデル、概念としては美しいけど人間は作り始めないと分からないという現実と衝突してしまうんだよな

[dexia2]

V字モデルで進む現場も、詳細設計書に引数の定義まで書かれている現場も目立たないだけで、今でも現役ですよ。納品後は大規模改修を入れないから、リファクタもしないし、自動テストする恩恵はほぼないです。

[rck10]

自動テストのメリットは変更修正の際の既存機能保障の為のリグレッションテストの工数軽減であって、ケースそのものの自動生成ではないと思うが。/ 自動実行なのか自動生成なのかという話

[weakref]

ウォーターフォールもVモデルも次工程からのフィードバックを想定しているんだけど…知らない人多すぎじゃない？

[queeuq]

自動テストって継続的に開発を続ける場合に効果を発揮するので、納品してさよーならーだったら書くメリットない。客先が要求してきたのなら当然その分は見積もりすれば良いのでこのモデルだと進んで作る価値がない

[mkusunok]

デカいウォーターフォールのV字モデルで真面目にテストを自動化しようとしたら詳細設計を機械可読で書く必要があるけどそんなの見たことないな

[rlho]

“自動テストを活かすには、詳細設計フェーズとコーディングフェーズが分離されていてはいけない。コーディングフェーズと単体テストフェーズが分離されていてもいけない”

[securecat]

ふーむ。ちょっとあとで読む

[rryu]

結局基本設計の時からテストのことを考慮しないとならないが、影も形もない処理のテスト設計が一発でできることはないのでウォーターフォールでは無理ってだけだと思う。

[zorio]

いつ書かれた記事なのか確認してしまった。データベースアクセスは、モックと差し替えるか、テスト実行の前処理でテーブル作ってデータ入れて、終わったら全部削除するか、の2択では。

[fumokmm]

“データベースにテスト用のリセットボタン、用意してありますか？”

[vamview]

V字モデルが出てくるようなガチガチのウォーターフォール受託開発で、自動テストとかアジャイル系のモダンな概念『も』やれってなって工数が爆発するパターンね。何かを始めるなら何かを止めないと悪い所取りになる

[mas-higa]

次工程からのフィードバック想定してるプロジェクトなんて聞いたことない。前工程は顧客の検収済みだから変更できない。次工程でなんとかして!

[akahigeg]

いっそテストって呼び方が悪いのかもしれん

[rkosaka]

V字だと、テスタビリティが低いとわかった場合はテスタビリティを確保できる工程まで戻るんじゃないかな？

[tagoaskubeya]

自動テストの効果>手動テストの工数となるのは想定する保守フェーズがどれだれ続くか次第では。今後改修がないのであれば自動化の効果は薄い。自動テストは何回も使うときに効果が出てくるものかと。

[yetch]

テスト要員の工数つけたいもんね。

[ducktoon]

テストを書いても何さぼってんだ？ ぐらいの見方をしてくる人がいるせい

[NOV1975]

この手の話を聞くといつも疑問なんだけど、外形的にはV字であっても、詳細設計から単体テストを同一フェーズでこなす、ということの方が今は多いと思うんだが…問題は設計の方だと思うぞ。

[kijtra]

テストの見積もり金額をどう理解してもらうかも大きな壁よね。

[lorenz_sys]

コメントがブクマカの世代と分野をある程度明確にしてる。記事の内容をちゃんとは読んでない人も散見されるが。

[s_hiiragi]

“テスタビリティというのはなんとなくで上がる話ではなくて、テスタビリティを上げるための技法を駆使しなくては上がらないということの一端が分かっていただけただろうか。”

[koroharo]

> 2021年の記事とは思えねー けど、未だにこれが分からずに自動テストで炎上する人たちがいるわけで。

[stamprally]

うだうだ書かなくてもテスト書くと普通に製造工数1.5〜2倍になると考えれば良い。その負担に耐えられるプロジェクトが少ない。

[dagama]

従来の見積もり手法だと自動テスト導入に成功しちゃうと機能追加時のテストに単体レベルからの見積もり入れられなくなっちゃうじゃん？だいたいは金の問題だよ

[suikyojin]

プログラミング言語に0オリジンと1オリジンがあるように、詳細設計とコーディングは不可分。詳細設計とコーディングを分けているのは、違いについて本気で考察したことが無いから。

[stk132]

1回納品して終わりの場合、ユニットテストのテストケースを書く旨味少なくね？継続的に機能追加、修正、リファクタリングしていく前提だと、テストが無いと逆に死ねる

[t10471]

V字モデルというか継続開発前提じゃないと自動テスト意味ないと思う。

[sisya]

もっとシンプルに、テストコードを書く工数が見積もられていないという問題もありそう。コーディングの後半をテストコード作成にみつもりつつ、仕様変更でテストコード作成期間を食い潰す。

[yoiIT]

その思想が通用する未来は無い＞“低スキルの寄せ集めメンバーでベルトコンベアの流れ作業のようにシステムを作ろう！ という思想でやるのであれば。”

[natu3kan]

少数精鋭の方がコンセプトがカチッと決まって成功しやすい印象がある。自動テストって長く使うゲームエンジンみたいな基幹ソフトや継ぎ足しして長く使うモノじゃないとコストをかけるメリットがないように思える。

[gabari]

請負契約だと内部品質を上げる動機が少ないから…

[shikiarai]

自動テストを入れるとテストは自動テストコードの品質を見る工程に変わるからな……

[aox]

ピコピコにばかり頼っていると人間ダメになります