「単体テストを手動で行いエビデンス取る」の破壊力 (710レス)
1-

342
(1): 2020/09/27(日)08:00 ID:ZfMHcABY(1) AAS
Google map

外部リンク[java]:github.com

調べると事例なんて腐るほどあるな。

ただ、いまいち自動化という言葉の意味がわからない(ただの無知)。
有償のテストツールを使ったことないけど...自動化とは言えど、テストコードを記述してビルドして実行することには変わりがないのだろう?
無知故の疑問だが、自動化と非自動化の差って何だ?
343
(1): 2020/09/27(日)11:53 ID:cmce3quc(4/7) AAS
>>342
「ちゃんとテストしたのか?」

・自動化
「はい、ここにテストした内容が書いてあります。これを実行しました。
テストに通ったことはテストの実行結果から判断できます。
もう一回やってみろって?コマンドを実行するだけですのですぐ終わります。」

・非自動化
「はい、ここにテストした証拠のスクショがあります。手順通りに実行してOKっぽかったからチェックを入れました。
テストに通ったかどうか?手順通りにやりましたよ!スクショがあるんだから信じてください。
もう一回やってみろって?全部ですか!?何時間、いえ何日かかると思ってるんですか!」
344
(1): 2020/09/27(日)12:14 ID:kiO2NTDS(1/2) AAS
>>343
エビデンスは?
345
(1): 2020/09/27(日)12:17 ID:cmce3quc(5/7) AAS
>>344
あなたがもう一回実行すればいい
あなたもすぐにテストを実行したというエビデンスを作ることができる
346
(1): 2020/09/27(日)12:21 ID:kiO2NTDS(2/2) AAS
>>345
じゃあ、作業未完了だね
納品物にエビデンスって書いてあるじゃん
347: 2020/09/27(日)12:24 ID:cmce3quc(6/7) AAS
>>346
実行した姿をビデオカメラに写しておけばいいだけでは?
このテスト、私が実行しましたってwww

それ以外に何が欲しいんですかねぇ
348: 2020/09/27(日)12:29 ID:VyFDY5e4(1/2) AAS
エビデンスが要求される粒度のテストのためにエビデンス生成フレームワーク作っとくと便利よ
349
(1): 2020/09/27(日)12:33 ID:VyFDY5e4(2/2) AAS
もちろん1番大事なのは自動テストの性質に合わせたエビデンスの形態を定義して、客に受け入れさせる営業力だが
350: 2020/09/27(日)12:50 ID:CqP8QnJk(1) AAS
日曜だから市場で買ったカニの出汁を濃縮してるわ、冷凍してとっとくんだ
これがホントのカニdense
351
(1): 2020/09/27(日)13:02 ID:cmce3quc(7/7) AAS
>>349
テスト自動化のほうが安くなります。
手動で作業したらその分時間がかかります。
スクショとったらその分時間がかかります。
しかもそのとったスクショ、あなた全部検収するんですか?
みたいにいえばOK

金と手間がかかる問題を客に押し付ければ意見は通る
352: 2020/09/27(日)13:25 ID:3AXdWV8W(1/3) AAS
>>351
ええ、そうですよ
353: 2020/09/27(日)17:13 ID:gReWMIlS(6/6) AAS
UIの自動テストはスクショもログ+スクショ自動生成までやってくれるから
本当にエクセルに張り付ける作業は不要なんだよな
スクショ張り付け作業をこれやらされる新人はマジで悲惨
354: 2020/09/27(日)17:29 ID:I+ot45zN(1) AAS
しまいにゃ手動でやれば、バグがあって金がかかろうとも、丁寧な作業をしてると客を騙しはじめるのだろうな
355: 2020/09/27(日)18:28 ID:3AXdWV8W(2/3) AAS
ていうか自動化にエビデンス入ってねぇのかよ
客に出せるレポートなんか出んだろフツー
356: 2020/09/27(日)18:47 ID:9HAdnqqz(1) AAS
エビデンスは手作業で取るもの。自動で撮って誰が確認するというんだ?
客はエビデンスがあることを見てるだけで内容までは確認しないものだぞ

エビデンス撮った本人が、よくわからんが、まあバグっぽくない画面で動いてるからヨシ!ってやって
やっとエビデンスの意味があるというものだろう
357
(1): 2020/09/27(日)23:33 ID:3AXdWV8W(3/3) AAS
ログでもいいやん
正しく動く証明になれば
358: 2020/09/27(日)23:48 ID:mDpIXF3L(1) AAS
Firefox for iOS
外部リンク:github.com

Wire (エビデンスあり)
外部リンク:github.com

kickstarter (エビデンスあり)
外部リンク:github.com
359: 2020/09/28(月)00:00 ID:Z60TNrQV(1) AAS
ログが正しく動いてることを証明するエビデンスが必要

そのエビデンスが正しいことを証明するエビデンスが必要

さらにそのエビデンスが正しい・・・
360
(1): 2020/09/28(月)00:42 ID:IvlPnhNT(1/6) AAS
>>357
ログはたんなる実行結果に過ぎないから正しく動く証明にはなることはないよ

ログを正しく動く証明にするには方法は2つ
1. ログを取った担当者が、それをみて判断する
2. ログを取った人と別の人が担当者が、それをみて判断する

どちらが判断するにしても、正しい答えを知らなければ正しく動くと証明することはできない
だから上の方で言っていた正しい答えなんか事前にわかるわけ無いだろ!それっぽい値ならそれでいいだろ!
なんてのは問題外なわけ。正しく動く証明をしてないわけだから

スクショなんかも、取ったってそれみて後から検証なんかしないでしょ?
今からスクショみてバグが表示されてないか見ますなんてしないでしょ?
省6
361
(1): 2020/09/28(月)01:55 ID:TvE1ypt9(1) AAS
>>360
いや、ログ出力のテスト通ってるし
362: 2020/09/28(月)03:01 ID:XaZwDbHz(1/4) AAS
ログって言葉が独り歩きしてるけど
基本的に自動テストって
・想定通り動いた=OK出力(グリーン)
・想定通り動いていない=NG出力(レッド)
の2観点しかない

自動テストは結果判定もしてるから、実行だけ成功=OKには絶対にならん
(そんなテストを実装してたらぶっ殺されるわ)

で、自動テストのログが当てにならないっていう人って
無意識に以下のパターンを想定してるんだよね
・想定通りに動いて無いにも関わらず、OK出力(グリーン)が出ている可能性がある
省7
363
(1): 2020/09/28(月)08:09 ID:IvlPnhNT(2/6) AAS
>>361
ログ出力のテストって何?

ログの話は「ログ見て人力で目視比較してそれっぽい値ならOK」ってやつでしょ
ログに出力した後に人力比較があるんだよ
364
(1): 2020/09/28(月)09:58 ID:9LRH2lrq(1) AAS
>>363
ログ出力だって機能の一つなんだからテストするでしょ?
ちゃんと指定通りのフォーマットで出てるかどうか?
日時、種別、内容などなどね
しないの?
365: 2020/09/28(月)10:34 ID:kZm+fu8v(1/4) AAS
するわけねえわwwwユーザと関係ないだろうがバカがwwwww
366: 2020/09/28(月)10:35 ID:kZm+fu8v(2/4) AAS
何のためのテストだよwwwwww
意味のないテストやって尺稼ぎしてんじゃねえぞ経営者目線で仕事しろ
367: 2020/09/28(月)10:37 ID:kZm+fu8v(3/4) AAS
ユーザと関係ないところで一生懸命頑張っても誰も認めねえからな
売上に一ミリも寄与しないこと頑張ってどうするんだwwwwwwwww
wwwwユーザから目をそらすために関係ないこと頑張ってるんだろwwwwww
パソコンが好きなだけじゃ会社は成り立たねえんだよwwwwwwwww
368: 2020/09/28(月)10:49 ID:IvlPnhNT(3/6) AAS
>>364
> ログ出力だって機能の一つなんだからテストするでしょ?
わざとかもしれないけど(笑)話がすり替わってる

ログ出力機能のテストの話じゃなくて
○○機能のテストをするとき、その機能の結果をログに出力して
その出力を目視で人力比較してテストするのはアホという話をしてる
369: 2020/09/28(月)10:51 ID:kZm+fu8v(4/4) AAS
単体テストのテストコード書くほうが100倍アホだからwwwwww
wwwwwwwそこんとこ忘れんといてよwwwwwwwwwwwwww
370: 2020/09/28(月)10:51 ID:IvlPnhNT(4/6) AAS
自動テストでも実行結果をログに出力できるわけで
コンピュータで「比較」までやるか、人力で「比較」するか
誰が「比較」するのか?が違う所なんだよね
371: 2020/09/28(月)10:53 ID:a6s5Hb4H(1) AAS
なんかよくわからないところに噛み付いてるのでスルー
372: 2020/09/28(月)10:57 ID:053eSEmA(1) AAS
wの数と知能の高さは反比例するらしい
373: 2020/09/28(月)11:18 ID:IvlPnhNT(5/6) AAS
これの話だからな

289 自分:デフォルトの名無しさん[sage] 投稿日:2020/09/26(土) 20:50:49.34 ID:c/9EiqGf [4/8]
単体テスト(自動テスト)で正しい値と比較 vs 目視確認でそれっぽい値かどうかチェック

って話だったの忘れたのかな?w

291 返信:デフォルトの名無しさん[] 投稿日:2020/09/26(土) 20:52:18.62 ID:IgGP+BQU [29/30]
>>289
結局最後に頼れるのは人間の目だからな
何のために目が付いてるか考えろ
ログを見るためだろうが
374: 2020/09/28(月)13:05 ID:Pd1BjD7i(1) AAS
関数の入力仕様と出力仕様が明確なら
ログ出力関数のテストは簡単

でもログ出力関数を使う処理が正しくログ出力してるかどうかのテストはそう簡単ではない

なぜならログ出力の正しさを判定するためにはログ出力以外の結果は正しいということが事前にわかってなければいけないから

つまりログ出力だけでは処理の正しさを証明することは出来ない

テストで「正しいと証明できる」という考え自体がある種の幻想
375: 2020/09/28(月)15:21 ID:XaZwDbHz(2/4) AAS
このスレ見てると一体どういう自動テストを実装してて
どういうログを流してるのか本当に気になるわ
そんな突き抜けバグ(不具合起きてるのに何故か正常終了扱いになってる状態)を抱えた自動テストばっかり使ってるの?

本当にどういう自動テストを想定してるのか分からん
まさかログに値だけ出して、後でその値が正しいのか人間がチェックしてるのか?
それ自動テストじゃなくて、ただの自動実行だよ
テストっていうならグリーン/レッド判定まで実装してなきゃ使いもんにならん
376: 2020/09/28(月)15:28 ID:IvlPnhNT(6/6) AAS
> 本当にどういう自動テストを想定してるのか分からん
> まさかログに値だけ出して、後でその値が正しいのか人間がチェックしてるのか?

ログに値だけだして〜って言ってる人は、自動テストしてないよ
ログに値だけだして目視確認する手動テストでいいって言ってる
なぜなら正しい結果がわからないから

これ↓ね。こいつの言ってる意味がわからんと思うけど、意味不明だと俺も思うw

28 名前:デフォルトの名無しさん[sage] 投稿日:2020/09/23(水) 20:17:23.00 ID:cCwBtdaA [9/11]
テストと言いつつできるのは計算過程と処理結果を残すだけだと思ってるよ俺は
長年考えた結果
正しい値なんてのは実は物理的に誰も知りえないということを理解した
省3
377: 2020/09/28(月)15:54 ID:6prVz1CN(1) AAS
そろそろレス古事記に構うのをやめようか…
テストはバカだという証明はできるけど、いくら指摘しても修正しない限りバカはバカのままだし
378
(1): 2020/09/28(月)17:44 ID:KzfYiCsA(1) AAS
エビデンスとはテストを端折らずに実行しましたと言う証拠であって
動作の正しさやテスト手順の正しさを証明する証拠ではない

エビデンスという名の作業ログ
379: 2020/09/28(月)17:47 ID:vQtpARZo(1) AAS
自社開発ならエビデンスは要らんよ
しょせん対外的な作業証明でしかないからな
それよりテストコード、テスト可能なコードを書いてくれや
380: 2020/09/28(月)18:18 ID:PsVubO2q(1) AAS
細かいことで揉めるから、
>>1のような提案をする空気だけは読めるバカが出世して管理職になんだな。この業界は
381: 2020/09/28(月)18:49 ID:l/9oGi4t(1/9) AAS
>>378
そのとおり

バグっている場合は、そのバグの様子をスクショしてるだろうからバグがあるというエビデンスにはなるだろう
しかしバグがないというエビデンスにはならない。これは自動テストでも同じだが、大きな違いは
バグってないというスクショをとっても、正しくテストを実行したというエビデンスにはならないという点

スクショ取るだけではテストケースは書いてあっても、そのテストどおりにテストをしたという証拠にはならない
最終結果だけでなく一連の動作を動画で撮影してるならまだわかるが、間違って手順でテストしたかもしれない
つまりエビデンスというのは(手順が間違ってるかもしれないけど)ちゃんと作業しましたという意味にしかならない
どういう手順でテストを実行したかという記録が含まれていない

自動テストの場合は最終結果だけでなくどういう手順でテストを実行したかが記録されている。
省1
382
(1): 2020/09/28(月)18:52 ID:l/9oGi4t(2/9) AAS
スクショには正しい手順でテストを実行したかが記録されていないのだから
作業をしましたという報告でしかない。

バグのスクショは意味があるが、正しく動きましたというスクショは必要ない
だからこれは本来この項目をテストOKでしたとチェックリストにチェックつけるだけで十分

チェックリストにOKでしたというチェックをつければ十分なことに
スクショを必要とするのは、単に作業者の報告を信用してないという意味でしかない
383: 2020/09/28(月)18:59 ID:S2C1y2x2(1) AAS
単体テスト書いとけば改修しても自動で既存機能が壊れてないことが確認できる
ゆえに機能の改修を心置きなくできる
テストがないと気軽に既存機能に手を入れるわけにはいかなくなる
(あたりまえ)
384: 2020/09/28(月)19:04 ID:l/9oGi4t(3/9) AAS
自動テストがないと手動テストをしないといけない
それは膨大な作業量となる
だからバグのないコードを書け、作ったら改修はするな!と叫ぶ

バグがあったときのことまで考えてない
仕様に変更があったときのことまで考えてない

一旦書いたら終わりという前提でいるやつがいる
385
(1): 2020/09/28(月)19:12 ID:DyBDarNn(1) AAS
そのほうがビジネスとしては美味しんだ
テクニカルな面で優れた手法がビジネスでも優れた手法であるとは限らない
386: 2020/09/28(月)20:30 ID:l/9oGi4t(4/9) AAS
>>385
単にビジネスが下手なだけだろ?

内部は楽をして、外部に対してこんなに頑張ってるんですよーってアピールすればいいだけ
外部に頑張りをアピールするために、実際に内部でも無駄に頑張る必要はない
387
(1): 2020/09/28(月)20:34 ID:ogYc/62K(1/2) AAS
>>382
>バグのスクショは意味があるが、正しく動きましたというスクショは必要ない

正しく動いてたと思っていたものに後から不具合が見つかった場合
前回テスト時のスクショがあると調査が効率的にできる
それは自動でも手動でも同じ

>スクショを必要とするのは、単に作業者の報告を信用してないという意味でしかない

個人への信用に依存したシステムはミスがあれば個人を責めることになるのですぐブラック化する
典型的なマネジメント能力不足の例
388
(1): 2020/09/28(月)20:40 ID:l/9oGi4t(5/9) AAS
> 正しく動いてたと思っていたものに後から不具合が見つかった場合
> 前回テスト時のスクショがあると調査が効率的にできる

不具合があると既に分かった後の話ですよね?
スクショがあると、どう効率的に調査できるんですか?
389
(1): 2020/09/28(月)20:48 ID:l/9oGi4t(6/9) AAS
>>387
> 個人への信用に依存したシステムはミスがあれば個人を責めることになるのですぐブラック化する

だから自動テストでコードにするんですよね。他の人がテスト内容をレビューできるように
スクショだと、実際どういう手順でテストしたのかが記録されてないから
ちゃんとテストしてないだろ!って個人を責めることにつながる
390: 2020/09/28(月)20:56 ID:l/9oGi4t(7/9) AAS
手動テストで問題なのが、前やったときのテストと完全に同じ状態が作れないということ
作業の順番でも状態が変わってくるから前後にやったテストによって成功したり失敗したりする

だから改めて同じと思った手順でテストしたら失敗することがある
スクショを取っていても「お前この前ちゃんとやってなかっただろ!」と責められる
391
(2): 2020/09/28(月)20:56 ID:ogYc/62K(2/2) AAS
>>388
自分で考えて

>>389
自動か手動かには関係ない
自動化したUIテストでスクショ取らないのかな?
392: 2020/09/28(月)20:59 ID:l/9oGi4t(8/9) AAS
>>391
UIテストってわざわざ書いたってことは
それ以外には当てはまらないって自覚してるのかなw
393: 2020/09/28(月)21:02 ID:l/9oGi4t(9/9) AAS
自動化したUIのテストでスクショを撮るというのはおかしな表現で
"テスト"を自動化していれば、当然自動的にテストされるわけよ
スクショはいらない

>>391が言ってることのほんとうの意味は
UIのスクショを自動で撮っているだけで
UIのテストは人が目で見てやってる手動テストだろう?

それとも違うんか? UIのテストを人が目で見ず本当に自動化してるんか?
394: 2020/09/28(月)21:50 ID:p7AH+v00(1) AAS
でもいい感じにお高いツールはUIテスト時のスクショも自動で撮ってくれるからねw
ないからっていらないやいって悔し涙流さなくていいぜ
395
(1): 2020/09/28(月)22:13 ID:F7s1Ev+m(1/4) AAS
別に高くなくても取ってくれるやろw
論点はそこじゃない
取った後どうするのかだろ
396: 2020/09/28(月)22:22 ID:wtgFthbS(1) AAS
高いツール使ってるんだぜ悔しいだろ
みたいな意味かな?
397
(1): 2020/09/28(月)22:46 ID:kdgXLiCU(1/2) AAS
>>395
撮ったあとどうするもこうするもお高いツールはクリックすればすぐ見れるんだよ
手動でエクセルに貼る作業とかないから
398: 2020/09/28(月)22:46 ID:kdgXLiCU(2/2) AAS
ただ・・・
(実はあんまり手間減らないんだけどな)
399
(2): 2020/09/28(月)22:49 ID:oBRHa3sA(1/6) AAS
自動化は人間が楽をするために自動化してるだけなんだからログでもスクショでも何でも良いけど、テスト結果がグリーンであってもエビデンスは人間の目で検証しないとダメだよ。自動化の利点は、手動テストやってる要員や係るリソースを他のことに回せるってだけ。
400
(2): 2020/09/28(月)22:59 ID:oBRHa3sA(2/6) AAS
自動テストがプログラマの自己満と言われる所以はテストパターンを無限に作成できるからだよ。sumAtoFで引数を6個取るなら0,0,0,0,0,0から9,9,9,9,9,9の範囲や、マイナス値とか小数点とかnull値を含めていくらでもテストパターンが作れる。しかも再実施も簡単。手動テストじゃそうはいかないからね。
401: 2020/09/28(月)23:04 ID:F7s1Ev+m(2/4) AAS
>>397
見てないでテストしろよw
402
(1): 2020/09/28(月)23:05 ID:F7s1Ev+m(3/4) AAS
>>400
手動テストでもテストパターンは無限に作れると思うが?w
403
(1): 2020/09/28(月)23:05 ID:F7s1Ev+m(4/4) AAS
>>399
> テスト結果がグリーンであってもエビデンスは人間の目で検証しないとダメだよ。
え?なんで?愛情がどうとかどうでもいい話だよw
404: 2020/09/28(月)23:07 ID:oBRHa3sA(3/6) AAS
>>399
あ、初めて自動化したときだけエビデンスの検証してねってこと。次の改修では追加・変更したテストパターンのエビデンスを検証する。それ以外の既存のテストパターンは結果がグリーンであればそれでデグレとしての証明は担保できてると思うよ
405
(1): 2020/09/28(月)23:09 ID:oBRHa3sA(4/6) AAS
>>403
PGした人がテストパターンも作ってたら同じ不具合が混入する可能性があるでしょ
406: 2020/09/28(月)23:11 ID:oBRHa3sA(5/6) AAS
>>402
手動テストでも無限に作れるけど人海戦術しないとテストしきれないでしょ。テストの規模とプロジェクトによってはそんなの現実的じゃない。だから自動化のが簡単。
407: 2020/09/28(月)23:38 ID:XaZwDbHz(3/4) AAS
>>400
>自動テストがプログラマの自己満と言われる所以はテストパターンを無限に作成できるからだよ。sumAtoFで引数を6個取るなら0,0,0,0,0,0から9,9,9,9,9,9の範囲や、マイナス値とか小数点とかnull値を含めていくらでもテストパターンが作れる。しかも再実施も簡単。手動テストじゃそうはいかないからね。
流石にテストパターンの洗い出しすら考えないのは頭おかしいやろ
自動テストの実装コストもタダじゃないし
というか不要なテストパターン(重複してるテストパターン)は消すぞ普通……
408
(1): 2020/09/28(月)23:40 ID:XaZwDbHz(4/4) AAS
というかテスト自動化で無限にテストが出来るって思ってる奴もいるのかよおおおもう

あれだな、デジタル庁も作られるんだし
品質管理の観点として、テストに関してちゃんとガイドラインと共通規格決めてくれ
頭痛くなってきた
409: 2020/09/28(月)23:57 ID:oBRHa3sA(6/6) AAS
>>408
理論上は可能だよねって話をしただけだよ。現場ではそんな無意味なテストしてないから発狂しないでよw

テストパターン考えるときに大丈夫だとは分かっていても不安だから盛り込むパターンも少しくらいはあるよねってこと。人間だもん。ちょっと多めにテストして安心したいよね。
410
(4): 2020/09/29(火)00:00 ID:Iz7+ZlTk(1) AAS
無限に作るとか、藻舞ら、境界値テストを知らんのか?w
例えば、正常範囲を10〜20 と決めたら、論理的に、9, 10, 20, 21 だけでOK のはずw

-1, 0 も、9と同じ。
11, 19 も、10, 20 と同じ
100 も、21 と同じ

こういうのを論理的思考と言う。
どれとどれが、同じグループですか? と言う問題
411
(1): 2020/09/29(火)01:22 ID:xt+EJgQq(1/5) AAS
>>405
> PGした人がテストパターンも作ってたら同じ不具合が混入する可能性があるでしょ

え?なんで?w

テストパターンってお前コードから生成すんのか?
そもそも最初に、入力決めて、出力決めて、
そうなるように作るというのに意味がわからん
412: 2020/09/29(火)01:23 ID:xt+EJgQq(2/5) AAS
>>410
そうやって自動テストでもテストする値を決めるよね
無限に自動テストできるわけじゃないんだからさぁw
413
(2): 2020/09/29(火)02:00 ID:p269Qkae(1/3) AAS
>>411
テストパターンを基にテストコードを書くよ。
最初に入力を決めて次に出力を決めてそうなるようにテストコードを書くよ。
テストを実行したら全部グリーンでもテストコードのコーレビューをするよ。
414
(2): 2020/09/29(火)02:11 ID:xt+EJgQq(3/5) AAS
>>413
> テストパターンを基にテストコードを書くよ。

そのテストパターンが間違っていたらどうするんだ!

まあそういう事はあるよねw テストそのものが間違ってるってこと
でもPGがテストパターンを作ると間違えるってのが意味がわからない
PGが作ってもPG以外が作っても、テストパターンを間違える可能性は変わらない

> テストを実行したら全部グリーンでもテストコードのコーレビューをするよ。
手動テストの場合どうするんだろうね。テストコードに相当するのはテスト手順なわけで
テスト手順もレビューも必要なんだが、手動テストだとテストパターンのレビューしかしてなさそうw
テストパターンはあってるけどテスト手順が間違っていて意味のないテストをしてたりしてな
省1
415
(1): 2020/09/29(火)02:12 ID:xt+EJgQq(4/5) AAS
>>413
> 最初に入力を決めて次に出力を決めてそうなるようにテストコードを書くよ。
ここは言葉が間違ってるね

× 入力を決めて次に出力を決めてそうなるようにテストコードを書くよ。
○ 入力を与えて出力が決めたとおりになってるかを確認するテストコードを書くよ

TDDではそのあとに、テストに通るように実装コードを書く
416: 2020/09/29(火)02:23 ID:MtZ1Pd/Y(1/2) AAS
>>410
9.9999999999999999や20.000000000000001は?

境界値分析+同値分割は基本だけど
型の境界も意識しないとそのうちバグるよ
417
(1): 2020/09/29(火)02:35 ID:MtZ1Pd/Y(2/2) AAS
>>414
>PGが作ってもPG以外が作っても、テストパターンを間違える可能性は変わらない

コードを書いた人とそれに対するテストコードを書いた人が同じなら
同じ勘違いや同じ観点不足が発生するリスクは高まるよ

例えば>>410が書いた例で整数値以外の入力という観点が欠落してれば
コードでもその対応を書かないしテストの必要性にも考えが及ばない

ただだからといって必ず違う人が書いたほうがいいというわけじゃない
低減できるリスクと作業効率とを考えて判断するもの
418: 2020/09/29(火)02:43 ID:p269Qkae(2/3) AAS
>>415
あぁそのとおりだった
419: 2020/09/29(火)02:43 ID:p269Qkae(3/3) AAS
>>414
・PG組んだ人が一番思い込みが強いから、もしかしたら他の有識者と認識が乖離しているかもしれない。まぁレビュアがしっかりしてれば大丈夫。

・手動テストの場合は、テスト条件を満たしていることが担保できるようなスクショを取得するよ。テスト条件どおりに実施してくれたかどうかは実施者を信用するしかないね。エビデンスに細工されたら誰も気づかないと思う。
ちゃんと実施してるつもりでも実際は細かい操作とか大事な操作をミスっちゃってて、それでもたまたま予想結果と一致しちゃう事もあるかもしれない。だけどそんな偶然は滅多に起きない。後でアドホックテストもするし、結合試験や統合試験で発見できればok。

・エビデンスとテスト手順とパターンを見比べて「これは何のテストをなんだ?」って思うことは稀によくあるね。

・手動テストでテストデータが必要な場合は事前準備としてそういうデータを用意してからテスト開始するよ。
420: 2020/09/29(火)03:23 ID:xt+EJgQq(5/5) AAS
>>417
> 例えば>>410が書いた例で整数値以外の入力という観点が欠落してれば
> コードでもその対応を書かないしテストの必要性にも考えが及ばない

だからそれ、コード書かない人でも
整数値以外の入力という観点が欠落することあるじゃんって言ってる

むしろコードを書かない人のほうが、テストの必要性に考えが呼ばないことのほうが多い

「数値入れたらこういう計算してくださいね」
→ 文字入れたら?え?文字入れた時?文字なんて入るの?そんなの想定外だよ
421
(1): 2020/10/01(木)00:35 ID:eJ1GgjYl(1/2) AAS
set○○○系の値を設定するだけのメソッドってあるじゃん

ケース1:resultがOKならOKとする
ケース2:get○○○系メソッドを実行して値を確認する
ケース3:実際にその値の変更の影響をうける処理を実行して確認する

実はもう結合まで来てんだけどどうやって確認する?
422
(2): 2020/10/01(木)01:18 ID:eJ1GgjYl(2/2) AAS
あ、やってみたらget○○○系もよくわかんなかった
値取得できたけどそれが何?
何が取れると正しいの?ってのが一連の処理の流れだと取得できるべき正しい値が本気でわからん
423: 2020/10/01(木)01:47 ID:5ZG2Vz6Q(1/4) AAS
>>421
> 実はもう結合まで来てんだけどどうやって確認する?

確認する前に結合したのが悪いって話だろ?
もうリリースしちゃったんだけどどうやってテストする?みたいな話だw
424: 2020/10/01(木)01:48 ID:5ZG2Vz6Q(2/4) AAS
>>422
> 値取得できたけどそれが何?

「値取得できた」
それがテスト

(手動で)テストしてOKだったから何?と言われてもな
意味ないと思うなら(手動で)テストしないでいいんじゃない?w
425: 2020/10/01(木)01:49 ID:5ZG2Vz6Q(3/4) AAS
>>422
> 何が取れると正しいの?

そんなに作る前からわかってる話ですよね?
作ってるなら「目的」があるはずですが
あなたは一体何を作ってるんですか?
426: 2020/10/01(木)01:50 ID:5ZG2Vz6Q(4/4) AAS
あ、あれか。教科書写経してるだけだから
自分が何を作ってるかわからないとか

んで作ってみて動かしたら・・・ゲームだった!みたいな事やってんの?w
427
(1): 2020/10/01(木)21:43 ID:YGkMqux4(1) AAS
コンパイラ作ってるんだが、検査は自動でランダム構文生成とかしてやってるよ
もちろん普通の検査もやるんだけど、それだけだとパターン数が発散して検査しきれない

ランダム検査はテスト件数でいうと1000億件とかになる
不具合でるのはそのうち5件とかだったりするんだけどね
428: 2020/10/01(木)22:26 ID:bT++viin(1) AAS
>>427
だからそれを手動でやればいいんですよ!
429: 2020/10/02(金)10:25 ID:ccBFPzFH(1/2) AAS
自動化する単体テスト=関数単位のテスト
エビデンスをとる単体テスト=1個の機能のテスト。例えば入力欄1個など
430
(1): 2020/10/02(金)10:30 ID:qiKhE9Co(1) AAS
> エビデンスをとる単体テスト=1個の機能のテスト。例えば入力欄1個など

その"エビデンス"でどうやって入力欄1個の機能がOKだと証明するの?
入力欄1個の機能がOKであると、誰もが認られるようなエビデンスとはどんなものが知りたい
そこに入力欄の画像が1個あったって、機能が満たされてるかなんてわからんしね
431
(1): 2020/10/02(金)10:50 ID:ccBFPzFH(2/2) AAS
>>430
機能がOKだと証明するわけではない
「テスト項目の通り実行したらこの通りの画面になった」
つまり、テストを行ったという事を証明しているにすぎない
だから入力ミスや、テスト実行者の勘違いまではフォローしきれない

機能の証明ではなくテスト実行の証明だから
わざわざエビデンスに日時が入るように撮影することを要件としている

機能がOKだという証明だけであれば日時は不要だろう
実際、自動テストはテスト実行日時など重視していないはずだ
(デバッグの為に日時を保存しているにすぎない)
省3
432: 2020/10/02(金)11:03 ID:5k+kT3LD(1/2) AAS
自己満だろうがなんだろうが顧客が納得すりゃなんでも良い
433: 2020/10/02(金)11:07 ID:sGznlVtc(1) AAS
>>431
> テスト実行者を信用しないのであれば

気にすべき所はテスト実行者を信用するかどうかじゃなくて
ミスなくテストしたかどうかでは?
信用できる人にだって間違えることはあるんだし
434: 2020/10/02(金)11:11 ID:5k+kT3LD(2/2) AAS
テストのテストを作ろう
435: 2020/10/02(金)11:12 ID:qQOsRvHB(1) AAS
画面にせっせと入力して保存ボタン
データベースに登録されてるかチェック

苦しい_(┐「ε:)_
436
(1): 2020/10/02(金)11:23 ID:IN7vVVT4(1) AAS
>エビデンスに日時が入るように撮影することを要件としている

初めて聞いたわw
日付入れたところで改ざん可能なんだから日単位でファイルを上げて
履歴追えるようにしとけば十分だろ
437: 2020/10/02(金)12:25 ID:p0460FPy(1) AAS
>>436
ログの位置がわかりやすいようにってだけだろそこ
438
(1): 2020/10/07(水)06:48 ID:/9qe8bOG(1) AAS
xUnit嫌いな人割と身近にいるわ
単体テストしない派というか
439
(1): 2020/10/07(水)07:43 ID:30MBwAQY(1) AAS
>>438
仕様が決まってるテストはいいが決まっていなかったり曖昧なのは滅茶苦茶時間がかかるので嫌い
440: 2020/10/07(水)10:15 ID:PQSR0KDO(1) AAS
>>439
は?
テスト仕様を決めるのも仕事だろ
441
(1): 2020/10/07(水)10:30 ID:EdLJXccd(1/61) AAS
テスターのな
1-
あと 269 レスあります
スレ情報 赤レス抽出 画像レス抽出 歴の未読スレ AAサムネイル

ぬこの手 ぬこTOP 0.686s*