# タイトルコール ようこそ、世界が広がるソフトウェア品質で このチャンネルでは、QnAエンジニアのサミーが ソフトウェアテストやソフトウェアの品質保証を中心に 日々奮闘していることや考えていることをお話しします。 毎日、お昼の12時30分に配信しています。 ゲストの方やリスナーのあなたと テストや品質の世界を広げていきます。 # Magic Podを3週間使ってみて こんにちは、QAエンジニアのサミリです。 今週も振り返っていますか? 今回はですね、マジックポットを最近使い始めたんですよ。 なので、それを使ってみて感じたことだったりとか、 こういう風にしていきたいなとか、迷ったところとかをお話ししていきます。 今回の放送の構成ですが、まず前提として、 ツールを導入しようと思った背景だったり、課題感だったり、目的というところをお話しします。 続いて、どんなツールを使ってみたのかというところですね、 2つほどトライアルを使ってみたので、そこら辺の少し導入までの経緯をさらっとお話ししようと思っています。 最後が、じゃあ実際マジックポットを使って3週間ほど経つんですけれど、 いいなと思うポイントと、ここなかなかどうしようか悩むなみたいなところとかをいくつか、 ざっくばらんにお話ししていきます。 順番にお話ししていきます。 まず最初が前提のところですね。 なぜ1位の児童課を始めようと思ったのか、ツールを導入しようと思ったのかなんですけれど、 きっかけなのかな、今リグレッションテストがすごく増えてきちゃってるんですよというのが大きなきっかけになります。 モバイルアプリが2つあって、それぞれでだいたい700ケースずつあって、1400とかだいたいそのくらいあるんですけど、 今後新しい機能が増えていくとなると、リグレッションテストも増えていくので、 なかなか1日で、今は手動で1日かけてリリースの前にリグレッションテストを手動で実行してるんですけど、 それだと1日で終わらなくなってきそうだなというのが今の課題感ですね。 少なくともリグレッションテスト、リリース前の最後の確認のテストという意味だと、 どんなに最低限1日に抑えたいですし、どちらかというとそれはさらに早く短縮できるようにしていきたいというのが狙いとしてはあったりします。 いつに自動テスト、自動テストは必ずそのテストの目的としては、 いとせのデフォルトを検出したいというところと、 ともにその全部の機能を全部網羅的にやろうとは全く思っていなくて、 最低限のユーザー体験を継続的に担保することというのを、 自分の中でというか今やっているプロジェクトにおいて、いつに自動テストの目的というふうに定めています。 なので基本的には最もよく使われる主要なビジネスシナリオをカバーしたいというふうには考えています。 中期的にはCICDにも入れて、1日に1回ぐらいは実行できるようにしたらできるといいなというふうには考えていたりします。 ということでここまでが前提のお話でした。 続いて導入に向けてというところなんですけど、今回トライアルを2つツールチャレンジしてみました。 1つがMableでも1つがMagicBotですね。 最初Mable使ってみたんですけれど、iOSのほうの環境のセットアップがちょっとできなかったというか、 サポートに連絡を入れたんですけど、返事が返ってきたのか来ないのかみたいな。 ちょっと別の方に、iOSエンジニアの方にサポートしてもらって対応してたんですけど、なかなかそこのセットアップがうまくいかず、挫折してしまいました。 その後続いてMagicBotをトライアルで利用させてもらいまして、環境のセットアップものの15分ずつぐらい、 iOSとAndroidとそれぞれ15分ずつぐらいで環境を整えることができました。 ツール選定にあたってはいくつかテストを作って実行してみるというところまでやってみようと考えてました。 具体的にはまずログイン絶対必要になってくるログインログアウトの部分と、あとは外部サービスとの連携が必要そうな部分ですかね。 例えばアカウントの新規登録、メールアドレスでアカウント登録するときに、メール側でURLをタップしてで認証しなきゃいけないとか、 あとは課金系ですかね。有償、有料のコンテンツを買うときに決済が走るので、そこら辺がうまく一時の自動テストのツールでも実現できるかなというところが気になったので、 3つほど機能をピックアップして実現できるのか、実装テストを作るのにどのくらい大変そうなのかというところを見ながら、 そのツールを導入するのかどうするのかを決めようというふうに考えていました。 ぬるっと3つ目の実際使ってみてどうなのかというところに入っていきます。 最初にログインとかログアウトのテストを作り始めたんですけど、テストを作るっていうのはすごく簡単だなというふうに感じたのが本当に第一印象です。 最初にログインのテストとかを作ってつまずいたポイントっていうんですけど、他の次の別の機能のテストを作ろうってなったときに、 そのログインのテストって使い回したいですよねっていうところでは共通ステップだったかなっていう機能は見てわかったので、 そういうのを使ったりしたんですけれど、メールアドレスとパスワードについてはいろんなテストケースで使い回したいですよね。 それを毎回各テストでベタ書きでこのログインメールこれこれという値を入れるみたいにしちゃうと、 メンテナンスしづらいじゃないですか。そんな話のお相談をサポート、セールスの方からにさせていただいたら、 共有変数というのがあるのでそちらで指定してあげると、テストケースをまたいでログインのメールとパスワードを使うことができますよというふうに教えていただきました。 ここが二つ目のいいなと思ったポイントなんですけれど、サポートがすごく手厚くて、 テスト作成中だったりとか、エラーのテスト結果の画面からも簡単に問い合わせができますし、 その後メールいただいてやりとりとかもすごく印象が良くて、何でも聞いてくださいという感じでかなり助けていただきました。 あとつまずいたところはメールテストのセットアップですね。 サポートの方からはヘルプページのここを見てやっていただければというふうに教えていただいたんですけど、 Pythonをインストールしなきゃいけないとか、PIPを入れなきゃいけないとか、パス通ってないとかというふうになりまして、 ちょっとあわあわしてたんですけれど、周りのエンジニアの方の力を借りまして、メールのテストも実行できるようになりました。 ヘルプページの内容も分かりやすくて、ほぼほぼ読んでいって、ここどういうことだろうみたいなない状態でスムーズに進めることができました。 ちなみに参考程度ですけど、その新規登録、メールを使うテスト、新規登録のテストというのは、 iOSとAndroidと2つテストを作ったんですけど、全部もろもろ入れて4時間ぐらいでテストを作れたかなという感じです。 あとその決済関連のところ、コンテンツを購入するというところもアプリの方でコンテンツを選んで、 ウェブページに遷移してそこで購入、アプリ側で登録しているクレジットカードの情報を使って購入するみたいなところも、 そんなに大きくつまずくことなく進めることができました。 こんな感じで大体一番難しそうだなと思っていた部分のテスト作成ができたので、 よしこれなら拡張できそうだぞという自信というんですかね、そんな意欲も湧いてきてMagicPodを導入することにしました。 この先ですけれど、自分の仕事の月の目標でどのくらいのテストを自動化するのかというのもざっくり数字定量目標は立てていて、 実は4月が1ケースだったので無事に4月は2ケースかな、ログインとログアウトで2つというふうにカウントして、 2ケース分を実装して、実装というのかな、テストを作って定期実行で回し始めることができました。 来月の5月は目標が5個なので、機能なのかシナリオなのかというところをピックアップして作っていきたいと思っています。 実際使ってみてちょっと迷っているのが、MagicPod内のテストの管理方法というんですかね、 まず最初にプロジェクトがあって、その中にフォルダだったりテストを入れられるんですけど、 USとAndroidとそれぞれ同じ名前というかログインはAndroidのログインとUSのログインというのが2つできるし、 それをどういうふうに管理していったらいいのかなとかちょっと迷っていたりします。 あとは一つのテストのスコープというか切り方、今今回はログインというのと新規登録とか〇〇という有料コンテンツの購入というところで分けてテストを作ったんですけれど、 そういう機能という分割でよかったのか、もう少しログインしてからユーザーのやりたいことを一通りやってからログアウトするみたいな流れにしたほうがいいのかというのは今ちょっと悩んでいるところです。 とはいえまずはこの小さいパーツでログインをするとか、このコンテンツを聞くとか購入するとかというところをちょこちょこちっちゃく作って部品を作っていくと、 もう少しそのうち初めてこのプロダクトを触る人だったらみたいな大きなシナリオもできるのかな、 でもそういうシナリオって自動化する意味があるのか、人の目でやったほうがいいのかみたいなところはちょっと悩みながら試行錯誤していけたらいいかなというふうに考えております。 # 今日のほっこり話🌊🚢 今日のほっこり話です。船の話をします。 先日からですね、夫が小型船舶免許の講習に行っていって、とうとう合格して帰ってきました。 まあなので早速船借りてレンタルして乗せてようなんて話をしたんですけれど、 まだ少し不安なようなのと、あと意外にと言いますか、船借りるのがいろいろお金がかかるようなので、 いからくらいかかるのかというところをまず出してですね、 なんか夏ぐらいに船に乗りながらご飯とかちょっと飲み物を飲みながらボーッとするなんてことができたらいいなぁなんて妄想しております。 以上今日のほっこり話でした。 # 次回予告 今回も最後までお聞きいただきありがとうございました。 次回はですね、Voicyのトークテーマにのって、最近読んだ本の話についてお話しをしようと思っております。 今回の放送を聞いて、なるほどな、確かにな、まだ微になったなと思った方はぜひ、 画面右下、ハートマークでいいねを押していただけると、とっても励みになります。 学んだこと、気になったこと、考えたことなどをアウトプットすると、より定着しますので、ぜひコメント欄も活用してみてください。 それではまた明日お会いしましょう。ごきげんよう。