ERABAIがツールをどう評価しているかを、すべて公開します。どんな条件で試し、何を測り、どう点数を付けたのか。これが分からない評価には意味がないと考えているからです。
評価の前提
- ツールはすべて運営者が自費で契約し、実際の仕事で使ったうえで評価しています
- 比較記事では、全製品にまったく同じ課題を投げます
- 評価軸と配点は同じカテゴリ内で必ず統一します。記事ごとに基準を変えることはしません
- 実際に測っていない項目には点数を付けません
8つの評価軸と配点
総合スコアは、以下の8項目を5点満点で採点し、重みを掛けて算出しています。
| 評価軸 | 重み | 何を見ているか |
|---|---|---|
| 出力品質 | 25% | 指示への追従度、事実の正確さ、構成の妥当性 |
| 時短効果 | 20% | 手作業と比べた所要時間の削減率 |
| 日本語品質 | 15% | 不自然な直訳調・誤用・敬語崩れの少なさ |
| 料金妥当性 | 15% | 得られる価値に対する月額の納得感 |
| 操作性 | 10% | 初回セットアップから最初の成果物までの速さ |
| 無料版の実用度 | 5% | 無料のまま実務で使えるか |
| サポート | 5% | 日本語対応、問い合わせ手段、応答実績 |
| 解約しやすさ | 5% | 画面内で完結するか、最低契約期間、返金の有無 |
出力品質と時短効果に配点の45%を割いています。実務で使う道具である以上、「良いものが早くできるか」が最も重要だと考えているためです。逆に、解約しやすさのように読者が一度しか経験しない項目は配点を低くしています。
採点の基準
感覚で点を付けないよう、各軸に判定基準を決めています。
出力品質
| 5 | 修正なしで実務にそのまま出せる |
| 4 | 軽微な手直しが1〜2箇所 |
| 3 | 数箇所の修正が必要 |
| 2 | 大幅な書き直しが必要 |
| 1 | 実務で使えない |
時短効果
削減率 = 1 −（ツール利用時間 ÷ 手作業時間）
| 5 | 70%以上の削減 |
| 4 | 50〜70% |
| 3 | 30〜50% |
| 2 | 10〜30% |
| 1 | 10%未満 |
日本語品質
| 5 | 日本語ネイティブの文章と区別がつかない |
| 4 | わずかに不自然な箇所がある |
| 3 | 直訳調が目立つ |
| 2 | 意味は通るが手直しが必須 |
| 1 | 誤用が多く読めない |
その他の軸
- 料金妥当性：5=この価格なら即決 / 4=妥当 / 3=やや割高だが機能で納得 / 2=割高 / 1=価格に見合わない
- 操作性：5=説明なしで最初の成果物に到達 / 4=ヘルプを1回見た / 3=数回詰まった / 2=設定に30分以上 / 1=日本語情報がなく到達困難
- 無料版の実用度：5=無料のまま実務で回せる / 4=軽い用途なら十分 / 3=お試しの範囲 / 2=ほぼ機能しない / 1=無料版なし
- サポート：5=日本語の有人対応で返答が速い / 4=日本語チャット・メールあり / 3=メールのみ、英語混在 / 2=FAQのみ / 1=問い合わせ手段が不明瞭
- 解約しやすさ：5=管理画面から数クリック、日割り返金あり / 4=画面内で完結 / 3=手続きが分かりにくい / 2=問い合わせ必須 / 1=最低契約期間や違約金がある
「検証中」と表示される場合
8軸すべてを実際に測るまで、総合スコアは算出しません。1つでも未検証の軸があるツールは「検証中」と表示されます。
推定値で埋めれば見た目は整いますが、それをやった時点でこのサイトの数字は意味を失います。検証が終わっていない項目は、正直に未検証と書きます。
標準検証タスク
カテゴリごとに共通の課題を決め、全製品に同じものを投げています。プロンプトも入力素材も完全に同一です。
文章作成・チャットAI
- 物語の構成：同一の設定・条件から構成案を作成させる
- 資料作成：同一のテーマと枚数指定で、構成と本文を作成させる
- プログラム作成：同一の仕様から実装させ、実際に動作するかを確認する
- リサーチ：同一の調査依頼を出し、事実の正確さと出典の有無を確認する
記録している項目：所要時間 / 修正が必要だった箇所数 / 事実誤りの有無 / 出力をそのまま使えたか
新しいカテゴリを扱う際は、まず標準タスクを定義してからテストを始め、その内容をこのページに追記します。
検証環境
| OS | macOS |
| ブラウザ | Google Chrome |
| 回線 | 自宅の固定回線 |
| アカウント | 各記事に使用プランを明記（無料版 / 有料版のどちらで検証したか） |
環境によって結果が変わりうる項目（処理速度など）は、その旨を記事内に明記しています。
評価の中立性について
ERABAIはアフィリエイト広告を掲載しており、記事経由で契約があった場合に報酬を受け取ることがあります。そのうえで、次の3点を守っています。
- 報酬額でスコアや掲載順を変えない。点数は上記の基準だけで決めています
- 報酬が発生しないツールも同じ基準で評価し、良ければ推奨します
- 企業から金銭や物品の提供を受けて記事を書いていません。今後そうした記事を書く場合は、必ずその旨を明記します
広告を含むページには、冒頭にプロモーションを含む旨を表示しています。
情報の更新について
- 料金・プランは公式サイトで確認し、確認した日付を記事に明記しています
- 料金情報は四半期ごとに全記事を見直しています
- 製品のアップデートでスコアが変わりうるため、比較記事は半年を目安に再検証します
- 記事には公開日と最終更新日を表示しています
それでも情報が古くなることはあります。誤りを見つけた場合はお問い合わせから教えてください。確認のうえ修正し、更新日を改めます。
この評価基準の限界
正直に書いておきます。
- 出力品質や日本語品質の判定には、運営者の主観が含まれます。基準を言語化して揺れを抑えていますが、完全に客観的ではありません
- 検証は特定の用途・特定の環境でのものです。用途が違えば結論は変わりえます
- AIツールは更新が速く、検証時点の評価が数ヶ月後も当てはまるとは限りません
スコアは判断材料のひとつとして使ってください。最終的にご自身の用途で無料版を試すことをおすすめします。