Claude3.5の8k出力を試してみた！

みなさん、AI使ってますか？

今回は、Claude3.5の8k出力を試してみた結果をご報告します！

従来のClaude3.5の出力制限は4kトークンで、日本語では約4000文字程度までしか一度に出力できませんでした。しかし、つい昨日ごろ発表された、8k出力機能（β版です）を使うと8kトークン、つまり日本語で約8000文字程度まで一括で出力できるようになりました。

実際に上記のメッセージに従ってAPI呼び出しを書き換えたところ、8192トークンまできっちり出力されました。出力が長くなった分、処理時間は増えますが、限界まで出力させて1分程度と現実的な時間で結果が得られました。これは1問あたり1秒未満のスピードで、人間が同じ作業をするよりも100倍以上速いペースです。

実験に使ったプロンプトは以下の通りです。あまり工夫していません。learningBOXに仕込んであるプロンプトや、AIクイズ生成で使っているプロンプトは、適切な設問が出力されるよう様々な工夫が入っています。

以下のフォーマットで中学生向けの地理のクイズを100問作ってください。ただし、漢字に関するクイズは含めないでください。
-問題文
-正答
-誤答1
-誤答2

出力結果は以下の通りです。これで4500トークンぐらい使っています。上限は8192トークンなので、もっと長い出力も可能です。

以下に中学生向けの地理クイズを100問作成しました。漢字に関するクイズは含めていません。

1. 日本の首都はどこですか？
-東京
-大阪
-名古屋

2. アメリカ合衆国の首都はどこですか？
-ワシントンD.C.
-ニューヨーク
-ロサンゼルス

3. フランスの首都はどこですか？
-パリ
-ロンドン
-ベルリン

4. 中国の首都はどこですか？
-北京
-上海
-広州

5. オーストラリアの首都はどこですか？
-キャンベラ
-シドニー
-メルボルン

6. ブラジルの首都はどこですか？
-ブラジリア
-リオデジャネイロ
-サンパウロ

7. エジプトの首都はどこですか？
-カイロ
-アレクサンドリア
-ルクソール

8. インドの首都はどこですか？
-ニューデリー
-ムンバイ
-コルカタ

9. カナダの首都はどこですか？
-オタワ
-トロント
-バンクーバー

10. ロシアの首都はどこですか？
-モスクワ
-サンクトペテルブルク
-ノボシビルスク

11. 日本最北の都道府県はどこですか？
-北海道
-青森県
-秋田県

12. 日本最南の都道府県はどこですか？
-沖縄県
-鹿児島県
-宮崎県

13. 日本最大の島はどれですか？
-本州
-北海道
-九州

14. 世界最大の大陸はどれですか？
-ユーラシア大陸
-アフリカ大陸
-南アメリカ大陸

15. 世界最大の海洋はどれですか？
-太平洋
-大西洋
-インド洋

16. 世界最長の川はどれですか？
-ナイル川
-アマゾン川
-ミシシッピ川

17. 世界最高峰の山はどれですか？
-エベレスト
-K2
-カンチェンジュンガ

18. 世界最大の砂漠はどれですか？
-サハラ砂漠
-ゴビ砂漠
-アタカマ砂漠

19. 世界最大の熱帯雨林はどれですか？
-アマゾン熱帯雨林
-コンゴ盆地熱帯雨林
-ボルネオ島熱帯雨林

20. 世界最大の湖はどれですか？
-カスピ海
-スペリオル湖
-ビクトリア湖

21. 日本で最も人口が多い都道府県はどこですか？
-東京都
-大阪府
-神奈川県

22. アメリカ合衆国で最も人口が多い州はどこですか？
-カリフォルニア州
-テキサス州
-フロリダ州

23. 世界で最も人口が多い国はどこですか？
-中国
-インド
-アメリカ合衆国

24. 世界で最も面積が大きい国はどこですか？
-ロシア
-カナダ
-中国

25. 世界で最も小さい国はどこですか？
-バチカン市国
-モナコ
-サンマリノ

26. 日本の国花は何ですか？
-桜
-菊
-梅

27. イギリスの国花は何ですか？
-バラ
-ユリ
-チューリップ

28. フランスの国花は何ですか？
-アヤメ
-ラベンダー
-ひまわり

29. オーストラリアの国花は何ですか？
-ゴールデンワトル
-ユーカリ
-カンガルーポー

30. カナダの国花は何ですか？
-メープルリーフ
-チューリップ
-ひまわり

31. 日本の最高峰は何ですか？
-富士山
-北岳
-奥穂高岳

32. アメリカ合衆国の最高峰は何ですか？
-デナリ
-ホイットニー山
-エリアス山

33. アフリカ大陸の最高峰は何ですか？
-キリマンジャロ
-ケニア山
-ルウェンゾリ山

34. ヨーロッパの最高峰は何ですか？
-モンブラン
-マッターホルン
-エルブルス山

35. オーストラリアの最高峰は何ですか？
-コジオスコ山
-タウンゼント山
-ミューラー山

36. 日本最大の湖は何ですか？
-琵琶湖
-霞ヶ浦
-サロマ湖

37. アフリカ最大の湖は何ですか？
-ビクトリア湖
-タンガニーカ湖
-マラウイ湖

38. 北アメリカ最大の湖は何ですか？
-スペリオル湖
-ミシガン湖
-ヒューロン湖

39. 南アメリカ最大の湖は何ですか？
-チチカカ湖
-マラカイボ湖
-ポーポー湖

40. ヨーロッパ最大の湖は何ですか？
-ラドガ湖
-オネガ湖
-ヴェネルン湖

41. 日本最長の川は何ですか？
-信濃川
-利根川
-石狩川

42. アフリカ最長の川は何ですか？
-ナイル川
-コンゴ川
-ニジェール川

43. 南アメリカ最長の川は何ですか？
-アマゾン川
-パラナ川
-オリノコ川

44. ヨーロッパ最長の川は何ですか？
-ボルガ川
-ドナウ川
-ドニエプル川

45. オーストラリア最長の川は何ですか？
-マレー川
-ダーリング川
-マランビジー川

46. 日本の国鳥は何ですか？
-キジ
-ツル
-スズメ

47. アメリカ合衆国の国鳥は何ですか？
-ハクトウワシ
-ワシントンワシ
-アメリカンイーグル

48. インドの国鳥は何ですか？
-クジャク
-ワシ
-オウム

49. メキシコの国鳥は何ですか？
-ゴールデンイーグル
-ケツァール
-トキ

50. ニュージーランドの国鳥は何ですか？
-キウイ
-タカヘ
-ケア

51. 日本の気候は主にどのタイプですか？
-温帯
-熱帯
-寒帯

52. サハラ砂漠の気候は主にどのタイプですか？
-砂漠気候
-地中海性気候
-熱帯雨林気候

53. アマゾン川流域の気候は主にどのタイプですか？
-熱帯雨林気候
-サバナ気候
-温帯気候

54. シベリアの気候は主にどのタイプですか？
-亜寒帯気候
-地中海性気候
-ステップ気候

55. オーストラリアの中央部の気候は主にどのタイプですか？
-砂漠気候
-熱帯気候
-温帯気候

56. 日本の主要な宗教は何ですか？
-神道と仏教
-キリスト教
-イスラム教

57. インドの主要な宗教は何ですか？
-ヒンドゥー教
-仏教
-キリスト教

58. サウジアラビアの主要な宗教は何ですか？
-イスラム教
-ユダヤ教
-キリスト教

59. イタリアの主要な宗教は何ですか？
-キリスト教（カトリック）
-イスラム教
-ユダヤ教

60. タイの主要な宗教は何ですか？
-仏教
-ヒンドゥー教
-キリスト教

61. 日本の主要な言語は何ですか？
-日本語
-英語
-中国語

62. ブラジルの主要な言語は何ですか？
-ポルトガル語
-スペイン語
-英語

63. インドの主要な言語は何ですか？
-ヒンディー語と英語
-ウルドゥー語
-ベンガル語

64. スイスの主要な言語は何ですか？
-ドイツ語、フランス語、イタリア語、ロマンシュ語
-英語
-スペイン語

65. フィリピンの主要な言語は何ですか？
-フィリピノ語と英語
-スペイン語
-中国語

66. 日本の主要な産業は何ですか？
-製造業とサービス業
-農業
-鉱業

67. サウジアラビアの主要な産業は何ですか？
-石油産業
-観光業
-農業

68. オーストラリアの主要な産業は何ですか？
-鉱業と農業
-製造業
-観光業

69. スイスの主要な産業は何ですか？
-金融業と時計産業
-農業
-石油産業

70. タイの主要な産業は何ですか？
-観光業と製造業
-鉱業
-石油産業

71. 日本の通貨は何ですか？
-円
-ドル
-ユーロ

72. イギリスの通貨は何ですか？
-ポンド
-ユーロ
-ドル

73. ロシアの通貨は何ですか？
-ルーブル
-ユーロ
-ドル

74. メキシコの通貨は何ですか？
-ペソ
-ドル
-ユーロ

75. 韓国の通貨は何ですか？
-ウォン
-円
-ドル

76. 日本の政治体制は何ですか？
-立憲君主制
-共和制
-絶対君主制

77. アメリカ合衆国の政治体制は何ですか？
-共和制
-立憲君主制
-絶対君主制

78. サウジアラビアの政治体制は何ですか？
-絶対君主制
-共和制
-立憲君主制

79. ドイツの政治体制は何ですか？
-連邦共和制
-立憲君主制
-絶対君主制

80. タイの政治体制は何ですか？
-立憲君主制
-共和制
-絶対君主制

81. 日本の国旗の色は何色ですか？
-白と赤
-青と白
-緑と赤

82. フランスの国旗の色は何色ですか？
-青、白、赤
-赤、白、青
-緑、白、赤

83. ブラジルの国旗の色は何色ですか？
-緑、黄、青
-赤、白、青
-黒、赤、黄

84. 南アフリカの国旗の色は何色ですか？
-赤、青、緑、黄、白、黒
-赤、白、青
-緑、白、オレンジ

85. インドの国旗の色は何色ですか？
-オレンジ、白、緑
-赤、白、青
-黄、赤、黒

86. 日本の四大工業地帯の一つではないのはどれですか？
-北九州工業地帯
-東海工業地帯
-札幌工業地帯

87. アメリカの五大湖に含まれないのはどれですか？
-ウィニペグ湖
-エリー湖
-オンタリオ湖

88. ヨーロッパの主要な山脈ではないのはどれですか？
-ウラル山脈
-アルプス山脈
-アンデス山脈

89. アフリカの主要な川ではないのはどれですか？
-ミシシッピ川
-ナイル川
-コンゴ川

90. アジアの主要な砂漠ではないのはどれですか？
-サハラ砂漠
-ゴビ砂漠
-タクラマカン砂漠

91. 日本の火山ではないのはどれですか？
-エトナ山
-富士山
-桜島

92. 世界遺産に登録されている日本の城はどれですか？
-姫路城
-大阪城
-名古屋城

93. 世界三大瀑布に含まれないのはどれですか？
-ナイアガラの滝
-イグアスの滝
-華厳の滝

94. G7（主要7カ国）に含まれない国はどれですか？
-中国
-イタリア
-カナダ

95. BRICs諸国に含まれない国はどれですか？
-メキシコ
-ブラジル
-インド

96. 日本の三大平野に含まれないのはどれですか？
-関東平野
-濃尾平野
-石狩平野

97. アジアの主要な半島ではないのはどれですか？
-イベリア半島
-アラビア半島
-インドシナ半島

98. 世界の主要な海峡ではないのはどれですか？
-パナマ運河
-ジブラルタル海峡
-マラッカ海峡

99. 世界の主要な島ではないのはどれですか？
-グリーンランド
-マダガスカル
-アンタークティカ

100. 世界の主要な湾ではないのはどれですか？
-ハドソン湾
-ベンガル湾
-アマゾン湾

今までの4k出力であっても、繰り返して出力することで設問の分量は稼げます。しかし、複数回に分けて出力した場合には、同じ問題が重複して出力されてしまう傾向があります。今回は8k出力対応のclaude3.5を使って一括生成することで、そのような問題を避けつつ大量の問題を生成できました。

AIが生成した問題の内容や選択肢が適切かどうかは、人間の目で評価することが重要です。AIはあくまでも補助ツールであり、最終的な判断は人間が行う必要があります。それでも、AIを活用することで作業時間を大幅に短縮できるのは事実です。ぜひ皆さんも試してみてください。

AIの力を上手に活用して、効率的な作業を実現しましょう！

実験時に気づいたこと・気になったこと
・既存のAPIモデルに対して、追加ヘッダーを送っても特に支障はなかった。
・漢字の問題を作るな！という指示をしないと質の低い問題がかなり発生した
　⇒使うモデルや用途によってプロンプトを調整していくことは重要だと再確認した。