#author("2025-05-09T15:39:56+09:00","default:irrp","irrp") #author("2025-05-26T23:05:44+09:00","default:irrp","irrp") →大規模言語モデル →OpenAI関連 →LLMのローカル知識対応 →画像生成 ←DALL・E3についてはこちらへ →音声処理関連 ←Whisperについてはこちらへ →Microsoft Azure ←Azure OpenAI Serviceについてはこちら #contents *サブトピック [#ad901de3] -OpenAIのAPI一般 -LLMライブラリ(LangChain/LlamaIndex) -ChatGPTの派生機能 *Realtime API [#fa630da3] -[[OpenAI 公式の「Realtime API Agents Demo」の試してみた時のメモ #JavaScript - Qiita>https://qiita.com/youtoy/items/18e58fa2e96bfb64de28]] 2025.1 -[[OpenAI の Realtime API を使ってAIと音声会話するWebアプリを実装してみる | 豆蔵デベロッパーサイト>https://developer.mamezou-tech.com/blogs/2024/10/16/openai-realtime-api-nuxt/]] 2024.10 -[[OpenAI の Realtime API で音声を使って任意の関数を実行する(Function calling編) | 豆蔵デベロッパーサイト>https://developer.mamezou-tech.com/blogs/2024/10/09/openai-realtime-api-function-calling/]] 2024.10 -[[Realtime APIとLangChainによる音声対話検索エージェントを試す #langchain - Qiita>https://qiita.com/hedgehog051/items/30b5573a9f2cf50de651]] 2024.10 -[[OpenAI の Realtime API の使い方|npaka>https://note.com/npaka/n/nf9cab7ea954e]] 2024.10 *Structured Outputs [#bfa3e52e] -[[Structured Outputsのコールドスタート問題は解消されたのか?>https://zenn.dev/headwaters/articles/4e0610bfd66134]] 2025.5 -[[RAGでOpenAI APIのStructured Outputsを使い倒す - every Tech Blog>https://tech.every.tv/entry/2024/11/11/160208]] 2024.11 -[[OpenAI の Structured Outputs 構造化出力のプロセスを outlines から学ぶ #Azure - Qiita>https://qiita.com/nohanaga/items/e0d14d08e6c02ca7805f]] 2024.8 -[[OpenAIのStructured Outputsを使ってAIの出力スキーマを定義する | 豆蔵デベロッパーサイト>https://developer.mamezou-tech.com/blogs/2024/08/10/openai-structured-output-intro/]] 2024.8 -[[OpenAIのAPIレスポンスに自作スキーマを設定できるようになった😄 #Python - Qiita>https://qiita.com/eno49conan/items/5d7e8dfc3849880cb893]] 2024.8 -[[OpenAI API の Structured Outputs の使い方|npaka>https://note.com/npaka/n/nd8b775c8744b]] 2024.8 *Function Calling [#o585f19e] -[[Azure OpenAIのFunction CallingとJSON Modeの違いと使いどころ>https://zenn.dev/microsoft/articles/azure-openai-function-calling-json-mode]] 2023.11 -[[Chat Completion API の Function Calling を使用して対話で EC2 インスタンスを起動する - サーバーワークスエンジニアブログ>https://blog.serverworks.co.jp/openai-function-calling]] 2023.11 -[[Google Colab で OpenAI API の Function Calling を試す|npaka>https://note.com/npaka/n/nc3713dba5df6]] 2023.11 -[[より高速に効率的にFunction callingを実行できる!!OpenAI DevDayで発表されたFunction callingの並列実行について試してみた。 | DevelopersIO>https://dev.classmethod.jp/articles/openai-update-at-devday-function-calling/]] 2023.11 -[[OpenAI に毎回返事をしてほしくないという要望を実現してみよう>https://zenn.dev/microsoft/articles/openai-reply-only-if-i-requested]] 2023.11 -[[[初心者向け]AWS LambdaでOpenAI API のFunction Callingを試してみた | DevelopersIO>https://dev.classmethod.jp/articles/aws-lambda-function-calling/]] 2023.10 -[[ChatGPTのFunction CallingでUIを動的レンダリングしたら楽しかった>https://zenn.dev/yutakobayashi/articles/function-call-dynamic-ui]] 2023.10 -[[ChatGPT Function Calling で enum の配列を扱う - Qiita>https://qiita.com/akiraak/items/0f886b8ccd3a8bace8a9]] 2023.8 -[[ChatGPT APIのFunction callingを使って、請求書の構造化データを抽出する | gihyo.jp>https://gihyo.jp/article/2023/07/programming-with-chatgpt-04]] 2023.7 -[[bk_GPTのFunction callingを使って自然言語が新たなインターフェースになるかを試してみる | DevelopersIO>https://dev.classmethod.jp/articles/gpt%E3%81%AEfunction-calling%E3%82%92%E4%BD%BF%E3%81%A3%E3%81%A6%E8%87%AA%E7%84%B6%E8%A8%80%E8%AA%9E%E3%81%8C%E6%96%B0%E3%81%9F%E3%81%AA%E3%82%A4%E3%83%B3%E3%82%BF%E3%83%BC%E3%83%95%E3%82%A7%E3%83%BC/]] 2023.6 -[[Function calling で ChatGPT の人格とスキルセットを切り替える | GMOアドパートナーズ TECH BLOG byGMO>https://techblog.gmo-ap.jp/2023/06/30/chatgpt-function-calling-change-chat-mode/]] 2023.6 -[[Function callingを使ってタスク管理を試してみた - Qiita>https://qiita.com/kp047i/items/43f2d99a8b7fa4770342]] 2023.6 -[[ChatGPTの新機能「Function Calling」にはやはりPostmanが便利 - Qiita>https://qiita.com/nagix/items/38510cb081894b994219]] 2023.6 -[[OpenAI Function callingで複雑なタスクを簡単に実現 - Qiita>https://qiita.com/canadie/items/161aaa41a5d110470e8f]] 2023.6 -[[【ChatGPT】新機能「Function calling」が凄すぎた - Qiita>https://qiita.com/Haru141/items/b86afc15c883e2fda423]] 2023.6 -[[ChatGPT APIの新機能 Function calling についてTodoリストを使って実践的に紹介|ChatGPT研究所>https://chatgpt-lab.com/n/nb2020dbfd072]] 2023.6 *Assistants API [#s9defef7] -[[GPT-4oとStreamlitでOpenAI Assistants APIのCode Interpreterを検証した現状と課題>https://zenn.dev/seiya303/articles/fc39c47e27d414]] 2024.5 -[[【ChatGPT】Assistants APIの超簡単な導入方法 | ジコログ>https://self-development.info/%e3%80%90chatgpt%e3%80%91assistants-api%e3%81%ae%e8%b6%85%e7%b0%a1%e5%8d%98%e3%81%aa%e5%b0%8e%e5%85%a5%e6%96%b9%e6%b3%95/]] 2024.5 -[[openai/openai-assistants-quickstart: OpenAI Assistants API quickstart with Next.js.>https://github.com/openai/openai-assistants-quickstart]] 2024.5 -[[OpenAI Assistants API(v2)で新しくなったFile Search(Vector Stores)を使う | 豆蔵デベロッパーサイト>https://developer.mamezou-tech.com/blogs/2024/04/21/openai-file-search-intro/]] 2024.4 -[[OpenAI API の Assistan API v2 の新機能|npaka>https://note.com/npaka/n/n4438384c96d0]] 2024.4 -[[OpenAI Assistants APIのストリームレスポンスでUXを改善する | 豆蔵デベロッパーサイト>https://developer.mamezou-tech.com/blogs/2024/04/10/openai-assistants-api-stream/]] 2024.4 -[[OpenAI APIのAssistants APIを使用して、ファイルのやり取りを含むアシスタントを作成してみた。 | DevelopersIO>https://dev.classmethod.jp/articles/openai-assistants-api-code-interpreter-upload-download/]] 2024.2 -[[OpenAI Assistants APIを利用する際の注意点をまとめてみた | DevelopersIO>https://dev.classmethod.jp/articles/note-for-using-openai-assistants-api/]] 2024.2 -[[OpenAIのAssistants APIを使用してチェック業務を自動化してみた #Kotlin - Qiita>https://qiita.com/haraitai00/items/fb9e85101ab681dfd414]] 2024.1 -[[OpenAI Assistants APIを使って分析用SQLを生成してみる - every Tech Blog>https://tech.every.tv/entry/2023/12/12/171340]] 2023.12 -[[OpenAI APIのAssistants APIでも独自アシスタントGPTは誰でも作れる|斉藤 滋>https://note.com/shigel_jp/n/ndfa141c368f9]] 2023.12 *料金 [#e3be9e32] -[[OpenAIの 新モデルの追加 と APIの更新|npaka>https://note.com/npaka/n/nd8c5e9c65335?sub_rt=share_h]] 2024.1 --新しいEmbeddingモデルの追加 --GPT-4 Turbo Previewの更新 --GPT-3.5 Turboの更新 --モデレーションモデルの更新 --APIキーの管理方法の改善 -[[OpenAIがGPT-4のアップグレード版大規模言語モデル「GPT-4 Turbo」を発表、2023年4月までの知識を持ちコンテキストウィンドウは128Kで価格は控えめ - GIGAZINE>https://gigazine.net/news/20231107-openai-gpt-4-turbo/]] 2023.11 -[[Azure OpenAI Service On Your Data の仕組みと使う上で気を付けるべきポイント>https://zenn.dev/microsoft/articles/ad14d45121abe7]] 2023.6 -[[OpenAIのAPI料金の計算方法|サクッと始めるチャットボット【ChatGPT】>https://zenn.dev/umi_mori/books/chatbot-chatgpt/viewer/how_to_calculate_openai_api_prices]] 2023.4 -[[有料版「ChatGPT Plus」が日本で申込み可能に!登録方法と無料版との速度比較 | AutoWorker〜Google Apps Script(GAS)とSikuliで始める業務改善入門>https://auto-worker.com/blog/?p=7320]] 2023.2 -[[新たな革命の幕開け。ChatGPT API の一般公開がもたらすもの。 ChatGPT API の料金と使い方(Python) を紹介。|ChatGPT 研究所>https://chatgpt-lab.com/n/nda0de0be1774]] 2023.3 -[[ChatGPTのAPIの利用料金を詳しく解説!使い方次第でトークン増大で高額費用も | AutoWorker〜Google Apps Script(GAS)とSikuliで始める業務改善入門>https://auto-worker.com/blog/?p=7459]] 2023.3 --1000トークンで0.27ドル。入出力ともカウント対象。過去のやりとりも含める場合、それもカウント。日本語では漢字1文字につき2〜3トークン消費。 -[[Pricing>https://openai.com/pricing]] 2023.3 *公式リファレンス [#ja9ed65c] -[[Introduction - OpenAI API>https://platform.openai.com/docs/introduction]] -[[Overview - OpenAI API>https://platform.openai.com/docs/overview]] -[[Models - OpenAI API>https://platform.openai.com/docs/models/gpt-4-and-gpt-4-turbo]] 2024.5 -[[OpenAI Cookbook>https://cookbook.openai.com/]] -[[ChatCompletion.create>https://platform.openai.com/docs/api-reference/chat/create]] -[[openai - npm>https://www.npmjs.com/package/openai]] -[[料金表>https://openai.com/api/pricing/]]