LLMライブラリの履歴差分(No.25)

追加された行はこの色です。
削除された行はこの色です。
#author("2023-07-17T11:14:04+09:00","default:irrp","irrp")
#author("2023-07-17T18:47:12+09:00","default:irrp","irrp")
→OpenAIのAPI

→大規模言語モデル

→自然言語処理

#contents


*一般 [#q549544f]
-[[大規模言語モデルの出力スピードを最大24倍に高めるライブラリ「vLLM」が登場、メモリ効率を高める新たな仕組み「PagedAttention」とは？ - GIGAZINE>https://gigazine.net/news/20230622-vllm-paged-attention/]] 2023.6

-[[Langchain・Semantic Kernel・guidanceでエージェント機能を実装して比較してみた。 - Qiita>https://qiita.com/sakue_103/items/6ffee0bc267e71eafd60]] 2023.6


*LangChain [#w4848247]
-[[話題のキャッシュSaaS「Momento」をLangChainで使ってみる（LLM編） - Qiita>https://qiita.com/minorun365/items/ae977f32072b84f365e5]] 2023.7

-[[つくりながら学ぶ！AIアプリ開発入門 - LangChain & Streamlit による ChatGPT API 徹底活用>https://zenn.dev/ml_bear/books/d1f060a3f166a5]] 2023.7

-[[脱ブラックボックス化！LLMと一緒に使われるLangChainやLlamaIndexを徹底解説 - Speaker Deck>https://speakerdeck.com/cmnakamurashogo/tuo-buratukubotukusuhua-llmto-xu-nishi-warerulangchainyallamaindexwoche-di-jie-shuo]] 2023.7

-[[実践LangChain！RAGによる特化LLMシステムの作り方 - Qiita>https://qiita.com/t_serizawa/items/a2ced4441da714b3076f]] 2023.6
--RAG=Retrieval Augmented Generation

-[[PythonのLangChainでAzure OpenAI Serviceにデプロイしたモデルを利用するサンプルをやってみた | DevelopersIO>https://dev.classmethod.jp/articles/python-langchain-azure-openai-service-model-sample/]] 2023.6

-[[そろそろ知っておかないとヤバい？ 話題のLangChainを30分だけ触って理解しよう！ - Qiita>https://qiita.com/minorun365/items/081fc560e08f0197a7a8]] 2023.6

-[[LangChainのmemoryとDeepL APIを利用してチャットbotを改良した - APC 技術ブログ>https://techblog.ap-com.co.jp/entry/2023/06/07/171907]] 2023.6

-[[LangChainのprompt周りの機能を手を動かしながら理解してみる！ - CCCMKホールディングス TECH Labの Tech Blog>https://techblog.cccmk.co.jp/entry/2023/05/30/162450]] 2023.5

-[[LangChainとOpenAI APIを組み合わせて、文脈を考慮して会話できるSlack Botを作った話 - コネヒト開発者ブログ>https://tech.connehito.com/entry/2023/05/24/182929]] 2023.5

-[[ざっくりつかむ！LangChainのメンタルモデル>https://zenn.dev/fumi_sagawa/articles/113b4e5a46b984]] 2023.5

-[[LangChainのContextual Compressionのいくつかの機能がどのように実現されているかを確認してみた - まったり勉強ノート>https://www.mattari-benkyo-note.com/2023/05/12/langchain_contextual_compression/]] 2023.5

-[[トークン数上限を超えた長い文章でもChatGPTを使って要約する - $shibayu36->blog;>https://blog.shibayu36.org/entry/2023/05/08/173000]] 2023.5

-[[LangChainのPandas Dataframe Agentをつかって自然言語でテーブルデータの分析をしてみる - NRIネットコムBlog>https://tech.nri-net.com/entry/using_langchains_pandas_dataframe_agent_to_analyze_tabledata]] 2023.5

-[[ChatGPTで独自データを学習させて回答してもらう方法 - Qiita>https://qiita.com/windows222/items/232f05bafa95a9c8874e]] 2023.5

-[[LangChainでPDFを要約してかんたんな日本語に変換するWebアプリを作ってみた - Qiita>https://qiita.com/keitomatsuri/items/4c848d58ea5f9b3ebe42]] 2023.5

-[[ChatGPTとLangChainで便利な検索ツールを作る - Qiita>https://qiita.com/fuyu_quant/items/098a3aeb3c5ae5b290cd]] 2023.5

-[[LangChainのYoutubeLoaderを使って動画内容を質問してみる - Qiita>https://qiita.com/cygkichi/items/34d612c84e52d0d9ca8a]] 2023.5

-[[話題の ChatGPT + LangChain で ChatGPT が学習していない最新の OSS ソースコードを爆速でウォークスルーする - Qiita>https://qiita.com/hiroki_okuhata_int/items/5dc6149ded35c5c3a40f]] 2023.5

-[[ChatGPT時代に必要かも!? Pythonで実行するファイルパース（PDF編） | DevelopersIO>https://dev.classmethod.jp/articles/python-parse-pdf/]] 2023.5

-[[長文から論点を抽出して、その論点を軸に文章の要約を試みる｜mah_lab / 西見 公宏｜note>https://note.com/mahlab/n/ndce1a18681e8]] 2023.4

-[[ChatGPTとLangChainで恋愛シミュレーションゲーム用AIを実装してみた - Qiita>https://qiita.com/z-lai/items/511ebd9d637169cbc5ad]] 2023.4

-[[話題の ChatGPT + LangChain で、膨大な PDF ドキュメントの内容を爆速で把握する - Qiita>https://qiita.com/hiroki_okuhata_int/items/7102bab7d96eb2574e7d]] 2023.4

-[[話題の ChatGPT + LangChain で ChatGPT が学習していない最新の OSS ソースコードを爆速でウォークスルーする - Qiita>https://qiita.com/hiroki_okuhata_int/items/5dc6149ded35c5c3a40f]] 2023.4

-[[LLMに表データの解析を手伝ってもらえるLangChainのPandas Dataframe Agentの中身がどうなっているのか調べた - まったり勉強ノート>https://www.mattari-benkyo-note.com/2023/04/27/langchain_pandas/]] 2023.4

-[[LangChain Toolsの運用と改善 - Speaker Deck>https://speakerdeck.com/peisuke/langchain-toolsnoyun-yong-togai-shan]] 2023.4

-[[langchainのアップデートで追加された"Contextual Compression Retriever"を使用して,200ページ超のwebページを読みこませたQ&Aボットを作成する - Qiita>https://qiita.com/bluesky-firmament/items/669b716c6db9b02b49fd]] 2023.4

-[[話題の ChatGPT + LangChain で、SQL データベースに自然言語でクエリしてみる - Qiita>https://qiita.com/hiroki_okuhata_int/items/508dda0dcd37ef72b0bd]] 2023.4

-[[LangChainをFastAPI経由でUnityで利用する - Synamon’s Engineer blog>https://synamon.hatenablog.com/entry/langchain_fastapi_unity]] 2023.4

-[[プロンプトエンジニアリングから始めるLangChain入門 - Speaker Deck>https://speakerdeck.com/os1ma/puronputoenziniaringukarashi-merulangchainru-men]] 2023.4

-[[【前編】LangChainによるGenerative Agents実装まとめ｜mah_lab / 西見 公宏｜note>https://note.com/mahlab/n/n4760c3d00544]] 2023.4

-[[Large Language Model(LLM)をもっと活用したい！"LangChain"を使ってみました。 - CCCMKホールディングス TECH Labの Tech Blog>https://techblog.cccmk.co.jp/entry/2023/04/18/105759]] 2023.4

-[[LangChainをLocalのDockerで動かしてみる - Synamon’s Engineer blog>https://synamon.hatenablog.com/entry/lang_chain_docker]] 2023.4

-[[独自データやGoogle検索と連携が可能なLangChainを試す - Qiita>https://qiita.com/hedgehog051/items/3b02a78ad7660307f076]] 2023.4

-[[LangChainのAgent「zero-shot-react-description」はLLMとどう連携しているのか？調べた - まったり勉強ノート>https://www.mattari-benkyo-note.com/2023/04/05/langchain_zero-shot-react-description/]] 2023.4

-[[ChatGPTの機能を拡張するLangChainを試してみた - NRIネットコムBlog>https://tech.nri-net.com/entry/tried_langchain_to_extend_chatgpt]] 2023.3

-[[ChatGPTとLangChainで何でもできるAIを作る - Qiita>https://qiita.com/fuyu_quant/items/c0b29f037b7834c19e2c]] 2023.3

-[[LangChain AI Handbook | Pinecone>https://www.pinecone.io/learn/langchain/]] 2023.3

-[[ChatGPT APIの運用で必須のツール: LangChainの使い方まとめ (1) - Qiita>https://qiita.com/sakasegawa/items/d01dafdf0c77da133f24]] 2023.3
--[[ChatGPT APIの運用で必須のツール: LangChainの使い方まとめ (2) - Qiita>https://qiita.com/sakasegawa/items/9b6c79dc11bc3a1bc0ed]] 2023.3

-[[【Python】LangChainからChatGPTのAPIを利用する | ジコログ>https://self-development.info/%e3%80%90python%e3%80%91langchain%e3%81%8b%e3%82%89chatgpt%e3%81%aeapi%e3%82%92%e5%88%a9%e7%94%a8%e3%81%99%e3%82%8b/]] 2023.3

-[[ChatGPT APIをlangchainから4行で超簡単に使う - Qiita>https://qiita.com/yakigac/items/223f08925ec2067ece90]] 2023.3



*LLamaIndex/GPT-Index [#xfe92d80]
-LLMに検索機能を付与するアプリ

-[[LlamaIndexを完全に理解するチュートリアル その１：処理の概念や流れを理解する基礎編（v0.7.9対応） | DevelopersIO>https://dev.classmethod.jp/articles/llamaindex-tutorial-001-overview-v0-7-9/]] 2023.7

-[[LlamaIndexとOpenAI APIで、テーブル定義から分析に使いたいテーブルの検索をできるか流れを試してみた | DevelopersIO>https://dev.classmethod.jp/articles/llamaindex-openai-search-target-table-simple-sample-for-analysis/]] 2023.7

-[[LlamaIndexのインデックスをディスクに保存・再ロードしてみた | DevelopersIO>https://dev.classmethod.jp/articles/llamaindex-index-persist-load-with-disk/]] 2023.6

-[[LlamaIndexを使って独自データをQ&AするだけならOpenAI API使わなくてもいいでない？ - Qiita>https://qiita.com/yagisawa/items/b212460d440e4b240fc3]] 2023.6

-[[LlamaIndexを完全に理解するチュートリアル その１：処理の概念や流れを理解する基礎編（v0.6.8対応） | DevelopersIO>https://dev.classmethod.jp/articles/llamaindex-tutorial-001-overview/]] 2023.5
--[[LlamaIndexを完全に理解するチュートリアル その２：テキスト分割のカスタマイズ | DevelopersIO>https://dev.classmethod.jp/articles/llamaindex-tutorial-002-text-splitter/]] 2023.5
--[[LlamaIndexを完全に理解するチュートリアル その３：CallbackManagerで内部動作の把握やデバッグを可能にする | DevelopersIO>https://dev.classmethod.jp/articles/llamaindex-tutorial-003-callback-manager/]] 2023.5
--[[LlamaIndexを完全に理解するチュートリアル その４：ListIndexで埋め込みベクトルを使用する方法 | DevelopersIO>https://dev.classmethod.jp/articles/llamaindex-tutorial-004-listindex-use-embedding-vector/]] 2023.5


-[[LlamaIndex クイックスタートガイド - v0.6.0｜npaka｜note>https://note.com/npaka/n/n50475d6c3118]] 2023.5

-[[Llamaindex を用いた社内文書の ChatGPT QA ツールをチューニングする / 開発者向けブログ・イベント | GMO Developers>https://developers.gmo.jp/31951/]] 2023.4

-[[ChatGPT時代に必要かも!? Pythonで実行するファイルパース（PowerPoint編） | DevelopersIO>https://dev.classmethod.jp/articles/python-parse-powerpoint/]] 2023.4

-[[LlamaIndex のハイブリッド検索を試す｜npaka｜note>https://note.com/npaka/n/n63afe0e6684a]] 2023.4

-[[【ChatGPT関連】（Llama を使って）簡単Webページ要約 - Qiita>https://qiita.com/DeepTama/items/ffb7425cefe97bb5408a]] 2023.4

-[[Llamaindex を用いた ChatGPT QA ツールをチューニングする - GMOインターネットグループ グループ研究開発本部（次世代システム研究室）>https://recruit.gmo.jp/engineer/jisedai/blog/llamaindex-chatgpt-tuning/]] 2023.4

-[[LlamaIndexをApp Runner上で動かしてみた | DevelopersIO>https://dev.classmethod.jp/articles/llamaindex-on-app-runner/]] 2023.3

-[[LlamaIndexのコードに潜って、マルチモーダル対応の実装を確認してきたのでシェアする | DevelopersIO>https://dev.classmethod.jp/articles/llama-index-mutimodal-use-vision-model/]] 2023.3

-[[LlamaIndex でマルチモーダル対応が始まったので読み込んだ画像に OpenAI で質問してみた | DevelopersIO>https://dev.classmethod.jp/articles/llamaindex-multimodal-support-start/]] 2023.3

-[[LlamaIndex と OpenAI API で自社サービスの仕様書から 4 択の選択問題を自動作成できるか試してみた | DevelopersIO>https://dev.classmethod.jp/articles/llamaindex-openai-api-automatically-create-question-from-the-specifications-of-our-service/]] 2023.3

-[[ChatGPTで独自データを利用できるLlamaIndexはどんな仕組みで動いているのか？調べてみました | DevelopersIO>https://dev.classmethod.jp/articles/llamaindex-overview/]] 2023.3

-[[LlamaIndexのインデックスを更新し、更新前後で知識がアップデートされているか確認してみた | DevelopersIO>https://dev.classmethod.jp/articles/llama-index-insert-index/]] 2023.3

-[[LlamaIndexとChatGPT APIを活用して書籍の全文要約を行う｜まーくん | 西見 公宏｜note>https://note.com/mahlab/n/na949c267951e]] 2023.3

-[[LlamaIndexを使ってAWS CDKの記事200本以上でインデックスを作りOpenAIに質問してみた | DevelopersIO>https://dev.classmethod.jp/articles/llamaindex-create-index-cdk-article-over-200/]] 2023.3
-[[ChatGPTとLlamaIndex（GPT Index）を使った仕様問い合わせAIの作成>https://zenn.dev/kinzal/articles/39f17a62bb6b20]] 2023.2

-[[GPT Index の使用方法｜npaka｜note>https://note.com/npaka/n/n6a2b39b7da7c]] 2023.1
--「GPT Index」は、LLMと外部データを簡単に接続できるインデックスを作成するためのライブラリです。

-[[Tutorials &#8212; LlamaIndex documentation>https://gpt-index.readthedocs.io/en/latest/guides/tutorials.html]] 2023.4


*Semantic Kernel [#zd88ffec]
-[[C# で Semantic Kernel：AI で作曲する (複数プラグインを連携させる) - Qiita>https://qiita.com/fsdg-adachi_h/items/875583d556552ff14d4d]] 2023.7

-[[Semantic Kernel で Open AI の Embeddings を使う (あいまい検索出来てすげーやつ)>https://zenn.dev/microsoft/articles/semantic-kernel-8]] 2023.5

-[[Semantic Kernelを使ってGPTと外部ツールを簡単に連携してみる - Taste of Tech Topics>https://acro-engineer.hatenablog.com/entry/2023/04/18/120000]] 2023.4

-[[MicrosoftがSemantic Kernelの扱いを容易にするVSCode拡張機能を公開、アプリに大規模言語モデルの機能を組み込みやすく|CodeZine（コードジン）>https://codezine.jp/article/detail/17681#:~:text=Semantic%20Kernel%E3%81%A8%E3%81%AF%E3%80%81Microsoft%E3%81%8C%E9%96%8B%E7%99%BA%E3%81%97%E3%81%A6%E3%81%84%E3%82%8B%E3%82%BD%E3%83%95%E3%83%88%E3%82%A6%E3%82%A7%E3%82%A2%E3%81%A7%E3%80%81%E4%B8%80%E8%88%AC%E7%9A%84%E3%81%AA%E3%83%97%E3%83%AD%E3%82%B0%E3%83%A9%E3%83%9F%E3%83%B3%E3%82%B0%E8%A8%80%E8%AA%9E%E3%81%8B%E3%82%89%E5%A4%A7%E8%A6%8F%E6%A8%A1%E8%A8%80%E8%AA%9E%E3%83%A2%E3%83%87%E3%83%AB%EF%BC%88Large%20Language,Models%EF%BC%89%E3%82%92%E6%89%B1%E3%81%88%E3%82%8B%E3%82%88%E3%81%86%E3%81%AB%E3%81%99%E3%82%8B%E8%BB%BD%E9%87%8F%E3%81%AESDK%EF%BC%88Software%20Development%20Kit%EF%BC%89%E3%81%A0%E3%80%82]] 2023.5

-[[Microsoft が LLM をアプリ開発に統合するための OSS「Semantic Kernel」を発表 - Qiita>https://qiita.com/nohanaga/items/430b59209b02c298ef2a]] 2023.4



*Microsoft Guidance [#xc4ba46c]
-[[ChatGPT APIを取り巻くライブラリ &#12316;LangChainとguidanceの紹介 | gihyo.jp>https://gihyo.jp/article/2023/05/programming-with-chatgpt-03]] 2023.5

-[[LangChainの対抗馬？Microsoft Guidanceを触ってみる (1) - Qiita>https://qiita.com/sakue_103/items/5f5f7ee1e60008038a22]] 2023.5
--[[LangChainの対抗馬？Microsoft Guidanceを触ってみる (2) - Qiita>https://qiita.com/sakue_103/items/f9c32428329382610c41]] 2023.5
LLMライブラリ の履歴差分(No.25)

LLMライブラリの履歴差分(No.25)
