RAG RAGのメイン処理
RAGのメイン処理でユーザのプロンプトをベクトル化を使うことでchromaDBのメソッドを使うことで似ている情報をベクトル同士を比べることで似ている情報を得ることが可能になるこの中ででプロンプトを指定してで上位何個を該当させるか指定できる今...
RAG
RAG RAG ファイルをベクトル化してDBへ保存
ファイルをベクトル化してDBへ保存によってボタンを押したら処理が完了するはボタンを押したら、という意味は自作のメソッドで、ファイルアップロードしたときの結果が入っているのででfor ループで file へ代入していくがそのメソッドも自作のメ...
RAG RAGで使う wordファイルのアップローダ作成
RAGで使う wordファイルのアップローダ作成これでの設定で拡張子が docx のもののみ受け付けるこれで複数ファイルのアップロードが可能とすることで機能を変数に格納できる
RAG RAGのためのテキスト分割関数
RAGのためのテキスト分割関数文章となる文字列をチャンクという塊に分割し分けたものをベクトル化してDBに入れるこのためチャンクに分ける分割関数を作成する以下解説チャンクサイズの設定塊の許容範囲の設定これにより１０００文字なら最初の２００文字...
RAG RAGのためのPDF内容抽出
RAGのためのPDF内容抽出としたけどご提供いただいたPDFファイルから、指定された形式（ページ番号の付与、レイアウトの維持、表のMarkdown変換など）でテキストを抽出するご依頼ですね。残念ながら、私の内部ツールは、PDFファイルから画...
RAG RAGデータの作成
RAGデータの作成GoogleDrive に学校関連はSchool 特に使うのがshizensaigai.pdfに書いてある休校や自然災害の時の対処方法保険フォルダにある自動車保険、県民共済の約款取扱説明書フォルダにある各種家電の取説これら...
RAG Llama index RAGのメタデータ保存
Llama index RAGのメタデータ保存 LlamaIndexで情報元のPDFのメタデータを含めた回答を生成するを参考に行う社内資料の検索をスムーズにするRAGシステムをLlamaIndexを使用して開発している際にある問題に当たった...
RAG RAG
RAGLlamaIndex」はツール/ライブラリの名前、「RAG（Retrieval-Augmented Generation）」は手法やアプローチの名前1. RAGとは* 正式には Retrieval-Augmented Generati...