RAGチャット2回目以降の文書不正対応 (#601) (#782)

Co-authored-by: h.komori <h.komori@jast.co.jp>
aws-samples · Dec 18, 2024 · 4c7207d · 4c7207d
1 parent 5780ff0
commit 4c7207d
Show file tree

Hide file tree

Showing 2 changed files with 8 additions and 2 deletions.
diff --git a/packages/web/src/hooks/useRag.ts b/packages/web/src/hooks/useRag.ts
@@ -140,7 +140,10 @@ const useRag = (id: string) => {
           // 前処理：Few-shot で参考にされてしまうため、過去ログから footnote を削除
           return messages.map((message) => ({
             ...message,
-            content: message.content.replace(/\[\^(\d+)\]:.*/g, ''),
+            content: message.content
+              .replace(/\[\^0\]:[\s\S]*/s, '') // 文末の脚注を削除
+              .replace(/\[\^(\d+)\]/g, '') // 文中の脚注アンカーを削除
+              .trim(), // 前後の空白を削除
           }));
         },
         (message: string) => {

diff --git a/packages/web/src/hooks/useRagKnowledgeBase.ts b/packages/web/src/hooks/useRagKnowledgeBase.ts
@@ -136,7 +136,10 @@ const useRagKnowledgeBase = (id: string) => {
           // 前処理：Few-shot で参考にされてしまうため、過去ログから footnote を削除
           return messages.map((message) => ({
             ...message,
-            content: message.content.replace(/\[\^(\d+)\]:.*/g, ''),
+            content: message.content
+              .replace(/\[\^0\]:[\s\S]*/s, '') // 文末の脚注を削除
+              .replace(/\[\^(\d+)\]/g, '') // 文中の脚注アンカーを削除
+              .trim(), // 前後の空白を削除
           }));
         },
         (message: string) => {