mirror of
https://github.com/danny-avila/LibreChat.git
synced 2025-12-18 17:30:16 +01:00
organize modules
This commit is contained in:
parent
78c9f3dc74
commit
0f6fcd5928
5 changed files with 111 additions and 78 deletions
9
app/index.js
Normal file
9
app/index.js
Normal file
|
|
@ -0,0 +1,9 @@
|
||||||
|
const { titleConvo } = require('./chatgpt');
|
||||||
|
const { askClient } = require('./chatgpt-client');
|
||||||
|
const { askBing } = require('./bingai');
|
||||||
|
|
||||||
|
module.exports = {
|
||||||
|
titleConvo,
|
||||||
|
askClient,
|
||||||
|
askBing,
|
||||||
|
};
|
||||||
8
models/index.js
Normal file
8
models/index.js
Normal file
|
|
@ -0,0 +1,8 @@
|
||||||
|
const { saveMessage, deleteMessages } = require('./Message');
|
||||||
|
const { saveConvo } = require('./Conversation');
|
||||||
|
|
||||||
|
module.exports = {
|
||||||
|
saveMessage,
|
||||||
|
deleteMessages,
|
||||||
|
saveConvo,
|
||||||
|
};
|
||||||
|
|
@ -1,83 +1,12 @@
|
||||||
const express = require('express');
|
const express = require('express');
|
||||||
const crypto = require('crypto');
|
const crypto = require('crypto');
|
||||||
const router = express.Router();
|
const router = express.Router();
|
||||||
const { titleConvo } = require('../../app/chatgpt');
|
const askBing = require('./askBing');
|
||||||
const { askClient } = require('../../app/chatgpt-client');
|
const { titleConvo, askClient } = require('../../app/');
|
||||||
const { askBing } = require('../../app/bingai');
|
const { saveMessage, deleteMessages, saveConvo } = require('../../models');
|
||||||
const { saveMessage, deleteMessages } = require('../../models/Message');
|
const { handleError, sendMessage } = require('./handlers');
|
||||||
const { saveConvo } = require('../../models/Conversation');
|
|
||||||
|
|
||||||
const handleError = (res, errorMessage) => {
|
router.use('/bing', askBing);
|
||||||
res.status(500).write(`event: error\ndata: ${errorMessage}`);
|
|
||||||
res.end();
|
|
||||||
};
|
|
||||||
|
|
||||||
const sendMessage = (res, message) => {
|
|
||||||
res.write(`event: message\ndata: ${JSON.stringify(message)}\n\n`);
|
|
||||||
};
|
|
||||||
|
|
||||||
router.post('/bing', async (req, res) => {
|
|
||||||
const { model, text, ...convo } = req.body;
|
|
||||||
if (!text.trim().includes(' ') && text.length < 5) {
|
|
||||||
return handleError(res, 'Prompt empty or too short');
|
|
||||||
}
|
|
||||||
|
|
||||||
const userMessageId = crypto.randomUUID();
|
|
||||||
let userMessage = { id: userMessageId, sender: 'User', text };
|
|
||||||
|
|
||||||
console.log('ask log', { model, ...userMessage, ...convo });
|
|
||||||
|
|
||||||
res.writeHead(200, {
|
|
||||||
Connection: 'keep-alive',
|
|
||||||
'Content-Type': 'text/event-stream',
|
|
||||||
'Cache-Control': 'no-cache, no-transform',
|
|
||||||
'Access-Control-Allow-Origin': '*',
|
|
||||||
'X-Accel-Buffering': 'no'
|
|
||||||
});
|
|
||||||
|
|
||||||
try {
|
|
||||||
let tokens = '';
|
|
||||||
const progressCallback = async (partial) => {
|
|
||||||
tokens += partial;
|
|
||||||
sendMessage(res, { text: tokens, message: true });
|
|
||||||
};
|
|
||||||
|
|
||||||
let response = await askBing({
|
|
||||||
text,
|
|
||||||
progressCallback,
|
|
||||||
convo
|
|
||||||
});
|
|
||||||
|
|
||||||
console.log('CLIENT RESPONSE');
|
|
||||||
console.dir(response, { depth: null });
|
|
||||||
|
|
||||||
userMessage.conversationSignature =
|
|
||||||
convo.conversationSignature || response.conversationSignature;
|
|
||||||
userMessage.conversationId = convo.conversationId || response.conversationId;
|
|
||||||
userMessage.invocationId = response.invocationId;
|
|
||||||
await saveMessage(userMessage);
|
|
||||||
|
|
||||||
if (!convo.conversationSignature) {
|
|
||||||
response.title = await titleConvo(text, response.response, model);
|
|
||||||
}
|
|
||||||
|
|
||||||
response.text = response.response;
|
|
||||||
response.id = response.details.messageId;
|
|
||||||
response.suggestions =
|
|
||||||
response.details.suggestedResponses &&
|
|
||||||
response.details.suggestedResponses.map((s) => s.text);
|
|
||||||
response.sender = model;
|
|
||||||
response.final = true;
|
|
||||||
await saveMessage(response);
|
|
||||||
await saveConvo(response);
|
|
||||||
sendMessage(res, response);
|
|
||||||
res.end();
|
|
||||||
} catch (error) {
|
|
||||||
console.log(error);
|
|
||||||
await deleteMessages({ id: userMessageId });
|
|
||||||
handleError(res, error.message);
|
|
||||||
}
|
|
||||||
});
|
|
||||||
|
|
||||||
router.post('/', async (req, res) => {
|
router.post('/', async (req, res) => {
|
||||||
const { model, text, parentMessageId, conversationId } = req.body;
|
const { model, text, parentMessageId, conversationId } = req.body;
|
||||||
|
|
@ -113,10 +42,12 @@ router.post('/', async (req, res) => {
|
||||||
if (typeof partial === 'object') {
|
if (typeof partial === 'object') {
|
||||||
sendMessage(res, { ...partial, message: true });
|
sendMessage(res, { ...partial, message: true });
|
||||||
} else {
|
} else {
|
||||||
tokens += partial;
|
tokens += partial === text ? '' : partial;
|
||||||
if (tokens.includes('[DONE]')) {
|
if (tokens.includes('[DONE]')) {
|
||||||
tokens = tokens.replace('[DONE]', '');
|
tokens = tokens.replace('[DONE]', '');
|
||||||
}
|
}
|
||||||
|
|
||||||
|
// tokens = appendCode(tokens);
|
||||||
sendMessage(res, { text: tokens, message: true, initial: i === 0 ? true : false });
|
sendMessage(res, { text: tokens, message: true, initial: i === 0 ? true : false });
|
||||||
i++;
|
i++;
|
||||||
}
|
}
|
||||||
|
|
@ -132,7 +63,7 @@ router.post('/', async (req, res) => {
|
||||||
}
|
}
|
||||||
});
|
});
|
||||||
|
|
||||||
console.log('CLIENT RESPONSE', gptResponse);
|
// console.log('CLIENT RESPONSE', gptResponse);
|
||||||
|
|
||||||
if (!gptResponse.parentMessageId) {
|
if (!gptResponse.parentMessageId) {
|
||||||
gptResponse.text = gptResponse.response;
|
gptResponse.text = gptResponse.response;
|
||||||
|
|
|
||||||
72
server/routes/askBing.js
Normal file
72
server/routes/askBing.js
Normal file
|
|
@ -0,0 +1,72 @@
|
||||||
|
const express = require('express');
|
||||||
|
const crypto = require('crypto');
|
||||||
|
const router = express.Router();
|
||||||
|
const { titleConvo, askBing } = require('../../app/');
|
||||||
|
const { saveMessage, deleteMessages, saveConvo } = require('../../models');
|
||||||
|
const { handleError, sendMessage } = require('./handlers');
|
||||||
|
|
||||||
|
router.post('/', async (req, res) => {
|
||||||
|
const { model, text, ...convo } = req.body;
|
||||||
|
if (!text.trim().includes(' ') && text.length < 5) {
|
||||||
|
return handleError(res, 'Prompt empty or too short');
|
||||||
|
}
|
||||||
|
|
||||||
|
const userMessageId = crypto.randomUUID();
|
||||||
|
let userMessage = { id: userMessageId, sender: 'User', text };
|
||||||
|
|
||||||
|
console.log('ask log', { model, ...userMessage, ...convo });
|
||||||
|
|
||||||
|
res.writeHead(200, {
|
||||||
|
Connection: 'keep-alive',
|
||||||
|
'Content-Type': 'text/event-stream',
|
||||||
|
'Cache-Control': 'no-cache, no-transform',
|
||||||
|
'Access-Control-Allow-Origin': '*',
|
||||||
|
'X-Accel-Buffering': 'no'
|
||||||
|
});
|
||||||
|
|
||||||
|
try {
|
||||||
|
let tokens = '';
|
||||||
|
const progressCallback = async (partial) => {
|
||||||
|
tokens += partial === text ? '' : partial;
|
||||||
|
// tokens = appendCode(tokens);
|
||||||
|
sendMessage(res, { text: tokens, message: true });
|
||||||
|
};
|
||||||
|
|
||||||
|
let response = await askBing({
|
||||||
|
text,
|
||||||
|
progressCallback,
|
||||||
|
convo
|
||||||
|
});
|
||||||
|
|
||||||
|
console.log('CLIENT RESPONSE');
|
||||||
|
console.dir(response, { depth: null });
|
||||||
|
|
||||||
|
userMessage.conversationSignature =
|
||||||
|
convo.conversationSignature || response.conversationSignature;
|
||||||
|
userMessage.conversationId = convo.conversationId || response.conversationId;
|
||||||
|
userMessage.invocationId = response.invocationId;
|
||||||
|
await saveMessage(userMessage);
|
||||||
|
|
||||||
|
if (!convo.conversationSignature) {
|
||||||
|
response.title = await titleConvo(text, response.response, model);
|
||||||
|
}
|
||||||
|
|
||||||
|
response.text = response.response;
|
||||||
|
response.id = response.details.messageId;
|
||||||
|
response.suggestions =
|
||||||
|
response.details.suggestedResponses &&
|
||||||
|
response.details.suggestedResponses.map((s) => s.text);
|
||||||
|
response.sender = model;
|
||||||
|
response.final = true;
|
||||||
|
await saveMessage(response);
|
||||||
|
await saveConvo(response);
|
||||||
|
sendMessage(res, response);
|
||||||
|
res.end();
|
||||||
|
} catch (error) {
|
||||||
|
console.log(error);
|
||||||
|
await deleteMessages({ id: userMessageId });
|
||||||
|
handleError(res, error.message);
|
||||||
|
}
|
||||||
|
});
|
||||||
|
|
||||||
|
module.exports = router;
|
||||||
13
server/routes/handlers.js
Normal file
13
server/routes/handlers.js
Normal file
|
|
@ -0,0 +1,13 @@
|
||||||
|
const handleError = (res, errorMessage) => {
|
||||||
|
res.status(500).write(`event: error\ndata: ${errorMessage}`);
|
||||||
|
res.end();
|
||||||
|
};
|
||||||
|
|
||||||
|
const sendMessage = (res, message) => {
|
||||||
|
if (message.length === 0) {
|
||||||
|
return;
|
||||||
|
}
|
||||||
|
res.write(`event: message\ndata: ${JSON.stringify(message)}\n\n`);
|
||||||
|
};
|
||||||
|
|
||||||
|
module.exports = { handleError, sendMessage };
|
||||||
Loading…
Add table
Add a link
Reference in a new issue