first create

wr1207

2023-04-17 32e4bad2cff2793052effcd2d59cdd8923702b22

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
import { Message } from "@/types";
import { OpenAIStream } from "@/utils";
 
export const config = {
  runtime: "edge"
};
 
const handler = async (req: Request): Promise<Response> => {
  try {
    const { messages } = (await req.json()) as {
      messages: Message[];
    };
 
    const charLimit = 12000;
    let charCount = 0;
    let messagesToSend = [];
 
    for (let i = 0; i < messages.length; i++) {
      const message = messages[i];
      if (charCount + message.content.length > charLimit) {
        break;
      }
      charCount += message.content.length;
      messagesToSend.push(message);
    }
 
    const stream = await OpenAIStream(messagesToSend);
 
    return new Response(stream);
  } catch (error) {
    console.error(error);
    return new Response("Error", { status: 500 });
  }
};
 
export default handler;