DolphinScheduler 准备引入 Copilot 聊天助手啦!借助大语言模型(如 OpenAI),帮助用户智能编写 SQL、优化代码、答疑解惑,大幅提升开发体验。
咱 DolphinScheduler 也是紧跟上 AI 智能化的脚步了,与时俱进不是挂在嘴上的,而是说干就干!这个超棒的想法目前还处于设计阶段,能不能尽快列入到 DolphinScheduler 的支持列表,就要看咱们贡献者的力量啦!
下面是这个 DSIP 发起者目前的想法,来看看是不是和你不谋而合?
动机
大模型的能力日益增强,SQL 生成的质量和准确性也非常高。现在正是将大模型引入调度组件的最佳时机,以帮助提升用户的开发效率、优化代码,并解答我们在使用过程中遇到的问题。
DS Copilot 是一个基于第三方大语言模型构建的数据智能助手,将会集成 DolphinScheduler 数据源的元数据信息,可以帮助调度系统的用户开发出更高质量、更规范的 SQL 任务。
设计细节
添加 Chat 模块
主要用于接收用户输入,把用户带有当前 SQL 数据源的元数据信息 → 生成优化提示并提交给大模型 → 再根据模型返回的信息,通过聊天框展示给用户。
大模型注册
主要用于注册大语言模型,首先实现 OpenAI,后续再扩展至其他模型。