Lazy loaded image
🤩智能化学习第二阶段
Words 1929Read Time 5 min
2024-11-13
2025-7-10
status
type
date
slug
summary
tags
category
icon
password
😀
前言: 在一节平平无奇的水课上无意间刷到了两个视频,一个是有关AI学习范式,另一个是数据图表的重要性,给了我相当大的启发,在这里将把这个项目完善成一个真正帮助我们学习的工具。
跳转

📝 正文

11.13开发进度

目前正在修复POST请求带来的无法解析问题,没有想到一个post请求能暂停我这么久开发
(太无助了,sse流确实我现在还没有学到,目前跟ai多轮对话尝试去解决)
好吧折腾了一天还是放弃了,我保留了代码注释掉,留到后期再修改,修改编写url代码
开始引入全新的语法Mermaid Markdown来编写思维导图,并且马上接入Alibaba的Spring-AI,
notion image

完成进度

  • 已经成功完成思维导图的生成流程,并且通过url编码可以跳转站外直接进行编辑渲染
  • 接入邮箱系统,可以发送文字和附件,后续将作为知识库以及其他更新通知
  • 接入各大官方API,支持上下文,实时更新
  • 完成修复重复分类的BUG,增加代码健壮性

11.14开发进度

完成了图片的上传功能并且成功解析图片内容,进一步完善了登录注册界面的引导,加入了邮箱注册,修复了一些BUG,接入了绘图大模型
目前仅支持图片文件,增加了识别图片的逻辑,保证用户能够自由操控文件上传,并减少了大量报错的产生,后期我会统一在api调用阶段try-catch异常防止总体异常
notion image
目前学习完redis,给一些临时数据进行了使用,接下来学习嵌入式大模型并且检索文档工作方式,之前看到的属实有点难理解
notion image
查阅了无数资料,放弃了,我还是要去花时间多了解一下,目前做一个List的集合的初步向量化搜索,效果虽然能用但实在不太理想,alibaba的springAI文档太简略了学不到什么,我还是要去钻研一下了
notion image

11.15开发进度

成功完成控制面板前端界面,根据数据整合系统,修复许多使用体验缺陷

11.16开发进度

修复切换历史记录造成的渲染失败,并且修复一些问题优化体验,推荐电脑端chrome浏览器,体验较为丝滑,即将开始重构模型和API调用系统,中间将插入一个小项目,AI提示词交互生成,方便提示词的生成,
To Do List
  • 目前正在加上各种权限的模型限制,
  • 开发上面AI提示词交互控制台程序。
  • 训练网站专属大模型,提高分类准确性
  • 目前由于支持模型众多,为后续方便管理,重构部分dao为mapper接口
  • 降低代码耦合性,方便功能修改拓展,为管理者后台做好准备
  • 支持用户自定义智能体

11.17开发进度

不敢相信我被一个删除文件卡了一个小时,在发送邮件类试图删除附件是会被占用拒绝删除,只有在把地址返回给controller去删除才是可行的,目前支持了数据库以邮件附件形式发送,智能体创建,代码优化部分,正在完成管理员后台面板
目前正在重构一些耦合度较高的代码,把数据大量转移到数据库里面去
并且正在优化智能体添加功能,预计今天做完
已经成功拉取rag代码,明天开始研究一下

11.18开发进度

大量重构UI,换上较为美观的按键布局,让项目更为现代化

11.19开发进度

正在开放支持上下文功能,由于目前接入的大模型并不直接支持上下文功能,预计通过session和会话id来维护上下文,完成功能后这个项目开发将临时停止,这几天一直在尝试milvus和RAG结合,但是一直拉取不下来依赖,有限的文档还是很难去学习,这段时间会去尝试准备数据集去训练大模型来为最后最重要的两个功能来进行准备。

11.20学习进度

完成了milvus向量数据库结合大模型回答,我先在milvus存入了以下数据作为大模型的知识库
notion image
我选择把这段知识库以换行符来隔断存入milvus并且定义索引,然后选取了其中的一个问题:
”新生代是什么?“
notion image
上面的回答是直接把问题交由大模型处理,很明显由于语义不清晰且有歧义大模型无法理解并真正做出我想要的回答,下面是经过向量搜索做出的回答,我先交由milvus找到相关的三条数据,然后把数据和问题一起交付对话大模型进行解答,给出的很明显就是我想要的答案
这就是接下来知识库问答的基础了,我会在接下来以向量数据库为基础搭建为学习单独优化的问答系统
目前开始重构提示词系统,优化结构,进一步提高响应速度

11.22开发进度

现在已经完成了rag系统的接入,可以以较快的速度完成解析docx和txt文档的数据库,并且了进一步优化了响应速度,利用了提示词,system和Rag三重加成助力更好的问答效果,并且异步执行了思维导图系统,还提供了md笔记记录区域,目前正在整合所拥有的所有界面
负责思维导图的ai有点桀骜不逊,正在优化提示词稳定出图效果

回家休息,暂停两天

11.24开发进度

输入你的文档即可快速分析,并且可以立马展开课程
notion image
 

🤗 后续

  • 网站已经完善了知识库对话界面的思维导图工具,并且支持永久保存知识库,知识库改名,删除知识库等功能,且总结和思维导图也支持随时生成。并且新增了研究模式。
  • 提示词创建工具,基于十余种提示词框架,支持一句话生成详细提示词的同时,还支持通过预设值测试集定向优化提示词对指定大模型效果,提高精度
  • 增加了项目官网,优化了各部分性能,进一步调教大模型回答

📎 相关文章

 
💡
欢迎交流~
上一篇
手机运行win10
下一篇
智能体团队

Comments
Loading...