情况1:数据太大,无法加载到内存; 情况2:加载数据但训练时内存不够; 针对情况1可以考虑使用Spark或者Dask来逐步完成计算。对于情况2,则需要考虑从模型的角度入手。 本文将介绍在sklearn中支持迭代训练的模型,然后展示相关的代码案例。喜欢本文记得收藏、点赞。 文章目录 模块划分 分类案例 聚类案例 预处理案例 降维案...
之前langchain+ChatGLM的项目由于显存不够爆了,但是我灰太狼大王是不会轻易放弃的,反手就是-个wenda+ChatGLM的本地知识库搭建,占用还是比较小的,而且同样支持多个模型,功能也很多,与文档对话(暂时只支持doc,pdf)或者知识库对话毫不费力,会搜索关键词在文档中找出来,像一个私人化的必应搜索引擎,缺点是正确率不是...