
这是我画的一个湖仓架构,我刚入公司没多久,公司着急让我出成果,所以我在湖仓一体化平台这里新建了一个数仓准备区,用以清洗数据,后面让智能体开发直接调用。后面再用左边数据仓库就专门给业务数据分层做数仓使用。右边处理的是非结构化数据,因为现在不清楚湖仓一体化该如何设计。所以就想通过MINIIO+MinerU解析,然后存到左边数仓向量数据库,或者存到Milvus里面。事实上之所以在湖仓一体化平台那里画了那么多的双向箭头,是因为智能体那边要求,数据仓库要和数据湖数据融合,之后根据项目还有业务分类,一起存入到向量数据库,供向量数据库使用。具体该怎么画,麻烦懂的朋友,帮忙给给意见,谢谢。