該平臺采用前后端分離的架構(gòu)設(shè)計(jì)，數(shù)據(jù)同步部分使用 Flask 框架、Mysql 數(shù)據(jù)庫和 Redis 緩存。主要模塊包括數(shù)據(jù)同 步模塊、數(shù)據(jù)標(biāo)注模塊、數(shù)據(jù)質(zhì)檢模塊、數(shù)據(jù)管理和統(tǒng)計(jì)模塊以及數(shù)據(jù)備份模塊。 4. 項(xiàng)目難點(diǎn)：由于該平臺屬于大型項(xiàng)目，數(shù)據(jù)同步流程包含17個節(jié)點(diǎn)，整體流程復(fù)雜。解決方案是開發(fā)一套單獨(dú)的流程控制服 務(wù)，用于統(tǒng)籌和監(jiān)控?cái)?shù)據(jù)同步流程，每個節(jié)點(diǎn)的開始和完成都需要上報(bào)到該服務(wù)，再由該服務(wù)進(jìn)行流程狀態(tài)的流轉(zhuǎn)。此外，同步的 數(shù)據(jù)量達(dá)到了百萬級別，對高并發(fā)要求較高。解決方案是使用 Redis 消息隊(duì)列和 Celery 分布式架構(gòu)。

1. 成功將標(biāo)注工作遷移到線上，顯著提升了標(biāo)注團(tuán)隊(duì)的工作效率。 2. 通過深度優(yōu)化，確保了在高并發(fā)環(huán)境下，服務(wù)能夠穩(wěn)定運(yùn)行并進(jìn)行數(shù)據(jù)同步。 3. 實(shí)現(xiàn)了累計(jì)49個項(xiàng)目、15316個數(shù)據(jù)包的平臺數(shù)據(jù)同步，涵蓋了超過200萬張圖片。