2：舆情详单数据历史表-tm_b_sentiment_duplicate数据集合senDupList的生成。

(2.1)Map<Long,List<String>>prowordMap=projectStringto(project,keyword.getKeywordName());项目飘红规则数据集合的生成。

获取项目中alias和竞品中的alias生成以项目id为key，List<String>为value的map,List<String>中包含alias、项目名称、关键词名称的值。

NoiseDtonoise=httpProject.getNoise(project.getProjectId());项目噪声规则数据集合的生成

获取项目噪声集合生成以项目id为key，List<String>为value的map,List<String>中包含项目和竞品的噪声规则noisewordMap。

(2.2)List<DetailRelation>detailRelationList=newArrayList<>()和List<DetailRelation>noisedetailRelationList=newArrayList<>();数据集合的生成。

遍历prowordMap的value集合和sentimentDetailChanneMap的value集合，如果遍历sentimentDetailChanneMap的对象中Title、Desc、Text字段值其中有一个包含prowordMap遍历中对象的值也就是存在飘红则遍历项目噪声数据noisewordMap。如果遍历sentimentDetailChanneMap的对象中Title、Desc、Text字段值其中有一个包含noisewordMap遍历中对象的值则生成

noiseSentimentDetailRelationMap噪声详单数据，如果noisewordMap遍历中对象的值都不包含在sentimentDetailChanneMap的对象中Title、Desc、Text字段值中则生成SentimentDetailRelationMap飘红数据。

(2.3)遍历生成sentimentMap

相关代码:

sentimentDetailChanneMap=reckonranking(sentimentDetailChanneMap);

for(LongprojectId:sentimentDetailChanneMap.keySet()){

for(SentimentDetailsentimentDetail:sentimentDetailChanneMap.get(projectId)){

sentimentMap.put(sentimentDetail.getDetailId(),sentimentDetail);

}

}

(2.4)遍历SentimentDetailRelationMap生成SentimentDetailRelationList和SentimentDetailList集合。从sentimentMap中获取SentimentDetail设置SentimentDetailRelationMap的Desc和Title。MediaId值的根据sentimentDetail.getChannelId()和sentimentDetail.getUrl()判断设置。

相关代码:

if(1!=sentimentDetail.getChannelId().intValue()){

subDomian=GetStUtil.getSubDomain(sentimentDetail.getUrl());

}else{

subDomian=GetStUtil.getSubDomain(sentimentDetail.getBaiduurl());

}

Map<String,Long>mediaMap=annlyzeInit.getMedia();

if(mediaMap.containsKey(subDomian)){

sentimentDetail.setMediaId(mediaMap.get(subDomian));

}else{

sentimentDetail.setMediaId(0l);

}...

(2.5)Map<Long,List<Duplicate>>dupMap=newHashMap<>()数据生成

遍历子链接数据dupLIst生成dupMap，以acticleId为key，List<Duplicate>为value的map。

(2.6)遍历SentimentDetailList，根据detailId从dupMap中取出List<Duplicate>dupList，遍历dupList，生成senDupList数据集合。

3：存储最为详细的舆情数据表-tm_b_sentiment_detail数据集合SentimentDetailList的生成。

在(2.4)中已有生成逻辑。

4：储在搜索渠道中所有的结果详情表-tm_b_search_result_detail数据集合SentimentDetailList的生成。

在(2.4)中已有生成逻辑。

5：存储最为详细的舆情数据表-tm_b_sentiment_detail_noise数据集合noiseSentimentDetailList的生成。

遍历在(2.2)中生成的noiseSentimentDetailRelationMap通过detailRelation.getDetailId()从sentimentMap中获取noiseSentimentDetailList。

6：存储在搜索渠道中所有的结果详情表-tm_b_search_result_detail_noise数据集合noiseSentimentDetailList的生成。

遍历在(2.2)中生成的noiseSentimentDetailRelationMap通过detailRelation.getDetailId()从sentimentMap中获取noiseSentimentDetailList。

7：项目和详单数据关系表-tm_b_pro_detail_relation_noise数据集合noiseSentimentDetailRelationList的生成。

遍历在(2.2)中生成的noiseSentimentDetailRelationMap生成noiseSentimentDetailRelationList。

8：项目和详单数据关系表-tm_b_pro_detail_relation数据集合SentimentDetailRelationList的生成。

在(2.4)中已有生成逻辑

9：软文临时表-tm_b_softPaper数据集合includeList的生成。(没有用到)

10：负面历史临时表tm_b_sentiment_detail_origin

数据集合rngativeExitList的生成。(没有用到)

所有项目分析完成后调用线下调度将文件压缩上传到线上分析。