2020年-05整个月的工作日志,数据逻辑处理

2024-06-09 18:08

本文主要是介绍2020年-05整个月的工作日志,数据逻辑处理,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

个人内容,近几年做工作笔记参考,不对外,你看了也没意思的。

个人内容,近几年做工作笔记参考,不对外,你看了也没意思的。

个人内容,近几年做工作笔记参考,不对外,你看了也没意思的。

个人内容,近几年做工作笔记参考,不对外,你看了也没意思的。

 

 

 

 

 

 

 

 

1、整理添加confluence文档-页面/知识空间首页/中台需求-资讯公开校验内容规则 100%;
2、公开操作添加修改人员接口,改为本地全表查询 100%;
3、主要是优化需求进行开发 100%:
资讯主表新需求-公开时间开始首次编辑记录;新建日志表设计接口,联调与专题和舆情共用接口
SP-3173、SP-3564、SP-3460
SP-3527 去重规则过滤逻辑优化、自身重复资讯需要去重
SP-3607 【资讯主表、快讯】-锁定机制优化/防撞
SP-3571 修改人员查询逻辑不与角色绑定
SP-3624 【舆情事件】多次任务转移给同一个人,允许多人加锁  ;
4、shiro与session抽取整理 20%;
拆分任务前端
开始时间写入,测试
3、token每次页面刷新,改为时间点去刷新加一个逻辑判断;
  private static final String PREFIX = "EVENT_PROCESS:";

    @Override
    public void putEventProcessTimeCache(Long newsId, Integer userId) {
        RBucket<Long> bucket = client.getBucket(PREFIX + userId + ":" + newsId);
        Long timeValue = bucket.get();
        if (null != timeValue) {
            bucket.set(timeValue, SysConfig.TIME_OUT, TimeUnit.MILLISECONDS);
        } else {
            bucket.set(System.currentTimeMillis(), SysConfig.TIME_OUT, TimeUnit.MILLISECONDS);
        }
    }
讯中台 资讯处理需要记录真实的开始处理时间和结束处理时间,便于分析后续的时效性SP-
资讯处理新建日志操作表添加日志开始时间-结束时间
SP-3564资讯中台添加日志操作表添加公开开始时间
SP-3460
资讯主表的时间开始首次编辑记录

SP-3173
资讯处理需要记录真实的开始处理时间和结束处理时间,便于分析后续的时效性

SP-3173  资讯处理 快讯添加日志操作表记录公开操作时间
资讯处理需要记录真实的开始处理时间和结束处理时间,便于分析后续的时效性
SP-3527 去重规则过滤逻辑优化、自身重复资讯需要去重
SP-3607 【资讯主表、快讯】-锁定机制优化/防撞

资讯中台SP-3527去重规则过滤逻辑优化、自身重复资讯需要去重
SP-3571 修改人员查询逻辑不与角色绑定
讯中台SP-3571
修改人员查询逻辑不与角色绑定

聚源中台JYZT-1106
资讯中台-数据锁定优化
    
资讯中台
SP-3624 【舆情事件】多次任务转移给同一个人,之前转移的舆情事件锁会被释放掉
【舆情事件】多次任务转移给同一个人,之前转移的舆情事件锁会被释放掉


能否认识一下,可以发展成男女朋友那种,然后结婚的那种?
我先自我介绍下,我是北方人--山东枣庄人,目前在杭州滨江区智汇大厦工作,租房在杭州东站附近,我是16年-本科-计算机专业毕业校招过来4年了,
我身高185cm/体重79kg 我是93年6月出生的,想找一个善良的人,以结婚目的谈恋爱。


1、权限就是功能,有功能呢反推菜单,菜单匹配到功能上面的。
2、
先新建

1.菜单里的上级与关联功能的下拉框是否能支持搜索。
2.菜单类型是否可以改为下拉框。(0系统,1目录,2页面,3按钮)。
3.菜单里的关联功能是否能改为不必填,目前不匹配功能无法下发权限,也就是功能没配置,菜单无法分配,
4、不支持个性化设置,每个系统保存默认设置,新建保存菜单同步新建功能,就不需要每次都要另外新建功能匹配。
 
主要是session+shiro进行迁移整理一个jar

npm   run    dev 

目前定位原因是按钮菜单没有与功能关联起来,导致操作不起任何作用。原来的配置是能够到页面这一层,吴雪希望能够控制到按钮这一层,在这个按钮菜单上做了功能关联,发现有几个菜单按钮默认无功能关联。目前已恢复,菜单显示正常。
斌哥目前我、玉龙和承金三人商讨之后,建议用户中心可以做以下优化,
1.菜单里的上级与关联功能的下拉框是否能支持搜索,菜单很多定位太慢。
2.菜单类型是否可以改为下拉框。(0系统,1目录,2页面,3按钮)。
3.菜单里的关联功能是否能改为不必填,目前不匹配功能无法下发权限,也就是功能没配置,菜单无法分配,或者添加一个功能关联开关,当功能关联关闭状态,直接下发菜单就可以。 

SP-3483 资讯中台新需求【中台资讯】资讯主表新增校验
SP-3173 资讯中台新需求 资讯处理需要记录真实的开始处理时间和结束处理时间,便于分析后续的时效性
SP-3460 资讯主表新需求-公开时间开始首次编辑记录
SP-3485新需求资讯中台新增前台校验
生产环境登录菜单进行定位原因
SP-3530 资讯中台新增前台校验【金融市场细分】=美股、【信息地域】
SP-3517资讯中台 快讯内容txt要求限制输入200汉字,超出限制公开时提示    
SP-3530 资讯中台新增前台校验【金融市场细分】=美股、【信息地域】
2、资讯主表、快讯表,【金融市场细分】=美股、【信息地域】不包含美国 则禁止,提示语:【信息地域】错,请修正后再公开;
SP-3532 资讯主表,【媒体出处常量】=其他,则提示,提示语:媒体出处常量是其他,请确认修改后再公开!
SP-3531
3、资讯主表,【媒体出处】<>聚源数据,【链接地址】为空 则提示,提示语:【链接地址】空,确定继续公开吗?
菜单与权限的逻辑处理是赋权下发就可以的
 detailVo.setRemark(newsProcessing.getRemark());
记者</d> 
记者</d>&nbsp;
记者&nbsp;
记者 
</p>\n\n<p><d class=\"info-highlight-color\">记者</d> 北<d class=\"info-highlight-color\">记者</d>京时间5月26日记者&nbsp;
 资讯中台SP-3483
【中台资讯】-<资讯主表>新增校验
资讯中台
SP-3173 资讯处理需要记录真实的开始处理时间和结束处理时间,便于分析后续的时效性
SP-3460
资讯主表的时间开始首次编辑记录
资讯中台
SP-3173
资讯处理需要记录真实的开始处理时间和结束处理时间,便于分析后续的时效性
SP-3485 资讯中台新增前台校验
 /**
     * 撰写机构(常量)
     */
    private String authorOrgCode;

    /**
     * 资讯分类-范围
     */
    private Long range;

    /**
     * 资讯分类-范围细分
     */
    private Long rangePlus;

  if (categorys.size() > 2 && ("港股".equals(categorys.get(2).get("category_name"))
1、资讯主表、快讯表, 【金融市场细分】=港股、【信息地域】不包含中国香港特别行政区 则禁止,提示语:【信息地域】错,请修正后再公开;
2、资讯主表、快讯表,【金融市场细分】=美股、【信息地域】不包含美国 则禁止,提示语:【信息地域】错,请修正后再公开;
3、资讯主表,【媒体出处】<>聚源数据,【链接地址】为空 则提示,提示语:【链接地址】空,确定继续公开吗?
4、资讯主表,【媒体出处常量】=其他,则提示,提示语:媒体出处常量是其他,请确认修改后再公开!
com.gildata.threebody.tbm.provider.impl.service.NewsProcessingServiceImpl
#219
    String  beginTime=cacheService.getBucket("");
                LocalDateTime publishBeginDate=DateUtil
                        newsProcessing.setPublishBeginDate();
2020-05-29
   由于个人原因,打算回老家。主要目的是回家。父母也在催着回去。然后机会也难得吧。老家有个机会6.1号入职。 申请5.29之前办理完离职手续  。
  目前手上的工作主要的bug,我争取我手里解决掉。然后张瑶交接的东西。我会交接给吕清强。   由于个人原因,打算回老家。主要目的是回家。父母也在催着回去。然后机会也难得吧。老家有个机会6.1号入职。 申请5.29之前办理完离职手续  。
  目前手上的工作主要的bug,我争取我手里解决掉。然后张瑶交接的东西。我会交接给吕。

1、解决这个资讯中台本地代码运行异常的问题;
2、CTP-67 语料平台发现历史资讯数据无内容进行优化;
3、CTP-64在标注列表和审核列表增加按标题查询语料功能;
4、交接张瑶菜单管理,权限和配置以及用户中心,如何配置到生产环境,
以及资讯公开的校验和配置实现。
5、 SP-3173资讯处理需要记录真实的开始处理时间和结束处理时间,便于分析后续的时效性。
6、SP-3447 生产环境“4155709068589”被源内去重了,但是该条资讯不符合去重规则,不应该被过滤。
7、SP-3446 资讯处理平台启动时重新刷新redis缓存。
8、资讯中台SP-3459 范围=【宏观,】行业标签为空时不应该提示【所属行业】可能有错,确定继续公开吗?

语料标注平台CTP-64
在标注列表和审核列表增加按标题查询语料功能

没有权限表,只有菜单表,role,菜单表shiro系统鉴权。

org.gil.three.admin.realm.MyShiroRealm

org.gil.three.admin.service.impl.ShiroServiceImpl

org.gil.three.admin.service.LoginService
getJTUserInfo---获取用户信息


org.gil.three.admin.realm.MyShiroRealm#  配置切面
    protected AuthenticationInfo doGetAuthenticationInfo(

org.gil.three.admin.service.LoginService
#getJTUserInfo 这个登录---域账号
#jylogin   账号密码
sessionUser.setUserInfo(null); //sessionUser ---》缓存
 SP-3446 资讯处理平台启动时重新刷新redis缓存

org.gil.three.admin.service.impl.LoginServiceImpl#public List<MenuNewTreeVO> getMenu(UserInfoVO userInfo) throws Exception {

全部菜单返回自己过滤

shiro抽象--登录模块。鉴权。----单独war包如何实现,架构师。
登录一次,不能再次登录。
语料平台,admin重启。

用户
找  张毅配置权限
用户权限系统 登录

角色管理: 角色关联用户
用户管理:
菜单管理:关联功能
功能管理:  关联角色的
等待5分钟,是一个定时任务

shiro白名单。。。。
oss库

    Integer  code=2195;
        CacheService cacheService = SpringContextUtils.getBean(CacheServiceImpl.class);
        RBucket<List<TbmDictVo>> codeBucket = cacheService.getBucket(SysConfig.NEWS_DIC_CODE + code);
        cacheService.cleanBucket(SysConfig.NEWS_DIC_CODE + code);
        List<TbmDictVo> codeList = codeBucket.get();
        if (CollectionUtils.isEmpty(codeList)) {
            List<HwDimDict> tbmDictList = dimDictDao.tbmDictQuery(String.valueOf(code));
            codeList = Dict2DictVoConvert.transformHwDimDict(tbmDictList);
            codeBucket.set(codeList);
        }

舆情资讯

TbmNewsPopularFeelings  舆情资讯
  /** 公开开始时间 */
    @TableField(strategy = FieldStrategy.IGNORED)
    private Date publishBeginDate;
com.gildata.threebody.tbm.provider.impl.service.PopularFeelingsHandleServiceImpl

这篇关于2020年-05整个月的工作日志,数据逻辑处理的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1045912

相关文章

大模型研发全揭秘:客服工单数据标注的完整攻略

在人工智能(AI)领域,数据标注是模型训练过程中至关重要的一步。无论你是新手还是有经验的从业者,掌握数据标注的技术细节和常见问题的解决方案都能为你的AI项目增添不少价值。在电信运营商的客服系统中,工单数据是客户问题和解决方案的重要记录。通过对这些工单数据进行有效标注,不仅能够帮助提升客服自动化系统的智能化水平,还能优化客户服务流程,提高客户满意度。本文将详细介绍如何在电信运营商客服工单的背景下进行

基于MySQL Binlog的Elasticsearch数据同步实践

一、为什么要做 随着马蜂窝的逐渐发展,我们的业务数据越来越多,单纯使用 MySQL 已经不能满足我们的数据查询需求,例如对于商品、订单等数据的多维度检索。 使用 Elasticsearch 存储业务数据可以很好的解决我们业务中的搜索需求。而数据进行异构存储后,随之而来的就是数据同步的问题。 二、现有方法及问题 对于数据同步,我们目前的解决方案是建立数据中间表。把需要检索的业务数据,统一放到一张M

关于数据埋点,你需要了解这些基本知识

产品汪每天都在和数据打交道,你知道数据来自哪里吗? 移动app端内的用户行为数据大多来自埋点,了解一些埋点知识,能和数据分析师、技术侃大山,参与到前期的数据采集,更重要是让最终的埋点数据能为我所用,否则可怜巴巴等上几个月是常有的事。   埋点类型 根据埋点方式,可以区分为: 手动埋点半自动埋点全自动埋点 秉承“任何事物都有两面性”的道理:自动程度高的,能解决通用统计,便于统一化管理,但个性化定

无人叉车3d激光slam多房间建图定位异常处理方案-墙体画线地图切分方案

墙体画线地图切分方案 针对问题:墙体两侧特征混淆误匹配,导致建图和定位偏差,表现为过门跳变、外月台走歪等 ·解决思路:预期的根治方案IGICP需要较长时间完成上线,先使用切分地图的工程化方案,即墙体两侧切分为不同地图,在某一侧只使用该侧地图进行定位 方案思路 切分原理:切分地图基于关键帧位置,而非点云。 理论基础:光照是直线的,一帧点云必定只能照射到墙的一侧,无法同时照到两侧实践考虑:关

使用SecondaryNameNode恢复NameNode的数据

1)需求: NameNode进程挂了并且存储的数据也丢失了,如何恢复NameNode 此种方式恢复的数据可能存在小部分数据的丢失。 2)故障模拟 (1)kill -9 NameNode进程 [lytfly@hadoop102 current]$ kill -9 19886 (2)删除NameNode存储的数据(/opt/module/hadoop-3.1.4/data/tmp/dfs/na

异构存储(冷热数据分离)

异构存储主要解决不同的数据,存储在不同类型的硬盘中,达到最佳性能的问题。 异构存储Shell操作 (1)查看当前有哪些存储策略可以用 [lytfly@hadoop102 hadoop-3.1.4]$ hdfs storagepolicies -listPolicies (2)为指定路径(数据存储目录)设置指定的存储策略 hdfs storagepolicies -setStoragePo

Hadoop集群数据均衡之磁盘间数据均衡

生产环境,由于硬盘空间不足,往往需要增加一块硬盘。刚加载的硬盘没有数据时,可以执行磁盘数据均衡命令。(Hadoop3.x新特性) plan后面带的节点的名字必须是已经存在的,并且是需要均衡的节点。 如果节点不存在,会报如下错误: 如果节点只有一个硬盘的话,不会创建均衡计划: (1)生成均衡计划 hdfs diskbalancer -plan hadoop102 (2)执行均衡计划 hd

【Prometheus】PromQL向量匹配实现不同标签的向量数据进行运算

✨✨ 欢迎大家来到景天科技苑✨✨ 🎈🎈 养成好习惯,先赞后看哦~🎈🎈 🏆 作者简介:景天科技苑 🏆《头衔》:大厂架构师,华为云开发者社区专家博主,阿里云开发者社区专家博主,CSDN全栈领域优质创作者,掘金优秀博主,51CTO博客专家等。 🏆《博客》:Python全栈,前后端开发,小程序开发,人工智能,js逆向,App逆向,网络系统安全,数据分析,Django,fastapi

usaco 1.3 Mixing Milk (结构体排序 qsort) and hdu 2020(sort)

到了这题学会了结构体排序 于是回去修改了 1.2 milking cows 的算法~ 结构体排序核心: 1.结构体定义 struct Milk{int price;int milks;}milk[5000]; 2.自定义的比较函数,若返回值为正,qsort 函数判定a>b ;为负,a<b;为0,a==b; int milkcmp(const void *va,c

烟火目标检测数据集 7800张 烟火检测 带标注 voc yolo

一个包含7800张带标注图像的数据集,专门用于烟火目标检测,是一个非常有价值的资源,尤其对于那些致力于公共安全、事件管理和烟花表演监控等领域的人士而言。下面是对此数据集的一个详细介绍: 数据集名称:烟火目标检测数据集 数据集规模: 图片数量:7800张类别:主要包含烟火类目标,可能还包括其他相关类别,如烟火发射装置、背景等。格式:图像文件通常为JPEG或PNG格式;标注文件可能为X