如何阐述自己做了一个什么样的东西

news/2025/2/23 15:28:04

线上qps2000,主要的性能瓶颈在于出现在数据库I/O上。另外,如果是一个正常部署的容器,qps能达到几百就不错了。资讯服务现在做了静态的底层页,所以热点新闻多数会命中底层页,即便没有命中底层页,也会走多层的缓存,不会直接打到资讯服务的接口上。

技术方案

解决哪些问题?模块如何拆分?
解决资讯服务mongo pg数据不是同事写入的问题,该问题会造成底层页404。

收敛资讯发文入口、目前发文都是直接写的PG,不好控制。

竞争对手的解决方案是什么?行业领先的解决方案是什么?

收敛服务业务垂直分割

数据存储怎么设计?扩展性考虑了嘛?

存储:Mongodb+PG

扩展性:mongo支持分表(按照SEQ分表)、非基础属性计划迁移到画像。

是否需要缓存?缓存如何设计?如何保证数据一致性?缓存失效怎么处理?

无缓存

代码设计是怎么样的?使用什么设计模式解决问题?

需要调用外部哪些服务?所有调用的处理容错和监控做了嘛?(所有服务都认为不可信:包括可用性,数据字段返回异常)

依赖的服务:stockMatch

容错:Sentinel 对 stockMatch、写mongo、写PG(出基础表以外的)、查pub205之类的

降级:Sentinel 对 stockMatch、写mongo、写PG(出基础表以外的)、查pub205之类的

监控: 基础监控报警 、jvm指标、所有写入的操作。

日志:所有写入的操作。

这个开发任务可以抽取哪几个组件?

基于接口抽象出http sdk(composer)

这个开发任务可以抽取哪几个服务?

服务:newsinfo(http)

是否需要独立平台来解决更大的系统性问题?

独立部署

性能瓶颈点是什么?业务需求并发是多少?如何保证并发支撑?如何做到线性扩容?

瓶颈:数据库,mongodb的IO,PG的IO。

并发:发文接口没有统计。需要挖一下日志。

并发支持:多副本

线性扩容:mongo可以做分区扩容、PG@ifind、容器副本扩容、cpu扩容

系统关键的容错方案是什么?如何兜底?

写PG失败:重试、如果不是基础表就丢弃。基础报表失败则发文失败。

写mongo失败:重试、不处理mongo了。

stockmatch失败:重试、丢弃

可测性如何保证?测试工具,测试数据能否提供?

在flashcms想中的savenews方法记录$item序列化日志,在测试环境上回放。验证PG数据的数据和正式环境的数据是否一致,验证mongo的数据格式。验证底层页。

工具:item日志解析脚本、回放脚本、数据对比工具

测试数据:$item的日志

监控如何考虑?这个业务或者功能有哪些关键节点?使用什么方式的监控?

基础监控模块,流控进行监控,监控 写入mongo、写入PG。失败进行报警。

日志需要覆盖哪些主要流程来确保后续的排查方案?

写入时、feign日志、feign失败日志

排查方案:记录elk日志

问题排查方案是什么?排查工具是否提供?

监控、Elk。

部署方案是什么?

k8s独立部署、


http://www.niftyadmin.cn/n/4924337.html

相关文章

JavaScript:模块化【CommonJS与ES6】

在 JavaScript 编程中,随着项目的复杂性增加,代码的组织和管理变得至关重要。模块化是一种强大的编程概念,它允许我们将代码划分为独立的模块,提高了可维护性和可扩展性。本文将详细介绍 CommonJS 和 ES6 模块,帮助你理…

Linux:管道命令与文本处理三剑客(grep、sed、awk)

1 管道命令(pipe)介绍 众所周知,bash命令执行的时候会输出信息,但有时这些信息必须要经过几次处理之后才能得到我们想要的格式,此时应该如何处置?这就牵涉到 管道命令(pipe) 了。管道命令使用的是|这个界定…

Vue3项目中使用原生input实现excel导入导出功能

重写input样式 首先我们先来重写input的原生样式&#xff0c;毕竟实在不好看。这里的思路很简单input外面套一层div然后让input撑满盒子然后给input隐藏了就行 <div class"bg-[#f8f8f8] w-[430px] h-[220px] rounded-md cursor-pointer relative outline-0">…

React组件实例的三大属性

React组件实例的三大属性分别是&#xff1a;state、props和refs。 State属性&#xff1a;用来存储组件内部的状态&#xff0c;只能在组件内部修改。当state被修改时&#xff0c;React会重新渲染组件。 Props属性&#xff1a;用来传递父组件的数据到子组件中&#xff0c;是组件…

想要通过软件测试的面试,都需要学习哪些知识

很多人认为&#xff0c;软件测试是一个简单的职位&#xff0c;职业生涯走向也不会太好&#xff0c;但是随着时间的推移&#xff0c;软件测试行业的变化&#xff0c;人们开始对软件测试行业的认知有了新的高度&#xff0c;越来越多的人开始关注这个行业&#xff0c;开始重视这个…

二级python和二级c哪个简单,二级c语言和二级python

大家好&#xff0c;小编为大家解答二级c语言和二级office一起报可以吗的问题。很多人还不知道计算机二级c语言和python哪个好考&#xff0c;现在让我们一起来看看吧&#xff01; 介绍Python有很多库和使用Qt编写的接口,这自然创建c调用Python的需求。一路摸索,充满艰辛的添加头…

【数据结构与算法】平衡二叉树(AVL树)

平衡二叉树&#xff08;AVL树&#xff09; 给你一个数列{1,2,3,4,5,6}&#xff0c;要求创建二叉排序树&#xff08;BST&#xff09;&#xff0c;并分析问题所在。 BST 存在的问题分析&#xff1a; 左子树全部为空&#xff0c;从形式上看&#xff0c;更像一个单链表。插入速度…

聚焦AIGC与大模型,和鲸ModelWhale荣登“2023数字生态500强”优秀案例解决方案榜单

8月4日&#xff0c;2023 数字生态大会在北京盛大举行&#xff0c;大会聚焦并锁定 AIGC 及大模型热点&#xff0c;以“ AIGC 新生态 数智新时代”为主题&#xff0c;由 B.P 商业伙伴联合盛景网联共同举办。 为深入发挥在产业领域的启迪借鉴价值作用&#xff0c;本次大会重磅发布…