科技

  • 还有和Redis一样好用的NoSQL

      实际上为了更好的描述实体之间的关系,我们要是再继续使用Redis的话,是不是感觉实体之间的关系不够那么的明显,虽然也是属于NoSQL的一种,但是相对来说,Redis,表现实体之间的关系就没有那么清晰了,为了更好的描述实体之间的关系,就会使用图形数据库来进行了,那么今天阿粉介绍的,就是一个图形化的数据...

    2024-11-15 995
  • 分布式存储架构发展及技术分析

      从云和互联网的业务场景来看,其存储域主要采用基于服务器部署分布式存储服务的融合方式,它面临如下挑战,1.数据保存周期与服务器更新周期不匹配,大数据、人工智能等新兴业务催生出海量数据,大量数据需按照其生命周期策略,例如8~10年,进行保存,2.性能可靠与资源利用率难以兼得,支撑业务的分布式存储系统大致...

    2024-11-15 207
  • 图解PostgreSQL进程结构和内存结构

      一.建立会话的过程阶段一,客户端发起请求,阶段二,该阶段由主服务postmaster进程负责,阶段三,阶段二通过之后,主服务进程为该客户端单独fork一个客户端工作进程Postgres,SP进程,会话进程,用户一旦验证成功就会fork一个新的进程,分配PGA里面的work,mem,从磁盘读取数据到S...

    2024-11-15 420
  • 我们一起聊聊运维知识的呈现需要个性化吗

      这些年数据库运维工具的领域各种概念层出不穷,每个用户好像都有自己的特殊情况,他们需要的运维工具的功能也千差万别,搞的有时候让我都感到有些弄不明白用户到底需要什么样的产品了,有些运维工具是企业的刚需,是高频使用的功能,比如说数据库的安装部署、自动打补丁升级,批量修改数据库配置等,随着企业私有云的建设,...

    2024-11-15 601
  • 基础设施和数据两手都要硬 新型IT运维管理

      AI大模型时代,数据赋予IT人,新使命,当下IT人在企业中扮演着运营支撑的角色,说到运维管理,相信每人都是一把辛酸泪,每天承担着繁琐、高负荷且又高风险的运维工作,但在业务规划和职业发展时又成为了,透明人,业内有句调侃的话,只花钱的人,不配拥有发言权随着AI大模型应用的普及,数据成为了企业的关键资产和...

    2024-11-15 529
  • 一键搞定集群升级与测试 Pulsar升级自动化

      背景由于我在公司内部负责维护Pulsar,需要时不时的升级Pulsar版本从而和社区保持一致,而每次升级过程都需要做相同的步骤,命令行工具以上的流程步骤最好是全部一键完成,我们只需要人工检测下监控是否正常即可,于是我便写了一个命令行工具,执行流程如下,pulsar,upgrade,cli,hok,a...

    2024-11-15 560
  • Elasticsearch 深度巡检 Logstash Kibana 如何对 Filebeat

      本文将详细介绍一套深度巡检方案,包括各组件的监控方法、健康状态检查、性能指标监控,以及一些关键的DSL查询示例,帮助大家全面掌握集群状态,及时发现潜在问题,优化EFLK的运行,...。...

    2024-11-15 675
  • pod驱逐问题处理 K8S故障处理指南

      在K8S集群故障处理过程中,你可能遇到过pod的各种状态,Evicted状态代表你的K8S环境遇到了资源驱逐的问题,本节通过对驱逐问题的解决,参数的调整,问题的处理思路,希望给你解决此类问题提供帮助,pod出现状态为Evicted时,表示出现了驱逐,pod驱逐出现的原因一般为资源不足,内存或磁盘空间...

    2024-11-15 531
  • ModSecurity 网络应用防火墙 配置 Nginx 为

      OSI,开放系统互联,是最常被网络相关讨论引用的网络流量框架之一,当数据包通过第6层,表示层,移动到第7层,应用层,时,它会进行解密或解码操作,这些操作可能会因异常解码和解释而产生漏洞,而这些漏洞可能被利用来打破标准应用上下文,注入就是这种漏洞的一种类型,而且因为传统的设备无法应对这些威胁,所以其长...

    2024-11-15 336
  • TIME 一次TCP

      收到连接数过多的告警并不代表一定会产生生产问题,此时要关注负载是否直线上升,连接数一直无法释放,如果出现此情况,则需要及时处理,避免造成生产环境宕机,...。...

    2024-11-15 158
  • 私有镜像仓库 安装和使用 Harbor

      我们如果需要部署一个私有镜像仓库来使用,最简单的就是registry,一行命令就可以运行在Docker中,但功能也比较弱,如果想要私有镜像仓库功能更丰富些,可以使用Harbor,...。...

    2024-11-15 755
  • 的 Spark 中取出具体某一行 DataFrame 如何从

      spark中Bucketizer的作用和我实现的需求差不多,尽管细节不同,,我猜测其中也应该有相似逻辑,有能力和精力了应该去读读源码,看看官方怎么实现的,...。...

    2024-11-15 997
  • Spark Streaming精进之前必须了解的基本概念

      Spark整体介绍Spark是一个快速的,多用途的计算系统,这是来自官网的自我介绍,一般敢自称系统的都是有两把刷子的,况且还是多用途的计算系统,Spark计算系统包含如下功能组件SparkCore,Spark的核心功能模块,SparkSQL,用于处理结构化数据,MLlib,用于机器学习,GraphX...

    2024-11-15 933
  • 开发板试用报告 HiSpark Wi

      今天终于收到了开发板,就是咱们大名鼎鼎的HiSparkWi,FiIoT智能家居套件,心理那个开心啊,感谢组织这么棒的活动,激动的心颤抖的手,小心翼翼开箱,盒子简洁又高端,满满的设计感,打开盖子,发现盒子分为两层,简直是个豪华复式别墅,每个配件板都住在单间中,还有一层保护袋,安全又省心,在C位的自然是...

    2024-11-15 893
  • 架构设计与原理思想 Spark

      Spark架构设计与原理思想2021,11,1110,48,35Spark在MapReduce的基础上进行了改进,它主要使用内存进行中间计算数据存储,加快了计算执行时间,在某些情况下性能可以提升百倍,Spark在MapReduce的基础上进行了改进,它主要使用内存进行中间计算数据存储,加快了计算执行...

    2024-11-15 312

联系我们

QQ号:***

微信号:***

工作日:9:30-18:30,节假日休息