作为中国经济的重要组成部分，央国企在国家经济建设和社会发展中具有不可替代的作用。承时代之新，众多央国企近年来以新一代信息技术为抓手，夯实安全可信云平台底座，赋能自身业务发展和模式创新。在政策引导及技术驱动下，中国中煤能源集团有限公司（以下简称“中国中煤”）依托天翼云先进可靠、自主可控的云底座，推动中国中煤信息化系统完成国产化改造，在保障业务数据安全的基础上，进一步提升了业务的灵活性及创新能力。国产化浪潮来临中国中煤智能管控平台升级在即中国中煤肩负着保障国家能源安全的重要使命。其现有可控煤炭资源储量超过760亿吨，煤炭总产能达到3亿吨级规模，煤化工总产能超过1000万吨，连续四年位列《财富》世界企业500强，业务体量巨大。在煤炭行业智能化发展趋势下，中国中煤以“央国企数字化转型”为指引，进行...阅读全文
近日，2023年海关科技装备博览会（简称“关博会”）在北京举办。中国电信围绕“数字政务助力海关事业发展”主题，在主展区展出了数字政务最新成果和实践经验。2023年海关科技装备博览会中国电信展区展区汇集了数字底座、政务数据服务体系、大模型·一网通办-12345政务热线平台、一网协同平台、5G+智慧海关、量子产业布局、卫星手机直连等10余个展项，充分展现了中国电信在数字政务领域富有成效的探索及取得的阶段性成果。自主可控“国云”底座天翼云提供全栈自主可控、一云多芯的安全可靠云基础设施，可以在智慧海关的关键业务领域提供基础底座服务，满足客户技术升级要求，形成基于天翼云的数字信息基础，助力客户实现“多方共识、多元治理、协同共治”的治理局面。一体化智能算力平台为了向政务应用提供安全可靠的算力服务，天翼...阅读全文
近日，弗若斯特沙利文（Frost & Sullivan，简称“沙利文”）联合头豹研究院发布《2023年中国边缘云市场报告》，天翼云在2023H1中国边缘云IaaS层细分市场位列第一，领跑中国边缘云市场。近年来，随着5G、物联网等技术的飞速发展，智能终端设备数量迅速增加，产生的数据量呈指数级增长，这对数据处理的时效性、可靠性提出更高要求。边缘云通过将网络、计算、存储资源部署到离用户设备更近的位置，更好地满足用户在敏捷连接、实时业务等不同方面的需求。作为云服务国家队，天翼云立足客户需求，持续深耕边缘计算领域，不断加速算力基础设施建设，并构建完善的边缘云产品矩阵，以低时延、高可靠、高安全、可调度的边缘云服务，助力企业实现敏捷业务响应、释放业务价值，推动算力普惠。在边缘算力布局方面，天翼云充分发挥...阅读全文
本文分享自天翼云开发者社区《CBR云备份与恢复管控简介》，作者:c****n1.CBR云备份与恢复介绍CBR (Cloud Backup & Restore)是一般云厂商提供的备份与恢复服务。用户可以在云端对数据进行备份和恢复，保证数据的安全性和可靠性。使用CBR，用户可以方便地随时随地备份和恢复数据。采用增量备份、快照备份、跨区域复制等先进的备份和恢复技术，提供快速、高效、可靠的数据保护。此外，CBR还提供了基于agent的备份、快照备份、VSS备份等多种备份方式，以适应不同类型的数据和应用。2.云备份与恢复管控介绍CBR 管理架构旨在为用户提供安全、可靠、易用的备份与恢复服务。该架构由几个关键组件组成，包括备份服务端、消息中间件、备份仓库、备份引擎和恢复引擎。备份服务端为用户提供了基于...阅读全文
本文分享自天翼云开发者社区《云审计与大数据审计：区别、优势与应用场景》，作者：每日知识小分享随着信息技术的飞速发展，审计领域也迎来了革命性的变革。云审计和大数据审计作为两种新兴的审计模式，各有其独特的特点和应用场景。本文将对云审计和大数据审计进行深入的比较分析，探讨它们之间的区别、优势以及适用的场景，旨在帮助读者更好地理解这两种审计模式，并为企业选择合适的审计方法提供参考。云审计和大数据审计都是信息技术在审计领域应用的产物。云审计主要利用云计算技术的优势，实现审计数据的集中存储、处理和分析；而大数据审计则侧重于利用大数据技术的能力，对海量数据进行挖掘和分析，以发现潜在的风险和问题。虽然两者在某些方面有相似之处，但它们在数据结构、处理方式、技术应用等方面存在明显的区别。一、云审计与大数据审计的...阅读全文
本文分享自天翼云开发者社区《ceph数据重构原理》，作者:x****n在分布式存储系统Ceph中，硬盘故障是一种常见问题。为了保证数据安全，当发生硬盘故障后，分布式存储系统会依据算法对故障硬盘上的数据进行数据重构及转储。和一般分布式系统一样的是，Ceph同样使用多副本机制来保证数据的高可靠性（注：EC在实现层面可以理解为副本机制的一种），给定一份数据，Ceph在后台自动存储多份副本（一般使用3个副本），从而使得在硬盘损毁、服务器故障、机柜停电等故障情况下，不会出现数据丢失，甚至数据仍能保持在线。不过在故障发生后，Ceph需要及时做故障恢复，将丢失的数据副本补全，以维系持续的数据高可靠性。一.PG和PGLogCeph中对象数据的维护由PG（Placement Group）负责，PG作为Ceph...阅读全文
在数据驱动的时代，高效地存储和处理数据成为了开发者们的重要任务。Redis，作为一个开源的高性能键值对（key-value）数据库，以其独特的数据结构和丰富的功能，成为了众多项目的首选。 今天，我们就来揭开Redis的神秘面纱，看看它是如何通过不同的数据类型，为我们提供高效、灵活的数据存储和处理能力的。 ### 一、字符串（String）：数据的基石 #### String类型简介 字符串是Redis最基本的数据类型，它可以存储文本、数字或者二进制数据。 使用字符串类型，你可以执行原子性的操作，如追加（APPEND）、设置（SET）和获取（GET）。例如，你可以将用户信息作为字符串存储，并通过键快速检索。 - 一个key对应一个value。 - String类型是二进制安全的。只要内容可以使...阅读全文
Spring Cloud Alibaba: 实现服务的无损下线功能作者：谁偷走了我的奶酪2024.01.18 02:49浏览量：2简介：在微服务架构中，服务的上线和下线是一个常见的操作。然而，直接关闭服务可能会导致数据丢失或服务中断。本文将介绍如何使用Spring Cloud Alibaba实现服务的无损下线功能。在微服务架构中，服务的上线和下线是一个常见的操作。但是，直接关闭服务可能会导致数据丢失或服务中断，这被称为“有损下线”。为了解决这个问题，我们可以使用Spring Cloud Alibaba提供的解决方案来实现服务的无损下线。无损下线的原理是在服务关闭之前，将所有待处理的任务或者请求全部处理完成，保证服务的正常运行，然后再安全地关闭服务。这样就可以避免数据丢失和服务中断的问题。要实...阅读全文
flink实时规则营销系统（39期，2023版） 给大家分享一套课程——flink实时规则营销系统（39期，2023版），附源码+文档+虚拟机下载。 CEP 在 Flink 中以 library 形式存在，并不和其底层引擎代码相绑定，只是继承很多 low-level 的 API，阅读 cep 的代码过程中也可以学习到不少 Flink 上新颖的使用方式。我们可以将 Flink 内部的 CEP 实现简要分成以下几个步骤： 规则解析 规则匹配 匹配事件提取 flink可以广泛用于实时计算,特别是无限流的场景，比如在双11这天,淘宝或者天猫这天网页在某个时间段被用户浏览了多少次，那些热门商品是用户喜欢的。比如说，每隔5分钟，想看看最近一小时内被点击最多的商品。这就是一个很典型的flink-windo...阅读全文
本文分享自天翼云开发者社区《一文带您了解如何降低对象存储成本》，作者：刘****筠首先，需要了解天翼云对象存储（原生版）I型ZOS的三种存储类型，分别供标准、低频、归档存储，全面覆盖从热到冷的各种数据存储场景，您可根据使用场景和性能要求选择合适的存储类型。标准存储提供高可靠、高可用、高性能的存储服务，适用于频繁访问（平均一月访问多次）的存储场景，比如移动应用、网站、音视频、社交图片、大数据分析等业务场景。低频存储提供高可靠、低成本的存储服务，适用于不频繁访问（平均一月访问一次）的存储场景，但在需要时也能快速实时访问数据的业务场景，比如数据备份、监控数据存储等场景。归档存储提供高可靠、更低成本的存储服务，需要解冻后访问，适用于很少访问（平均一年访问一次）的存储场景，比如档案数据、医疗影像、长期...阅读全文
本文分享自天翼云开发者社区《浅谈Redis的三种集群策略及应用场景》，作者：段林Redis提供了三种集群策略：1.主从模式：这种模式⽐较简单，主库可以读写，并且会和从库进⾏数据同步，这种模式下，客户端直接 连主库或某个从库，但是但主库或从库宕机后，客户端需要⼿动修改IP，另外，这种模式也⽐较难进⾏ 扩容，整个集群所能存储的数据受到某台机器的内存容量，所以不可能⽀持特⼤数据量。2.哨兵模式：这种模式在主从的基础上新增了哨兵节点，但主库节点宕机后，哨兵会发现主库节点宕机， 然后在从库中选择⼀个库作为进的主库，另外哨兵也可以做集群，从⽽可以保证但某⼀个哨兵节点宕机 后，还有其他哨兵节点可以继续⼯作，这种模式可以⽐较好的保证Redis集群的⾼可⽤，但是仍然不能 很好的解决Redis的容量上限问题。3...阅读全文
位于海南省陵水黎族自治县的清水湾，是一个拥有碧海蓝天与温暖阳光的热带海湾。早春三月，海岸线旁的沙滩上满是享受假期生活的游客。在不远处的海域，重量与1000辆小汽车相当、单个罐体直径与“天和号”空间站核心舱相当的几个“大家伙”正隐于波涛之下，安静地工作着。自去年3月底在陵水正式投入运营以来，全球首/个商用海底数据中心已平稳运行近一年，为人工智能、大数据等互联网企业提供数据存储和计算服务。“把数据存进海底”，这一天马行空的想象变成现实，互联网和数据行业与海洋科技打通，形成了全新的交叉业态。数据中心为何由陆向海？错综复杂的海洋环境能否保障数据安全和稳定？“陆数海算”将如何助力我国算力迈上新台阶？一起走近海南陵水商用海底数据中心。海底数据舱正在进行车间建造集成将海洋能源转化为海洋算力在几乎不消耗淡...阅读全文
本文分享自天翼云开发者社区《双栈网络使用什么技术实现总部网络能访问分部网络？》，作者：SD万为了实现总部和分部之间的IPv4和IPv6互访，可以使用以下隧道技术：1、IPv4隧道技术：可以使用GRE（Generic Routing Encapsulation）隧道技术，在IPv4网络中隧道传输IPv6数据包。在总部和分部之间分别配置一个GRE隧道接口，并将IPv6数据包封装在IPv4数据包中进行传输。配置完成后，总部的IPv4地址就可以访问分部的IPv4地址。2、IPv6隧道技术：可以使用6to4、Teredo等IPv6隧道技术，在IPv4网络中隧道传输IPv6数据包。在总部和分部之间分别配置一个6to4或Teredo隧道接口，并将IPv4数据包封装在IPv6数据包中进行传输。配置完成后，总...阅读全文
近日，由中国互联网协会主办的2024（第二十三届）中国互联网大会在北京举行。天翼云凭借“慧泽”大模型项目荣获首届“金灵光杯”中国互联网创新大赛金灵光大奖以及人工智能专题赛一等奖，天翼云电脑荣获信息技术应用创新专题赛优秀奖。天翼云科技有限公司副总经理、首席网络安全官广小明出席中小企业数据安全工具箱上线仪式，天翼云科技有限公司资深安全专家闫斐围绕“构筑原生安全基础设施，赋能企业数字转型发展”进行分享。以科技创新为引领匠心打造数智化产品服务大会开幕式上，中国工程院院士、中国互联网协会专家咨询委员会主任邬贺铨院士为获奖单位颁发了“金灵光”奖杯和获奖证书。“慧泽”是天翼云推出的政务行业大模型，此次获奖的天翼云“慧泽”大模型项目是基于政府惠民和政务管理的实际需求，在开源基模的基础上，通过持续预训练和有监...阅读全文
近日，国际数据公司IDC发布的《中国专属云服务市场（2023下半年）跟踪》报告显示，2023下半年，专属云服务整体市场规模同比增长18.0%。中国电信天翼云以21.8%的市场份额，蝉联中国专属云服务市场第一。天翼云连续五次登顶，以实力持续领跑中国专属云服务市场。IDC报告指出，2023下半年，中国专属云服务市场继续从“规模发展”向“规模+质量并行发展”进阶，企业对于专属云服务的能力要求随着用云深度的不断加深而不断提高。依托自主可控的全栈云服务产品体系，天翼云可为客户提供公有云、专属云、私有云、边缘云等多类型高品质云服务。天翼专属云能够为用户实现资源物理隔离、网络隔离、存储隔离，消除用户之间的资源相互影响和网络互访隐患，具有安全隔离、稳定可靠、灵活可控、易于管理等优势。在专属云内，用户可独享...阅读全文
本文分享自天翼云开发者社区《天翼云发布边缘安全加速平台AccessOne，四大产品能力助力企业安全高速发展》，作者：天翼云社区官方账号2023年5月30日全国科技工作者日，以“连接世界从边缘开始”为主题的天翼云边缘安全加速平台发布会在线上顺利举办。会上，天翼云重磅发布边缘安全加速平台AccessOne（后称AccessOne），并深入介绍了产品四大能力，以及在教育行业的实践成果，为企业提供性能、安全、算力等满足不同场景需求的智能边缘网络。应对多重网络应用挑战，一体化服务成优先选择数字化转型进程中，新型产业在改善人们生活质量的同时，也对网络应用服务提出挑战。天翼云智能边缘事业部副总经理鄢智勇指出，首先，越来越多的数据和应用需在离数据源更近的位置进行实时处理和分析，满足对低延迟和高带宽的需求。其...阅读全文
本文分享自天翼云开发者社区《HPC的基本概念》，作者:它零食抱佛jioHPC（High Performance Computing）是一种高性能计算技术，它利用大规模并行处理器集群或超级计算机等高性能计算设备，以及高速网络互联技术，实现对大规模数据和复杂计算任务的高效处理和分析。HPC根据业务场景可分为科学计算场景：科学计算场景主要用于模拟和分析科学问题，如气候模拟、天体物理学、生物医学等领域。这些计算任务通常需要大量的计算资源和高度并行的计算能力，以便处理大规模的数据和复杂的计算模型。工程计算场景：工程计算场景主要用于工程设计和优化，如航空航天、汽车工程、建筑设计等领域。这些计算任务通常需要高度精确的计算结果和快速的计算速度，以便进行工程设计和优化。数据分析场景：数据分析场景主要用于处理大...阅读全文
本文分享自天翼云开发者社区《快照技术对比学习》，作者:z****n1.快照的分类根据 SNIA 的定义, 快照有全量快照 (full snapshot) 和增量快照 (incremental snapshot) 两种类型。2.全量快照克隆(Clone)：与备份操作类似，克隆技术是一种数据复制和恢复的方法，用于创建源数据的完全副本。将源数据的所有信息和状态以二进制形式进行备份，并在需要时将其恢复到相同或另一个系统中。克隆对象可以是存储卷、文件系统或者LUN，优势在于它提供了完全一致和独立的复制，不受源系统的影响。缺点就是在创建时要完整的复制一份数据，需要占用和源数据空间一样大的存储空间，资源成本高，消耗时间长。镜像分离(Split Mirror)：镜像分离也属于全量快照，先创建源卷的一个镜像卷...阅读全文
数字时代，数据成为重要的生产要素。随着企业数据量的爆发式增长，管理和维护庞大的数据集合变得愈发复杂。数据库中存储了企业的核心数据资产，一款安全高效的数据库管理工具必不可少。天翼云数据管理服务（AOne-DMS），不仅能让你的数据库管理工作变得轻松简单，还能保障数据安全无忧！ 数据安全 核心坚守安全，一直是数据库管理的重中之重，尤其是在面临管理多云异网数据库时，启用公网访问不仅增加了流量成本，还可能带来安全隐患。天翼云AOne-DMS支持多云异网数据安全管理，可提供“网络+数据”双效安全防护，管理经过AOne网络连接的数据库，并通过精细化的权限管理、操作风险管控、审批流及数据库审计等手段，保障用户数据安全无忧。全局管理 简化操作多云异网数据库面临的不仅仅是安全问题，日常数据库管理的复杂...阅读全文
本文分享自天翼云开发者社区《TiDB体系架构》，作者:x****n如图所示，TiDB体系中三大组成部分：PD、TiDB Server、TiKV1.PD：负责产生全局的TSO时间、控制Region在TIkv中的分布、产生全局事务ID、还有其他ID。2.TiDB：没有数据落地，接收客户端sql语句，对sql语句进行解析和编译，最终形成执行计划。DDL语句和基于MVCC的老版本数据的回收，也是TiDB Server操作。3.TiKV：数据以键值队存储在TiKV中，主要负责数据持久化、MVCC、Coprocessor、事务以及自身副本的高可用和强一致性（由Muti-raft实现）。4.TiFlash：列式存储引擎，主要由扩展的raft共识算法与Tikv进行数据同步，实现负载均衡、强一致读取和实时更...阅读全文
近日，天翼云联合权威科技媒体InfoQ举办了以“新存储，更轻量”为主题的线上技术分享会。天翼云存储产品线总监武志民讲解了HBlock的创新设计和技术。高性能·高可用·高可靠自研创新解决存储技术难题天翼云自主研发的业内首款存储资源盘活系统HBlock能够与底层基础设施完全解耦，同服务器上现网业务并存，将x86、ARM、龙芯等异构通用服务器中的存储资源统一管理，通过标准的iSCSI协议提供分布式块存储服务。在性能方面，HBlock单卷IOPS可达15万次、读写延迟小于200微秒，这要归功于自研的分布式多控架构和智能调度算法，以及多模式写缓存与读缓存的设计。写缓存方面，HBlock具有三种模式，可以根据不同场景的读写需求动态调整。读缓存方面，HBlock采用按需更新、分段加锁、高效淘汰算法和智能预...阅读全文
之前文章提到过Kafka的broker端有ISR机制，它可以看成多个副本的集合，里面有leader副本和多个follower副本，数量是我们可以配置的，只有ISR中的副本才有可能成为leader副本。 我们可以通过一些参数的配置，例如ack的配置、生产者重试、isr最小数量，消费者改为手动提交等方式来尽可能的保障Kafka的消息可靠性。 Kafka在保证数据的可靠性上使用的是‘数据冗余’的方式，即将一个分区下的数据保存到多个副本中，起到备份数据的作用。这样如果leader挂了，会重新选举follower作为leader继续工作，那么Kafka中leader副本是如何将数据同步到follower副本中的呢？今天想通过这篇文章总结记录下。 1.副本中的高水位（High Watermark） 什么...阅读全文
近年来，随着各行业数智转型逐步深入以及人工智能大模型的蓬勃发展，气象分析、大模型训练、自动驾驶、石油勘探、EDA仿真、基因分析等高性能计算（HPC）场景和智算场景（AI）不仅对算力需求激增，也产生了图片、视频等大规模非结构性数据，企业在实践中面临着数据量大、存储性能不足等问题，导致训练阻塞、算力利用率低甚至训练中断现象频繁发生。在此背景下，企业需要不断创新和优化存储系统技术架构，以便实现更加高效、可靠和灵活的存储解决方案。作为云服务国家队，天翼云坚持科技创新，不断加快推进数据存储基础设施建设，创新推出并行文件服务HPFS（CT-HPFS，High Performance File Storage），助力企业构建高性能存储底座。天翼云HPFS支持全NVMe闪存和InfiniBand高速网络，并...阅读全文
本文分享自天翼云开发者社区《虚拟化技术简介》，作者：s****n在计算机科学中，虚拟化技术（Virtualization）是一种资源管理技术，将计算机的各种物理资源予以抽象、转换，然后呈现出来的一个可供分割并任意组合为一个或多个虚拟计算机的配置环境。虚拟化技术是云计算的基础，本文将简介虚拟化技术，同时介绍虚拟化技术在云计算中的重要作用。虚拟化技术的历史1959年，牛津大学的计算机教授Christopher提出并论述了虚拟化技术概念，从此拉开了虚拟化发展的帷幕。但受限于服务器架构局限，当时的虚拟化技术发展不足。1998年，VMware软件公司成立,并推出VMware Workstation和ESX Server等虚拟化产品,成为行业领导者。目前主流商业虚拟化产品有VMware、Virtual ...阅读全文
引言 在实际业务开发中，随着业务的变化，数据的复杂性和多样性不断增加。传统的关系型数据库模型在这种情况下会显得受限，因为它们需要预先定义严格的数据模式，并且通常只能存储具有相同结构的数据。而面对非结构化或半结构化数据的存储和处理需求，选择使用非关系型数据库或者创建子表存储这些变化的结构可能会变得复杂。在这种情况下，我们可以利用MySQL的JSON字段类型来解决这个问题。JSON字段提供了灵活的数据存储方式，能够轻松应对数据结构的变化和动态性，从而更好地满足业务需求。 MySQL5.7.8版本引入了JSON数据类型，允许在数据库表中存储和操作符合JSON格式的数据。这种原生支持JSON（JavaScript对象表示法）的数据类型遵循RFC 7159标准，提供了有效存储复杂、半结构化数据的方式。...阅读全文
本文分享自天翼云开发者社区《Redis缓存异常及解决方案》，作者：l****n本文向读者解释了Redis使用过程中，数据不一致、缓存雪崩、缓存击穿和缓存穿透等问题的定义，并给出对应的解决方案。1、数据不一致 一致指的是：缓存中有数据，那么，缓存的数据值需要和数据库中的值相同；缓存中本身没有数据，那么，数据库中的值必须是最新值。不一致如何发生：对于读写缓存来说，写缓存时同步写数据库，需要使用事务保证缓存和数据库的更新具有原子性。弱一致性情况下，可以使用异步写回。对于只读缓存，删改数据需要既更新数据库，又删除缓存。如果不使用事务，就会出现数据不一致。比如先更新数据库，再删除缓存。更新成功，删除缓存失败，则缓存中为旧值。如果先删除缓存再更新数据库，则缓存删除成功，数据库更新失败，再访问数据库，数据...阅读全文
本文分享自天翼云开发者社区《CRISP-DM的应用与理解》，作者：吴****嫄CRISP-DM是一个数据挖掘项目规划的开放标准流程框架模型，主要分为业务理解、数据理解、数据准备、建模、评估、部署六个阶段。业务理解从业务的角度理解项目的目标和需求，将业务的目的转换为一个数据挖掘的问题，制定一个初步的实现计划计划。商业理解是明确要达到的业务目标，并将其转化为数据挖掘主题。要从商业角度对业务部门的需求进行理解，并把业务需求的理解转化为数据挖掘的定义，拟定达成业务目标的初步方案。具包括商业背景分析、商业成功标准的确定、形势评估、获得企业资源清单、获得企业的要求和想、评估成本和收益、评估风险和意外、初步理解行业术语，并确定数据挖掘的目标和制定数挖掘计划。在整个CRISP-DM的过程当中，围绕数据为核心...阅读全文
DataLeap 字节跳动数据流的业务背景 数据流处理的主要是埋点日志。埋点，也叫Event Tracking，是数据和业务之间的桥梁，是数据分析、推荐、运营的基石. 用户在使用App、小程序、Web等各种线上应用时产生的行为，主要通过埋点的形式进行采集上报，按不同的来源分为客户端埋点、Web端埋点、服务端埋点。 不同来源的埋点都通过数据流的日志采集服务接收到MQ，然后经过一系列的Flink实时ETL对埋点进行数据标准化、数据清洗、实时风控反作弊等处理，最终分发到下游，主要的下游包括ABTest、推荐、行为分析系统、实时数仓、离线数仓。 所以，如果用一句话来概括数据流主要业务，其实就是埋点的收集、清洗、分发。 目前在字节跳动，清洗和分发环节是基于Flink搭建的。 01 - 数据流业务规模 ...阅读全文
本文分享自天翼云开发者社区《小谈容灾备份》，作者：胡****静一.容灾分类从其对系统的保护程度来分,可以将容灾系统分为：数据容灾和应用容灾 1.数据容灾数据容灾，指建立一个异地的数据系统，该系统是本地关键应用数据的一个可用复制。在本地数据及整个应用系统出现灾难时，系统至少在异地保存有一份可用的关键业务的数据。该数据可以是与本地生产数据的完全实时复制，也可以比本地数据略微落后，但一定是可用的。采用的主要技术是数据备份和数据复制技术。数据容灾技术，又称为异地数据复制技术，按照其实现的技术方式来说，主要可以分为同步传输方式和异步传输方式(各厂商在技术用语上可能有所不同)，另外，也有如“半同步”这样的方式。半同步传输方式基本与同步传输方式相同，只是在Read占I/O比重比较大时，相对同步传输方式，可...阅读全文
本文分享自天翼云开发者社区《云灾备：云时代的数据安全》，作者：l****n灾备（DR），在信息化的IT系统中，指的是容灾与备份结合，利用IT技术对企业数据、业务高可用进行保护，确保系统遭受灾难时数据安全、业务快速恢复。其作为“网络安全的最后一公里”，是网络安全保障体系的重要组成部分，也是网络与系统基础设施持续有效运行的基本保障。对于各行各业而言，数据是最核心、最重要的财富。但是火灾、地震、黑客攻击、人为失误等时刻威胁数据和信息系统的稳定运行。一、容灾的分类从其对系统的保护程度来分，可以将容灾系统分为：数据容灾和应用容灾，数据容灾就是指建立一个异地的数据系统，该系统是本地关键应用数据的一个实时复制。应用容灾是在数据容灾的基础上，在异地建立一套完整的与本地生产系统相当的备份应用系统（可以是互为备...阅读全文
本文分享自天翼云开发者社区《虚拟机热迁移技术介绍》，作者：潘****东什么是虚拟机热迁移虚拟机热迁移（Virtual Machine Live Migration）是一种技术，它允许在不中断虚拟机运行的情况下将虚拟机从一台物理主机迁移到另一台物理主机。传统上，当需要迁移虚拟机时，必须先将虚拟机关机，然后将虚拟机的状态和数据从源主机复制到目标主机，最后再启动虚拟机。这种关机迁移方式会导致虚拟机暂时不可用，造成服务中断和用户体验下降。而虚拟机热迁移则克服了这个问题，它允许在虚拟机继续运行的同时将其迁移到新的物理主机上。这意味着虚拟机的状态和数据可以在迁移过程中实时复制，并在迁移完成后立即在目标主机上继续运行，几乎没有对用户的可见中断。虚拟机热迁移通常由虚拟化管理软件（如VMware vSpher...阅读全文
React面试宝典 React 是靠数据驱动视图改变的一种框架，它的核心驱动方法就是用其提供的 setState 方法设置 state 中的数据从而驱动存放在内存中的虚拟 DOM 树的更新。 更新方法就是通过 React 的 Diff 算法比较旧虚拟 DOM 树和新虚拟 DOM 树之间的 Change ，然后批处理这些改变。 React 性能优化的手段 React 中进行性能优化的手段可以从多个维度进行分类，以下是一些关键类别及其对应的优化策略： 1. 组件优化 使用PureComponent或React.memo：对于仅根据props和state改变才重新渲染的组件，使用React.PureComponent或者对其包装一层React.memo，它们都能通过浅比较props来避免不必要的重...阅读全文
【完结21章附电子书】2024全新GO工程师面试总攻略，助力快速斩获offer GO工程师面试总攻略主要包括以下几个方面：基础知识复习、进阶知识掌握、项目经验准备、面试技巧提升、实战演练以及持续学习与社区参与。 一、基础知识复习 Go语言基础：理解Go语言的基本语法，如变量声明、控制结构、函数等。 类型系统：熟悉基本数据类型、复合类型以及类型转换。 并发模型：深入理解goroutine和channel的工作原理及其在并发编程中的应用。 内存管理：了解垃圾回收机制及如何避免内存泄漏。 标准库：熟悉常用的包如fmt、io/ioutil、net/http等，并能灵活运用。 二、进阶知识掌握 错误处理：掌握使用error类型进行错误处理的方法，了解如何优雅地处理程序中的异常情况。 测试：学会编写单...阅读全文
真实高质量低代码商业项目，前端/后端/运维/管理系统(完结)获课：aixuetang.xyz/5050/低代码平台在商业项目中的应用能够极大地提高开发效率，减少技术门槛，帮助团队快速交付应用。对于前端、后端、运维以及管理系统的设计，可以通过低代码平台实现以下几个方面：1.前端部分：低代码平台为前端开发提供了可视化的界面设计工具，开发者可以通过拖拽组件来快速构建用户界面。常见的低代码平台（如OutSystems、Mendix、Appian等）为前端开发提供以下支持：拖拽式界面设计：无需编写大量HTML、CSS和JavaScript代码，通过可视化工具拖动组件并配置属性来构建用户界面。响应式设计：很多低代码平台内建支持响应式布局，能确保应用在不同设备上的良好展示。集成第三方库与组件：可以集成第...阅读全文
C++数据开放平台实战，手把手教你做工业级项目「完结」来百度APP畅享高清图片获课：itazs.fun/5766/获取资源：上方URL获取资源C++ 数据类型介绍C++ 是一种静态类型的语言，这意味着变量在声明时必须指定类型。C++ 提供了多种内置数据类型，这些类型可以分为以下几类：基本数据类型、复合数据类型和派生数据类型。1. 基本数据类型基本数据类型是最常用的类型，它们直接对应于计算机的硬件支持。C++ 中的基本数据类型包括整型、浮点型、字符型和布尔型。1.1 整型（Integer Types）整型用于表示整数，包括有符号和无符号两种形式。常见的整型有：int：通常为32位，范围通常是 -2,147,483,648 到 2,147,483,647。short：通常为16位，范围通常是 ...阅读全文
DBA数据库工程师 获课地址：itazs.fun/13241/ 获取ZY↑↑方打开链接↑↑ DBA（数据库管理员）和数据库工程师是两个密切相关但有所区别的职业。以下是对这两个角色的探讨： DBA（数据库管理员） DBA主要负责管理和维护数据库管理系统（DBMS），属于运维工程师的一个分支。他们的工作职责包括但不限于： 数据库设计：确定数据库的需求、建立数据库模型、定义表结构、数据字典设计以及性能优化。 安装和升级：安装和升级数据库服务器，以及应用程序工具。 存储管理：熟悉数据库系统的存储结构，预测未来的存储需求，制订数据库的存储方案。 安全性和权限管理：控制和监控用户对数据库的存取访问，制定合理的用户权限和角色管理策略，以确保数据库的安全性。 备份和恢复：负责定义和实施适当的数据库备份和恢复...阅读全文
近日，由天翼云数据库团队、中国电信云计算研究院和深圳北理莫斯科大学合作完成的《Taste: Towards Practical Deep Learning-based Approaches for Semantic Type Detection in the Cloud》（构建云上基于深度学习的大规模语义类型识别系统）论文被28th International Conference on Extending Database Technology（EDBT）长文收录。EDBT是数据库领域的知名国际会议，也是中国计算机学会CCF推荐的重点学术会议，已连续举办27届。此次天翼云数据库产品线所著论文被EDBT收录，代表着天翼云的科技创新能力再次获得数据库工业界和学术界的权威认可。该论文专注于数据...阅读全文
前言 proxy_cache是nginx内置的一个缓存系统，可实现减小后端负载的作用。 常用参数说明 参数 说明 proxy_cache_path 缓存文件路径。level表示目录层级，1:2表示两个子目录。keys_zone指定缓存区名称和大小。inactive表示缓存有效期。max_size表示硬盘中缓存的大小。use_temp_path为off时表示缓存文件直接写到cache中而不使用temp_path，避免文件拷贝导致影响性能。 proxy_cache 启用缓存并指定缓存区域 proxy_cache_valid 根据状态码来定义缓存的有效期 proxy_cache_min_uses 被访问多少次后才缓存，默认为1 proxy_cache_methods 指定可以被缓存的请求方法，默认...阅读全文
11月6日，国际数据公司（IDC）最新发布的《中国专属云服务市场（2024上半年）跟踪》报告显示，2024上半年，专属云服务市场同比增长13.4%。中国电信天翼云以21.4%的市场份额持续领跑专属云服务市场。伴随数智化转型不断深入，产业发展对数字基础设施的要求也不断提高，越来越多企业意识到多类异构私有云难以满足自身集约化管理、能力迭代、便捷运营等需求，开始转向既具备公有云能力，又兼具私有云数据本地化优势的专属云。此外，生成式AI的快速发展正促使云服务商将更多高阶服务下沉到属地专属云资源池，并加速向智算专属云换代升级，以满足客户对高性能、高安全性的AI计算需求。作为云服务国家队，天翼云始终坚持科技创新，以自主可控的全栈云服务产品体系，为千行百业向数字化、智能化转型赋能。天翼专属...阅读全文
DBA数据库工程师（已完结）获课：www.999it.top/13241/优秀的数据库管理员（DBA，Database Administrator）在信息技术领域中扮演着至关重要的角色，尤其是在数据成为企业核心资产的今天。一个出色的DBA不仅需要掌握深厚的技术技能，还需要具备良好的沟通能力和业务理解力，以确保数据库系统的稳定、安全和高效运行。以下是优秀DBA的社会地位的一些体现：1.技术权威专业知识：作为数据库专家，DBA拥有对特定数据库管理系统（如Oracle, MySQL, PostgreSQL等）及其相关工具和技术的深入理解。问题解决者：当系统出现问题时，DBA往往是第一个被求助的人，因为他们有能力快速诊断并解决问题。2.业务伙伴战略决策支持：随着数据分析的重要性日益增加，DBA与业...阅读全文
SpringBoot2 仿B站高性能前端+后端项目获课：itazs.fun/5044/在构建一个仿B站的高性能前端+后端项目时，选择合适的数据库和持久层框架对于系统的性能、可维护性和扩展性至关重要。Spring Boot 2 提供了丰富的支持来简化这些任务。以下是对如何在 Spring Boot 2 项目中搭建数据库与持久层框架的一个介绍：数据库选择首先，根据项目的实际需求选择适当的数据库。对于仿B站这样的大型社交平台，通常需要一个能够处理高并发读写操作、支持复杂查询和事务管理的关系型数据库，如 MySQL 或 PostgreSQL。此外，考虑到视频存储等非结构化数据的需求，也可以结合 NoSQL 数据库（如 MongoDB）或者分布式文件系统（如阿里云OSS）来实现。持久层框架JPA (...阅读全文
本文分享自天翼云开发者社区《NAT原理：概念、使用场景、转发流程及规则》，作者：x****n网络地址转换（NAT）是一种在计算机网络中将一个网络的IP地址转换为另一个网络的IP地址的技术。它通常用于将私有网络的IP地址映射到公共网络的IP地址，以便在Internet上进行通信。NAT技术解决了IPv4地址短缺的问题，同时也提高了网络的安全性。NAT的使用场景主要包括以下几种情况：1.公共IP地址不足：在Internet上分配公共IP地址是有限的，而且越来越昂贵。因此，许多组织和企业使用私有IP地址来管理他们的局域网。但是，当这些网络需要与Internet通信时，就需要使用NAT技术将私有IP地址映射到公共IP地址。2.安全性：NAT技术可以提高网络的安全性，因为它隐藏了私有网络背后的真实IP...阅读全文
程序员基石必修课，计算机网络底层原理（高清完结）获课：程序员基石必修课，计算机网络底层原理（高清完结）获取ZY↑↑方打开链接↑↑掌握通过抓包解决问题的能力掌握通过抓包解决问题的能力，是网络工程师、Web前端开发人员以及网络安全专家等必备的技能之一。以下将详细介绍如何通过抓包来解决问题，并提升相关能力。一、抓包的基本概念抓包（Packet Capture）是指截获、记录和分析网络数据包的技术。通过抓包，可以深入了解网络流量，识别潜在问题，甚至发现安全隐患。二、抓包工具的选择在抓包过程中，选择合适的工具至关重要。以下是一些常用的抓包工具：Wireshark：一款功能强大的开源抓包工具，支持多种操作系统。它提供了丰富的分析功能，能够对捕获的数据包进行深度解析。tcpdump：一个命令行工具，适用...阅读全文
技术大牛成长课，从0到1带你手写一个数据库系统(超清完结)获课：技术大牛成长课，从0到1带你手写一个数据库系统(超清完结)获取ZY↑↑方打开链接↑↑手写数据库系统的必要性，及系统的整体介绍手写数据库系统的必要性手写数据库系统为数据库技术的优化和创新提供了可能。开发者可以尝试新的数据存储模型、索引结构或查询优化算法。例如，研究人员可以开发一种基于新型硬件（如非易失性内存）的存储引擎，以突破传统存储方式的性能瓶颈。在计算机科学教育领域，手写数据库系统是一个非常好的教学实践项目。它可以帮助学生巩固数据结构、算法和操作系统等多门课程的知识。学生通过自己实现数据库的存储引擎、查询处理器等组件，能够将理论知识与实际应用相结合，提高编程和系统设计能力。对于一些具有特殊业务要求的场景，现成的数据库系统可能...阅读全文
本文分享自天翼云开发者社区《弹性存储关键技术介绍》，作者：1****m关键技术：（1）一致性HASH算法，保证数据分片尽量均衡在不同的故障域上，提升存储数据的安全可靠性。以数据唯一标识符、当前存储集群的拓扑结构以及数据备份策略作为一致性HASH算法的输入，可以随时随地通过计算获取数据所在的底层存储设备并直接通信获取或者写入数据，从而避免查表操作，实现去中心化和高度并发，将数据均衡的存储到各个存储节点，实现数据存储的负载均衡去中心化以及哈希的数据随机分布，使得弹性存储底座在理论上具备无限的可扩展性一致性HASH 算法支持数据的多种备份策略，支持可配置副本数，支持存储节点故障域定义与划分，从而使整个系统具备了高可靠性和高可用性。（2）增加盘级缓存，提升引擎读写性能。为每个存储节点配置两块SSD盘...阅读全文
实战Spark3 实时处理，掌握两套企业级处理方案（完结11章） sprark提供实时计算的模块:SparkStreaming、StructuredStreaming Spark Streaming是构建在Spark Core基础之上的流处理框架，是Spark非常重要的组成部分。Spark Streaming于2013年2月在Spark0.7.0版本中引入，发展至今已经成为了在企业中广泛使用的流处理平台。在2016年7月，Spark2.0版本中引入了Structured Streaming，并在Spark2.2版本中达到了生产级别，Structured Streaming是构建在Spark SQL之上的流处理引擎，用户可以使用DataSet/DataFreame API进行流处理，目前Str...阅读全文
本文分享自天翼云开发者社区《说说天翼云大规模数据中心组网架构的优势》，作者：程****超天翼云大规模数据中心组网架构的优势：扁平化：现代大规模数据中心,以云计算为代表的流量模型，扁平化设计大大缩短服务器之间的通信路径，从而降低延迟，可以显著提高应用程序和服务性能。易扩展：如果 Spine 交换机的带宽不足，我们只需要增加 Spine 节点数，也可以提供路径上的负载均衡；如果接入连接不足，则只需增加 Leaf 节点数。在设计规模上可以达到几万台至十万台级别.低收敛比：容易实现 1:X 甚至是无阻塞的 1:1 的收敛比，而且通过增加 Spine 和 Leaf 设备间的链路带宽也可以降低链路收敛比，充分适应当前大规模集群的通信需求。更可靠: Spine和Leaf节点全连接,提供了更为可靠的组网连接...阅读全文
大数据生态圈/Hadoop/Spark/Flink/数据仓库/实时分析/推荐系统获课：789it点top/2505/获取ZY↑↑方打开链接↑↑大数据生态圈：构建智能时代的基石在数字化浪潮汹涌的今天，大数据已成为推动各行各业变革的重要力量。大数据生态圈，作为这一变革的核心驱动力，汇聚了Hadoop、Spark、Flink、数据仓库、实时分析以及推荐系统等一系列关键技术，共同构建了一个高效、智能的数据处理与分析体系。本文将深入探讨这些技术如何协同工作，为企业带来前所未有的数据洞察力和业务价值。Hadoop：大数据处理的基石Hadoop，作为大数据领域的基石，为海量数据的存储和处理提供了强大的分布式基础架构。其核心组件HDFS（Hadoop Distributed File System）通过分布...阅读全文
在 macOS 上安装和管理多个 Go 版本，你可以选择不同的工具来实现这一目标。以下是几种常见的方法： ### 使用 Homebrew 安装和切换 Go 版本 Homebrew 是 macOS 上一个流行的包管理器，它允许你轻松地安装和管理软件包，包括不同版本的 Go。 1. **安装 Homebrew**（如果尚未安装）： 如果你还未安装 Homebrew，可以通过以下命令进行安装： ```sh /bin/bash -c "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/HEAD/install.sh)" ``` 2. **安装特定版本的 Go**： 你可以使用 `brew search` 查找所有可用的 G...阅读全文
MySQL必会核心问题50讲 获课：itazs.fun/13237/ 获取ZY↑↑方打开链接↑↑ 《MySQL 必会核心问题 50 讲》中一些非常重要的内容： 一、基础概念部分 数据存储引擎 InnoDB 是 MySQL 默认的存储引擎。它支持事务，具有 ACID（原子性、一致性、隔离性、持久性）特性。例如，在一个银行转账系统中，从一个账户扣款并向另一个账户存款的操作必须是原子的，要么全部成功，要么全部失败，InnoDB 可以很好地保证这种事务的完整性。 MyISAM 不支持事务，但它的读写速度在某些简单场景下可能比 InnoDB 快。它适用于以读为主的场景，如一些数据仓库中的历史数据查询。MyISAM 存储引擎会将表存储为三个文件，分别是.frm（存储表结构）、.MYD（存储数据）和.MY...阅读全文
