参考地址1：https://pan.baidu.com/s/1N-x48vz9Z0peZdjOU5Gh-g 提取码: nxts 参考地址2：https://share.weiyun.com/Tp6ewDIJ 密码：6crcwd 关于数据库系统的开发一直以来都是一个难点，它的流程复杂，涉及到的技术点众多，特别在部署这块尤为重要，今天就带着大家手把手去实现这样一个数据库系统项目。 我将从理论结合实际场景综合性落地，让大家轻松吃透核心技术底层原理。 首先是应用场景这块：复用到日常开发场景中，如何运用高级数据结构、算法和设计模式，如何正确面对高并发进行编程，如何进行数据库的优化，如何理解数据库的执行计划分析慢SQL的原因等； 其次是原理剖析： 深度剖析数据库系统原理，将数据库几十年发展精髓拆解并呈现...阅读全文
本文分享自天翼云开发者社区《内容分发网络 CDN 概述》,作者:JerryCDN（Content Delivery Network）是一种分布式网络架构，旨在提供高效、可靠地将内容传送给全球用户的服务。CDN 的主要目标是通过将数据缓存到位于不同地理位置的多个服务器上，使用户能够从离他们更近的服务器获取内容，从而减少访问延迟、提高加载速度和改善网站的性能。在这篇文章中，我将详细介绍 CDN 的工作原理、使用 CDN 的好处，并举例说明它如何优化内容传递的过程。一、CDN 的工作原理CDN 的工作原理基于两个主要的技术：缓存和就近访问。缓存：CDN 将网站的静态内容（例如图片、CSS、JavaScript 文件等）缓存在多个地理分布的服务器上。当用户请求访问网站时，CDN 会检查是否有相应的缓...阅读全文
9月20日，由中国仿真学会、中国指挥与控制学会和北京理工大学共同主办的“2023第二届世界元宇宙大会”在上海召开。天翼云科技有限公司智能边缘事业部云渲染负责人丛子涵参加大会主论坛，分享了天翼云边缘云在元宇宙领域的探索与应用。近年来，元宇宙成为全球范围内的热门话题。通过构建一个与现实世界相互映射且可交互的虚拟世界，元宇宙为用户带来全新视觉体验。而营造元宇宙身临其境般绝佳体验的关键在于保证画质高清，满足数据传输对低时延的极致需求。能够提供稳定、高效、可靠、低时延算力服务的边缘云是推动元宇宙产业发展的关键引擎。作为云服务国家队，天翼云持续深耕边缘计算领域，依托云网融合优势积极布局边缘节点，目前已形成“2+4+31+X”的算力资源布局。将“X”的算力进一步下沉，天翼云形成浅边缘-深边缘-最边缘的多...阅读全文
## download：[Netty+Nacos+Disruptor自研企业级API网关](https://www.51xuebc.com/thread-566-1-1.html) 数据类型、变量和常量的使用 在计算机编程中，数据类型、变量和常量是非常重要的概念。它们可以帮助程序员更好地理解和处理数据，从而实现更加复杂的功能。本文将详细介绍这些概念及其使用。 数据类型 数据类型是指计算机中可用的不同种类的数据。在编程语言中，通常有多种基本数据类型，如整数、浮点数、布尔值、字符等。每种数据类型都有其自己的特定格式和范围。 例如，在Python编程语言中，有以下常见的数据类型： 整数（int）：表示整数，如1、2、3等。 浮点数（float）：表示小数，如1.5、3.14等。 布尔值（bool）...阅读全文
1. 前言 相信你经常被 读写分离、垂直拆分、水平拆分、分库分表 这几个名词搞得很懵逼。我有时候也很懵逼，那么今天就来把这几个数据库常用术语搞清楚，同时也记录一下。 2. 读写分离 这个相对比较好理解一些，就是将数据库分为主从库，一个主库（Master）用于写数据，多个从库（Slaver）进行轮询读取数据的过程，主从库之间通过某种通讯机制进行数据的同步，是一种常见的数据库架构。下面这张图就展示了 “一主二从” 的结构： 2.1 为什么要读写分离 大多数互联网数据操作往往都是读多写少，随着数据的增长，数据库的“读”会首先成为瓶颈。如果我们希望能线性地提升数据库的读性能和写性能，就需要让读写尽可能的不相互影响，各自为政。在使用读写分离之前我们应该考虑使用缓存能不能解决问题。然后再考虑对数据库按照...阅读全文
父亲被人害死了，幕后凶手却是我最亲的人！想象着我的养父在大火中拼命挣扎，窒息，最后皮肤化为焦炭。我心中就已经是抑制不住地欢快，这就叫做以其人之道，还治其人...爱写小说的胖达阅读 28,464评论 5赞 21...阅读全文
我们知道，数据达到HBase服务端会写WAL-写Memstore，然后定期或满足一定条件时刷写磁盘生成一个HFile文件，随着时间推移生成的HFile会越来越多，将会影响HBase查询性能，同时会对HDFS造成一定影响。因此HBase会定期执行Compaction操作以合并减少HFile数量。1.两种合并HBase中Compaction分为两种。Minor Compaction称为小合并，主要是选取一些小的、相邻的HFile将他们合并成较大的HFile，并删除HFile中的过期数据。Major Compaction称为大合并，会将一个列族下的所有HFile合并成一个大的HFile，同时删除过期数据、已删除数据（打了Delete标记的）、版本过大的数据等三类无效数据。2. 参数调优1).hba...阅读全文
本文分享自天翼云开发者社区《云安全CIA：关键信息保证的三大支柱》，作者：每日知识小分享随着云计算的迅速普及，云安全问题越来越受到关注。云安全涉及的范围广泛，涵盖了云端数据中心的物理安全、网络安全、数据安全、应用安全等多个方面。而在这些安全问题中，CIA原则是云安全中最为核心的部分。CIA原则由机密性（Confidentiality）、完整性（Integrity）和可用性（Availability）三个关键信息保证组成，是衡量云服务提供商是否能够满足客户数据安全需求的重要标准。本文将从理论和实践两个方面对云安全的CIA原则进行详细解析。一、机密性（Confidentiality）机密性是指确保云服务用户的数据不被非授权访问或泄露。在云环境中，机密性通常涉及到数据加密、访问控制等措施。1.数据...阅读全文
今早收到邮件，GitHub要求用户强制开启两步验证：打开GitHub的设置，却发现推荐的两步验证方法要求下载1Password/Authy/Microsoft Authenticator等APP。可是1password是个收费软件，而且还不便宜。第二个通过手机短信验证码的方式，还不支持中国大陆的手机号：Countries where SMS authentication is supported - GitHub Docs怎么办呢？自己动手，丰衣足食！首先看看这种验证机制的原理。基于时间的一次性密码（time-based one-time password, TOTP）的原理基于时间的一次性密码（Time-based One-Time Password，TOTP）是一种双因素身份验证（2FA...阅读全文
本文来自 Kingshionopen in new window 投稿。欢迎更多朋友参与到 JavaGuide 的维护工作，这是一件非常有意义的事情。详细信息请看：JavaGuide 贡献指南open in new window 。在面向对象的设计原则中，一般推荐模块之间基于接口编程，通常情况下调用方模块是不会感知到被调用方模块的内部具体实现。一旦代码里面涉及具体实现类，就违反了开闭原则。如果需要替换一种实现，就需要修改代码。为了实现在模块装配的时候不用在程序里面动态指明，这就需要一种服务发现机制。Java SPI 就是提供了这样一个机制：为某个接口寻找服务实现的机制。这有点类似 IoC 的思想，将装配的控制权移交到了程序之外。# SPI 介绍# 何谓 SPI?SPI 即 Service P...阅读全文
download：https://www.daxiacode.com/7446.html【资源目录】:| ├──1–django 简介.mp4 1.65G| ├──10–权限分配.mp4 637.10M| ├──11–批量操作.mp4 1011.98M| ├──12–权限分配实现.mp4 696.79M| ├──13–rbac组件.mp4 804.36M| ├──14–stark组件(上).mp4 699.82M| ├──15–stark组件(下).mp4 635.81M| ├──16–CRM项目开发(上).mp4 362.90M| ├──2–路由匹配与函数视图.mp4 1.36G| ├──3–数据模型.mp4 1.56G| ├──4–数据查询与网络请求.mp4 1.22G| ├──5–网络...阅读全文
学习地址1：https://pan.baidu.com/s/1OWDu5fNq_BXRUbLGrxzpJw 提取码：tjty 学习地址2：https://share.weiyun.com/Tp6ewDIJ 密码：6crcwd 今天跟大家交流一下关于开发一款数据库系统的相关事宜，从零开始，手把手带着大家一步步去实现这个功能，希望对大家有所帮助。 数据库系统是为适应数据处理的需要而发展起来的一种较为理想的数据处理系统，也是一个为实际可运行的存储、维护和应用系统提供数据的软件系统，是存储介质 、处理对象和管理系统的集合体。 数据库系统DBS（Data Base System，简称DBS）通常由软件、数据库和数据管理员组成。其软件主要包括操作系统、各种宿主语言、实用程序以及数据库管理系统。数据库由数...阅读全文
数字政务事关千家万户。当前，数字技术正从千行百业拓展至民生领域，数字经济正成为服务民生的重要基础。为贯彻落实中央关于数字政府建设的重要部署，广西柳州积极运用5G、大数据、云计算、人工智能等技术推动政府治理模式创新，将政务数据资源管理与应用改革作为推进数字政府建设的关键。前不久，柳州市民覃女士的二宝也到了入学年龄，覃女士一家对孩子的未来充满了无限的期许。“我大宝上学的时候不太懂新生入学需要准备哪些材料、怎么办手续。花了几天时间在网上研究和多方打听，才顺利办完入学。因为少材料，有的地方还跑了两趟，还是挺麻烦的，现在只要在手机上办理就可以了。APP 里有入学报名、社保查询、高考成绩查询、科技馆预约、柳州图书馆预约等很多功能，不用出门就全搞定了，办得很快，办好之后材料都是寄过来的，很方便。”覃女士...阅读全文
HBase-2.x支持7种Region自动拆分Region的策略，类图如下:其中BusyRegionSplitPolicy是HBase-2.x新增的策略，其他6种在HBase-1.2.x中也可以使用。设置自动拆分策略的关键配置如下:hbase.regionserver.region.split.policy description: Region自动拆分的策略 default: HBase-1.2.x: org.apache.hadoop.hbase.regionserver.IncreasingToUpperBoundRegionSplitPolicy HBase-2.x: org.apache.hadoop.hbase.regionserver.SteppingSplitPolicy o...阅读全文
互联网基础资源作为互联网的基石和枢纽，是新一轮信息技术革命的重要根基。随着我国互联网在应用模式、技术水平、行业规模上的发展，网络基础资源在应用支持、安全保障等方面的作用愈发突出。网络强国大步向前的背景下，如何审视互联网基础资源的数字化治理成效，成为全面透视网络强国建设成就与经验的重要“窗口”。今天我们一起走进中国互联网络信息中心，看互联网基础资源领域的“国家队”如何“化云为雨，泽被万物”。保障关键信息基础设施安全的“国家队”中国互联网络信息中心（CNNIC）作为中国信息社会重要的基础设施建设者、运行者和管理者，积极推进网络基础资源各项工作开展。中国互联网络信息中心运行管理部主任冷峰介绍，中国互联网络信息中心行使国家互联网络信息中心职责，负责国家网络基础资源的运行管理和服务，承担国家网络基础资...阅读全文
近日，2023年全国CIO大会在新疆伊宁举办。本次大会汇聚全国CIO精英，聚焦云计算、AI、低代码、云原生等技术，探讨数字化时代的领导力与创新力、数字化转型实战干货、新兴技术应用等热门议题。会上举行了全国优秀CIO以及CIO信赖品牌颁奖典礼，天翼云荣获“2022年度CIO最信赖品牌”称号。 破解存储难题，落实低碳发展战略天翼云国际业务事业部存储产品线总监潘亚莲出席会议并发表演讲，分享了天翼云在绿色低碳存储方案方面的探索与实践。当前，数字化、绿色化两大趋势相互融合、相互促进。打造绿色数据中心，以数字化促进绿色化，成为数字经济高质量发展的必然要求。作为数据中心基础设施三大件之一，存储也面临迈向“绿色化”的迫切需求。天翼云推出存储资源盘活系统HBlock，帮助企业用户提高数据中心资源利用率，优化资...阅读全文
本文首发于 vivo互联网技术 微信公众号链接： https://mp.weixin.qq.com/s/qayKiwk5QAIWI7-nyD3FVA作者：DuZhimin随着互联网、尤其是物联网的发展，我们需要把各种类型的终端实时监测、检查与分析设备所采集、产生的数据记录下来，在有时间的坐标中将这些数据连点成线，往过去看可以做成多纬度报表，揭示其趋势性、规律性、异常性;往未来看可以做大数据分析，机器学习，实现预测和预警。这些数据的典型特点是：产生频率快（每一个监测点一秒钟内可产生多条数据）、严重依赖于采集时间（每一条数据均要求对应唯一的时间）、测点多信息量大（实时监测系统均有成千上万的监测点，监测点每秒钟都产生数据，每天产生几十GB的数据量）。基于时间序列数据的特点，关系型数据库无法满足对时...阅读全文
RocksDB概述LSM 类存储引擎、数据库之一。所谓LSM，一般的名字叫 Log Structured-Merge Tree（日志结构合并树），来源于分布式数据库领域，也是BigTable 的论文中所使用的文件组织方式。它的特点在于写入的时候是append only的形式，就像名字所显示的那样，跟日志一样只在文件后面追加。LSM 树结构的问题: 写入速度快，读取速度慢，写放大和读放大都较高。Rocksdb本身支持单个kv的读写和批量kv值的读写。由于LSM的出身，它专注于利用LSM树的特性，适应有序、层次化的磁盘读写。在LSM树之上构建了Rocksdb，而在RocksDB之上同样有一些更面向应用层的数据库，包括分布式数据库、查询引擎、大数据存储引擎、图数据库如Janusgraph等。1. ...阅读全文
今天给大家分享一下关于SpringBoot开发双11商品服务系统的整个流程，我将深度还原大厂实习期技术成长全流程，让你收获大厂项目开发全流程与实战经验，具备应对大流量场景问题的解决能力，全面助力提升实习/转正/跳槽表现力与成功率。 以下是参考资料下载： 网盘地址：https://pan.baidu.com/s/1QNf3FbzlswJd_DU3FC64nw 提取码：q61x 腾讯微云下载地址：https://share.weiyun.com/o6TKslZV 密码：qn8bim Spring Boot是由Pivotal团队提供的全新框架，其设计目的是用来简化新Spring应用的初始搭建以及开发过程。该框架使用了特定的方式来进行配置，从而使开发人员不再需要定义样板化的配置。通过这种方式，Spr...阅读全文
随着我国经济实力高速增长和人民生活水平不断提高，加大生态环境保护力度，以良好的生态环境为高质量发展赋能已成为社会共识。在全球数字化浪潮下，运用数字技术建设高效协同的环境治理新形态，提升生态环境统揽全局、监测感知、预警预报、形势分析等能力，是推进生态环境治理能力现代化的主要途径。近年来，青海省生态环境厅以建设和完善生态环境监管、服务和决策为重点，依托5G、云计算、大数据等先进数字技术，全力推进生态环境网络建设和监测工作。以三江源生态保护为契机，青海省生态环境厅携手天翼云，助力“生态之窗”远程高清实时视频观测系统上云建设，为全域生态环境保护工作打造了一扇高效统一的“云上窗口”。环境监管日趋精细“生态之窗”如何“再进一步”“生态之窗”是青海省生态环境厅根据全省重点生态保护区域自然景观分布，以及野...阅读全文
11月22日-23日，2023第八届IDC中国数字化转型年度盛典在北京召开。天翼云亮相峰会主论坛及多个专题论坛，分享了在技术与产品体系方面，尤其是在智算平台和大模型应用方面的探索与实践；与现场的行业意见领-袖、企业代表等嘉宾共探如何以技术创新为驱动，共谋行业高质量发展。打造国内领先智算服务构造AI时代强大基石当前，新一轮科技革命和产业变革正在向纵深演进，算力基础设施的重要性不断提升，尤其今年以来随着人工智能大模型应用的深入推进，智算需求迎来爆发式增长。天翼云作为云服务国家队，不断加强数字基础设施建设，为千行百业转型升级筑牢智算底座。中国电信集团高-级技术专家天翼云行业解决方案总监祁超在峰会主论坛上，中国电信集团高-级技术专家、天翼云行业解决方案总监祁超表示，天翼云始终坚持科技创新，不断加强...阅读全文
上篇文章中我们对单列集合中常用的方法和遍历查询。通过本文章为我们解惑，好好的字符串用起来不就行了，为什么要用集合这些工具类？本篇文章将简要介绍数据结构，让读者了解它们在计算机中以何种结构方式存在。那么，什么是数据结构呢？下面我们来详细解释。 ## 数据结构 ### 1.1 数据结构有什么用？ 数据结构是计算机存储、组织数据的方式。 数据结构是指相互之间存在一种或多种特定关系的数据元素的集合。 通常情况下，精心选择的数据结构可以带来更高的运行或者存储效率。  数据结构往往同高效的检索算法和索引技术有关。 这句话是啥意思...阅读全文
本文分享自天翼云开发者社区《视频直播场景下对象存储的应用》，作者：王****宇视频直播是当前比较火的互联网应用场景，越来越多的人通过直播进行娱乐和营销带货。国家规定，直播带货类需提供不低于3年的存档回看能力，而其他直播内容也需要提供不低于60天的视频保存能力。具体要求可参看：《互联网直播服务管理规定》：第十六条 互联网直播服务提供者应当记录互联网直播服务使用者发布内容和日志信息，保存六十日。《网络交易监督管理办法》：第二十条 通过网络社交、网络直播等网络服务开展网络交易活动的网络交易….网络直播服务提供者对网络交易活动的直播视频保存时间自直播结束之日起不少于三年。因此，直播服务提供商需要提供直播录制和归档能力，整个流程中，与存储相关的只有在录制时会把录制的视频保存在对象存储中通常业务逻辑：1...阅读全文
11月10日-13日，中国电信主办的以“数字科技 焕新启航”为主题的2023数字科技生态大会在广州举办。大会发布了天翼云智算平台、基础大模型、行业大模型、量子计算云平台等一系列科技创新成果和5G焕新计-划，成立了中国电信移动支付产业联盟、天翼视联科技公司，启动了卫-星移动通信产业发展计-划。此外，中国电信元宇宙数字人“数数”也亮相本次大会并担任主持。中国电信董事长柯瑞文在主旨演讲中分享了数字科技加速进入人工智能时代背景下中国电信的思考和实践。他表示，人工智能的发展对云网融合提出更高要求，云网融合将朝着智能化的方向演进升级，同时云网融合也将进一步推动人工智能加速发展。云网融合要在智能化升级的过程中承担算力调度的责任，天翼云向智能云升级的过程中要承载智能化的应用。中国电信将把握新一轮战略机遇，...阅读全文
生xhr对象 现代浏览器，最开始与服务器交换数据，都是通过XMLHttpRequest对象。它可以使用JSON、XML、HTML和text文本等格式发送和接收数据。 好处： 不重新加载页面的情况下更新网页 在页面已加载后从服务器请求/接收数据 在后台向服务器发送数据。 缺点： 使用起来也比较繁琐，需要设置很多值。 早期的IE浏览器有自己的内置对象，这样需要写兼容代码判断是否为XMLHttpRequest对象。 if (window.XMLHttpRequest) { // model browser xhr = new XMLHttpRequest() } else if (window.ActiveXObject) { // IE 6 and older xhr = new ActiveX...阅读全文
11月10日，以“数字科技 焕新启航”为主题的2023数字科技生态大会在广州市举办。会上，天翼云重磅发布一站式智算服务平台“慧聚”。天翼云科技有限公司董事长、总经理胡志强对天翼云智算服务体系进行了全面解读。2023年是大模型高速发展的一年，大模型不断扩大的参数规模和快速迭代的技术路线跨越式地提升了模型的能力，但是同时也为大模型的训练和应用带来了很多挑战。比如算力利用率的瓶颈日益凸显、算力成本压力进一步增大、模型的构建难度不断提升、模型的行业落地更加复杂。胡志强表示，为顺应大模型时代对于云服务商的新要求，天翼云全面升级，构建了全栈大模型智算服务，包括打造智算数据中心AIDC、升级云智超一体化基础设施平台“云骁”、推出一站式智算服务平台“慧聚”、构建国云大模型生态，形成云智一体的智算服务体系...阅读全文
本文分享自天翼云开发者社区《VPC终端节点的实现架构和原理》，作者：云云生息什么是VPC终端节点？在传统的VPC架构中，为了使VPC内的资源能够与云服务提供商的各种服务进行通信，通常需要通过公共Internet进行访问。这种方式存在一些问题，比如安全性、可靠性、访问速度等。为了解决这些问题，云服务提供商推出了VPC终端节点。VPC终端节点是VPC内的一种虚拟设备，它直接连接到云服务提供商的服务而无需通过Internet。这样，VPC内的资源可以通过VPC终端节点安全地、高效地访问云服务，同时也能避免通过Internet带来的一些潜在问题。VPC终端节点的实现架构VPC终端节点的实现架构通常涉及多个组件的协同工作。以下是一个常见的VPC终端节点实现架构：1.VPC路由表： 在VPC中，存在一个...阅读全文
11月25日，由中国通信学会指导，中国通信学会信息通信网络技术委员会、江苏省未来网络创新研究院主办的2023第六届SD-WAN & SASE大会暨云网络大会在北京召开。大会邀请了金融、能源、游戏、零售等业界代表带来实践分享，共同探寻技术融合的更多可能。会上，《天翼云组播，助力券商获取第一手行情》斩获2023年度垂直领域优秀案例奖。天翼云云网产品事业部弹性网络产品线总监侯叶飞参加云网络大会专题论坛，分享了天翼云云网融合的技术创新与实践。天翼云斩获2023年度垂直领域优秀案例奖天翼云作为云服务国家队，经过十年科技创新，基于全栈自研技术，打造了“云网边端数智安”全栈云产品体系，构建了包含入云、云内、云间三部分的云网络整体架构。基于此架构，天翼云持续夯实以云网融合、智能敏捷、业务驱动为主要特色的...阅读全文
背景-线上告警线上一台服务器告警，磁盘利用率 disk.util > 90，并持续告警。登录该服务器后通过 iostat -x 1 10 查看了相关磁盘使用信息。相关截图如下：1 # 如果没有 iostat 命令，那么使用 yum install sysstat 进行安装 2 # iostat -x 1 10复制由上图可知，vdb磁盘的 %util【IO】几乎都在100%，原因是频繁的读取数据造成的。其他字段说明Device：设备名称 tps：每秒的IO读、写请求数量，多个逻辑请求可以组合成对设备的单个I/O请求。 Blk_read/s (kB_read/s, MB_read/s)：从设备读取的数据量，以每秒若干块(千字节、兆字节)表示。块相当于扇区，因此块大小为512字节。 Blk_wrt...阅读全文
在日常开发中我们经常会遇到需要同时处理多个操作的情况，比如在购物时，我们需要同时完成支付和更新库存两个操作。这时，如果其中一个操作失败了，我们就需要进行回滚，以保证数据的一致性。 那么，如何在MySQL中实现这样的功能呢？答案就是——事务。下面我们就来介绍一下MySQL事务是什么？它是如何使用的？ ## 一、什么是事务？ ### 事务定义 - 事务是一个最小的不可再分的工作单元；通常一个事务对应一个完整的业务(例如银行账户转账业务，该业务是一个最小的工作单元)。 - 一个完整的业务需要批量的DML(insert、update、delete)语句共同联合完成。 - 事务只和DML语句有关，或者说DML语句才有事务。这个和业务逻辑有关，业务逻辑不同，DML语句的个数不同。 ### 事务是什么？ ...阅读全文
[完结11章]技术大牛成长课,从0到1带你手写一个数据库系统 参考资料下载地址1：https://pan.baidu.com/s/1ANB63p3Alsu6ivFGlKKNLg 提取码: ksn2 参考资料下载地址2：https://share.weiyun.com/Tp6ewDIJ 密码：6crcwd 大家好，今天我将给大家分享关于如何开发一个数据库系统的知识，将从0到1手把手带着一步步去开发这个项目，希望我的分享对大家的学习和工作有所帮助，如果有不足的地方还请大家多多指正。 一、什么是数据库系统 数据库系统一般由数据库、数据库管理系统（及其开发工具）、应用系统、数据库管理员构成 二、数据库管理系统的主要功能包括 数据定义功能：DBMS提供数据定义语言（Data Definition La...阅读全文
本文分享自天翼云开发者社区《云服务器比传统服务器更安全的原因与实现机制》，作者：3****m随着互联网的普及和云计算技术的发展，越来越多的企业和组织选择使用云服务器来提供和存储数据。与传统服务器相比，云服务器在安全性方面具有诸多优势。本文将围绕云服务器比传统服务器更安全的原因，探讨其实现机制。一、云服务器比传统服务器更安全的原因虚拟化技术云服务器采用虚拟化技术，将物理服务器上的资源（如CPU、内存、存储等）汇聚到一个虚拟的云中，然后通过网络对外提供服务。这种虚拟化技术可以隔离不同用户和业务，防止数据泄露和攻-击。同时，虚拟化技术还可以实现资源的动态调整和负载均衡，提高资源利用率和系统稳定性。容错技术云服务器通常采用容错技术，实现故障自动切换和负载均衡。当某个虚拟机出现故障时，系统会自动将其切...阅读全文
本文分享自天翼云开发者社区《Rocksdb原理简介》，作者:l****nRocksdb作为当下nosql中性能的代表被各个存储组件（mysql、tikv、pmdk、bluestore）作为存储引擎底座，其基于LSM tree的核心存储结构（将随机写通过数据结构转化为顺序写）来提供高性能的写吞吐时保证了读性能。同时大量的并发性配置来降低compaction的影响。涉及到的几个核心文件：WALWriteAheadLog，rocksdb的日志，保存memtable中的信息。当memtable转化为immutable memtable并且Flush到L0层之后，之前WAL的会被清理，即于删除DB目录下的log文件。在RocksDB中每一次数据的更新都会涉及到两个结构，一个是内存中的memtable...阅读全文
随着网络攻-防对抗形势愈演愈烈，传统的安全防护模式已难以应对频率暴增、昼夜不停的网络安全攻-击，提升组织安全防护能力势在必行。事实上，一些单位在网络安全建设工作中经验不足，在安全组件/设备采购方面大量投入，部署后却缺乏专人运营。这导致在安全事件发生时，组织不能及时发现并进行动态防护，安全效果难以达到预期。天翼云推出托管检测与响应服务（原生版）产品（后称MDR）帮助客户进行持续的安全监测，洞悉网络安全事件根因，进一步保障组织业务在云上稳定安全运行。MDR基于“人机共智”模式，聚焦“资产、脆弱性、威胁、事件”四大核心安全风险要素，以7*24h的持续在线守护，为用户提供高效、省心、便捷的安全托管服务。MDR服务支持在公/私/混合云多场景交付，目前已向重点客户交付，主要应用场景如下：优势一：7*...阅读全文
随着上云成为普遍趋势、企业需求的多样化发展，单一的云模式已经无法满足企业用户的复杂需求，单云模式下深度绑定一朵云所带来的成本不确定性以及安全风险日益增加。数据显示，超过92%的企业计hua选择多云的上云方案。天翼云作为云服务国家队，凭借在资源充裕度、网络覆盖范围、产品安全性和实施性价比等方面的独特优势，成为企业部署多云架构时的首-选。多云方案中备份与迁移是较为常见的实施手段，是指将生产数据以实时同步的方式从一朵云备份到其他云中。生产数据种类很多，包括数据库、文件、文本、日志等，其中数据库是最为重要的一种。因此，企业的多云方案往往从数据库开始。企业部署多云数据库时，仅需购买相同类型或规格更小的云数据库，再使用天翼云数据传输服务TeleDB-DTS（后称天翼云DTS）将其他云的数据库实时同步到天...阅读全文
本文分享自天翼云开发者社区《云主机CPU和内存配比：优化资源分配的关键》，作者：每日知识小分享随着云计算技术的快速发展，云主机已经成为了许多企业和个人用户首-选的计算解决方案。在部署和配置云主机时，CPU和内存的配比是一个非常重要的考虑因素。本文将深入探讨云主机CPU和内存配比的问题，以帮助用户更好地优化资源分配，提高云主机的性能和效率。一、云主机CPU和内存的重要性CPU和内存是云主机中最重要的两个资源。CPU负责处理数据和指令，是决定云主机计算能力的关键因素。而内存则负责存储数据和程序，是影响云主机响应速度和并发处理能力的核心因素。对于大多数应用程序来说，CPU和内存的性能都会影响到其运行效果。因此，合理的CPU和内存配比能够提高云主机的整体性能，并确保应用程序的稳定运行。二、云主机CP...阅读全文
1. 阻塞 IO通常来说，从普通文件读数据，无论你是采用 fscanf，fgets 也好，read 也好，一定会在有限的时间内返回。但是如果你从设备，比如终端（标准输入设备）读数据，只要没有遇到换行符(’\n’)，read 一定会“堵”在那而不返回。还有比如从网络读数据，如果网络一直没有数据到来，read 函数也会一直堵在那而不返回。read 的这种行为，称之为 block，一旦发生 block，本进程将会被操作系统投入睡眠，直到等待的事件发生了（比如有数据到来），进程才会被唤醒。系统调用 write 同样有可能被阻塞，比如向网络写入数据，如果对方一直不接收，本端的缓冲区一旦被写满，就会被阻塞。1.1 阻塞读终端实验代码// 文件名：blockdemo.c#include
11月10日—13日，以“数字科技 焕新启航”为主题的2023数字科技生态大会在广州举办。会议期间，在数字生活与天翼视联合作论坛上，重磅发布了由天翼云科技有限公司、天翼数字生活科技有限公司和天翼视联科技有限公司联合研发的视联行业大模型——海纳视联大模型，为视联行业智能化发展按下加速键。海纳视联大模型以天翼云一站式智算服务平台“慧聚”为底座，通过对上亿量级训练数据学习，拥有百亿量级模型参数，具有5000余类标签识别、智能检索、分析理解、视觉超分等多项核心能力，面向城市治理、行业视觉、社区乡村、数字家庭等四大领域提供综合解决方案，赋能视联应用生态。大模型的高速发展离不开智算平台的支持。天翼云一站式智算服务平台“慧聚”，成功突破了算子加速、模型并行、断点续训等技术难点，将高性能计算能力、分布式算...阅读全文
一、HBase 读优化 1. HBase客户端优化 和大多数系统一样，客户端作为业务读写的入口，姿势使用不正确通常会导致本业务读延迟较高实际上存在一些使用姿势的推荐用法，这里一般需要关注四个问题： 1) scan缓存是否设置合理？ 优化原理：在解释这个问题之前，首先需要解释什么是scan缓存，通常来讲一次scan会返回大量数据，因此客户端发起一次scan请求，实际并不会一次就将所有数据加载到本地，而是分成多次RPC请求进行加载，这样设计一方面是因为大量数据请求可能会导致网络带宽严重消耗进而影响其他业务，另一方面也有可能因为数据量太大导致本地客户端发生OOM。在这样的设计体系下用户会首先加载一部分数据到本地，然后遍历处理，再加载下一部分数据到本地处理，如此往复，直至所有数据都加载完成。数据加载...阅读全文
随着互联网社交媒体的普及和发展，“融媒体”时代正加速到来。我国在“十四五”规划明确提到“推进媒体深度融合，建强用好县级融媒体中心”，是我国媒体融合发展的重要推动力。在政策的积极引导下，各级媒体以数字技术加快实施全媒体传播工程，持续布局全媒体传播体系，积极探索融合发展、转型升级之路。近年来，青海省扎实推进媒体智慧融合发展，努力打造具有地方特色的融媒体平台。在青海省委宣传部、省互联网新闻中心指导下，天翼云依托中国电信5G+网络先行的优势，建设完成了集“新闻、政务、服务、商务”的“大美青海云”省级融媒云（以下简称“大美青海云”），为当地媒体融合发展提供了更为广阔的“云上空间”。助力打造“大美青海云”省级融媒云平台据了解，“大美青海云”由省级管控平台、省级融媒体业务服务平台、全省内容共享平台组成，...阅读全文
【完结11章】技术大牛成长课,从0到1带你手写一个数据库系统 给大家分享一套数据库课程——技术大牛成长课,从0到1带你手写一个数据库系统，课程已完结，共11章，附源码。 数据库系统是为适应数据处理的需要而发展起来的一种较为理想的数据处理系统，也是一个为实际可运行的存储、维护和应用系统提供数据的软件系统，是存储介质 、处理对象和管理系统的集合体。 如果分片数据损坏，无法修复，比如某个磁盘坏了，这时候数据无法修复，为了恢复索引状态，可以允许分片的数据丢失，后续通过上层数据来重建索引，这时候我们可以增加 accept_data_loss参数来允许分片数据丢失 POST /_cluster/reroute { "commands": [ { "move": { "index": "test_inde...阅读全文
近年来，云计算、人工智能、大数据等技术蓬勃发展，不断赋能医疗健康领域。从“医共体”促进优质医疗资源下沉，到“智慧医院”改变患者就医体验，高新技术深刻改变了医疗模式，极大提升了医疗水平及服务。智慧医院驱动医院运用信息化手段构建智慧系统、智慧管理、智慧服务，已成为健康中国的重要组成部分。 成立于1986年的银川市妇幼保健院就是智慧医疗建设的佼佼者。银川市妇幼保健院直属于银川市卫生健康委，是一所集医疗、教学、科研、预防、保健、康复、急救于一体的三级甲等妇幼保健专科医院，也是宁夏回族自治区规模最大的妇幼保健机构。伴随着银川市妇幼保健院业务的快速成长，患者也越来越多，这为保健院线下业务办理带来较大压力。同时，在数据安全与信息化设备运维方面，银川市妇幼保健院也遇到了诸多难题。通过携手天翼云，银川市妇幼保...阅读全文
Kafka对于producer发来的消息怎么保证可靠性？ 每个partition都给配上副本，做数据同步，保证数据不丢失。 副本数据同步策略 和zookeeper不同的是，Kafka选择的是全部完成同步，才发送ack。但是又有所区别。 所以，你们才会在各种博客看到这句话【kafka不是完全同步，也不是完全异步，是一种ISR机制】 这句话对也不对，不对也对（谜语人......） 首先笔者认为：Kafka使用的就是完全同步方案。 完全同步的优点 同样为了容忍 n 台节点的故障，过半机制需要 2n+1 个副本，而全部同步方案只需要 n+1 个副本， 而 Kafka 的每个分区都有大量的数据，过半机制方案会造成大量数据的冗余。（这就是和zookeeper的不同） 完全同步会有什么问题？ 假设就有这么...阅读全文
本文分享自天翼云开发者社区《列式云数据库与关系型云数据库：区别、优缺点与选择》，作者：3****m一、列式云数据库与关系型云数据库的区别数据存储方式列式云数据库以列为单位组织数据，将同一列的数据存储在一起，每个列都有一个相关的列式存储文件。这种数据存储方式适合于大量数据分析和高性能计算的场景，因为列式云数据库能够更好地压缩数据并提高查询效率。而关系型云数据库则采用传统的关系型数据模型，以行为单位组织数据，每个表由多个行组成，每个行由多个列组成，通过主键和外键进行关联。关系型云数据库提供了完整的SQL支持，适用于需要复杂查询和数据分析的应用场景。查询性能列式云数据库通常在大数据量和高并发查询场景下表现出更高的性能。由于列式存储将数据按列划分，因此在执行查询时可以仅扫描所需的列，避免了全表扫描的...阅读全文
中国软件领域规模最大、影响最广的学术会议——CCF中国软件大会(ChinaSoft 2023)在上海国际会议中心开幕。CCF理事长、大会执行委员会荣誉zhu席、中国科学院院士梅宏，上海市经济和信息化委员会主任张英，中国科学院院士、复旦大学校长金力致辞。何积丰、于全、徐宗本、柴洪峰、王义等5位国内外院士和业内专家蒋铭到会做特邀报告。院士林惠民、徐宗本、梅宏、吕建、柴洪峰、王怀民、张宏科出席大会相关论坛。天翼云科技有限公司副总经理曾卫民出席第七届云际计算技术论坛，并以《云际畅联，全域协同，天翼云一体化云网战略与实践》为题发表演讲，分享了天翼云在一体化云网基础设施方面的战略布局，全栈云产品能力和服务体系，以及如何通过一体化的运维管理、安全运营机制和云际计算的理论和方法来实现资源协同和效率提升。天...阅读全文
说明作用减少数据体积，可以存储更多的数据 缺点压缩/解压缩需要 大量计算，消耗大量CPU资源 解压缩过程压缩在写入数据块到 HDFS 之前会首先对数据块进行 压缩，再落盘，从而可以减少磁盘空间使用量 解压缩在读数据的时候首先从 HDFS 中加载出 block 块之后进行 解压缩 压缩算法hbase2.1 支持 LZO ZSTD GZ LZ4 算法 GZ（GZIP）GZIP 压缩率最高，但是其实CPU密集型的，对CPU的消耗比其他算法要多，压缩和解压速度也慢 用于冷数据存储，要求数据访问不频繁 默认支持 LZOLZO的压缩率居中，比GZIP要低一些，但是压缩和解压速度明显要比GZIP快很多，其中解压速度快的更多 用于热数据存储，数据访问频繁时使用 zstdzstd是Facebook在2016年...阅读全文
11月2日，国际数据公司（IDC）最新发布的《中国公有云服务市场（2023上半年）跟踪》报告显示，在中国公有云IaaS市场，中国电信天翼云份额占比再度大幅攀升，稳居业内前三；同时，在公有云IaaS+PaaS市场，天翼云同样增势强劲，以领先优势，位列第三。从中国企业和MNC使用国内公有云IaaS资源的市场角度来看，中国电信天翼云排名第三。天翼云强劲增势离不开持续的科技创新与行业赋能。作为云服务国家队，天翼云在持续优化算力资源布局的基础上，全面突破云操作系统、分布式数据库等关键核心技术，以云操作系统为核心，从底层基础软硬件技术，到上层高阶云能力，实现了全栈技术的自主可控，打造了具备“科技创新、自主可控、安全可信、云网融合、生态开放、绿色低碳”六大特征的国家关键信息基础设施平台，为各行业数字化...阅读全文
近期，中国电信天翼云采用国产化操作系统、应用软件的大数据平台在广西南宁正式上线并投入使用。该项目由天翼云与广西某公司合作，通过天翼云大数据平台翼MR、CTyunOS操作系统等产品，构建了集数据湖和批流一体处理能力的大数据平台。该大数据平台的重要组成部分，天翼云大数据平台翼MR，是基于云原生技术打造的，集资源、服务、任务、应用等多层级运维管理于一身的服务平台。近年来，天翼云大数据平台翼MR逐步整合拓展大数据生态组件，自主研发重构大数据基础存储与计算等核心能力，为客户提供一站式的企业级大数据平台。目前，天翼云大数据平台翼MR已实现硬件、操作系统、存储、计算、调度的全栈自主可控，打造了基于软硬协同架构的高性能计算引擎，拥有国产化生态下业界领先的极-致性能。平台的成功上线，体现了天翼云在大数据自...阅读全文
1月4日，国家数据局会同中央网信办、科技部、工业和信息化部等17个部门联合印发《“数据要素×”三年行动计划（2024—2026年）》，旨在充分发挥数据要素乘数效应，赋能经济社会发展。在推动发挥数据要素乘数效应，释放数据要素价值的攻坚路上，海南省一直走在前面。近日，海南省大数据管理局印发全国首部明确开展数据产品所有权确权登记的政策文件《海南省数据产品超市数据产品确权登记实施细则（暂行）》（以下简称《实施细则》），率先探索确定数据产品所有权，从源头上解决数据产品后续资产化、资本化应用，促进数据资源开发利用。基于全省统一的数据产品开发利用、流通交易平台——海南省数据产品超市，《实施细则》进一步明确数据产品所有权的确权登记流程，引导数据产品进行权属确认、流转备案，探索数据资产化、资本化管理。遵循依法...阅读全文
HBase模式设计是需要注意的问题：1．设计准则1）行键设计读访问模式：通过行键索引提升查询效率。HBase中唯一可用的索引只有行键索引，需要对行键精心设计来尽可能地优化数据查询。某项数据放在行键中会得到更好的查询性能，但是行键的长度变长，行键索引会占用更多的内存资源，由于行键在每个列族中保存，也会需要更多的磁盘空间。写访问模式：避免同一时间段里写入的数据形成热点。随机前缀：在原先彼此相邻的行键前面加上一个随机生成的前缀。哈希前缀：针对随机前缀生成的行键具有不确定性的缺陷，哈希前缀做了改进，通过对原行键调用选定的哈希函数生成前缀。反转键：将原先彼此相邻的行键按字节序反转生成新的行键。以上几种策略都会失去数据按特定行键顺序存放的特性，在进行范围查询时需要访问全部索引数据且需要有更多的磁盘IO操...阅读全文
