java技术圈 为您找到相关结果 161

MySQL调优之innodb_buffer_pool_size大小设置_sunny05296的博客

MySQL调优之innodb_buffer_pool_size大小设置 相关查看命令 sql> show global variables like 'innodb_buffer_pool_size'; sql> show global status like 'Innodb_buffer_pool_pages_data'; sql> show global status like 'Innodb_page_size'; 或 sql> use mysql; sql> select @@innodb_buffer_pool_size; .... MariaDB [(none)]> show global variables like 'innodb_buffer_pool_size'; +--...阅读全文

博文 2023-09-13 16:39:43 CSDN博客

HBase原理 – 所有Region切分的细节都在这里了 – 有态度的HBase/Spark/BigData

Region自动切分是HBase能够拥有良好扩张性的最重要因素之一,也必然是所有分布式系统追求无限扩展性的一副良药。HBase系统中Region自动切分是如何实现的?这里面涉及很多知识点,比如Region切分的触发条件是什么?Region切分的切分点在哪里?如何切分才能最大的保证Region的可用性?如何做好切分过程中的异常处理?切分过程中要不要将数据移动?等等,这篇文章将会对这些细节进行基本的说明,一方面可以让大家对HBase中Region自动切分有更加深入的理解,另一方面如果想实现类似的功能也可以参考HBase的实现方案。 Region切分触发策略 在最新稳定版(1.2.6)中,HBase已经有多达6种切分触发策略。当然,每种触发策略都有各自的适用场景,用户可以根据业务在表级别选择不同的...阅读全文

博文 2023-09-21 14:20:13 hbasefly.com

Linux 系统 /var/log/journal/ 垃圾日志清理

CentOS系统中有两个日志服务,分别是传统的 rsyslog 和 systemd-journal systemd-journald是一个改进型日志管理服务,可以收集来自内核、系统早期启动阶段的日志、系统守护进程在启动和运行中的标准输出和错误信息,还有syslog的日志。 该日志服务仅仅把日志集中保存在单一结构的日志文件/run/log中,由于日志是经历过压缩和格式化的二进制数据,所以在查看和定位的时候很迅速。 本文转自米扑博客:Linux 系统 /var/log/journal/ 垃圾日志清理 默认情况下并不会持久化保存日志,只会保留一个月的日志。另外,一些rsyslog无法收集的日志也会被journal记录到。 rsyslog作为传统的系统日志服务,把所有收集到的日志都记录到/var/l...阅读全文

博文 2023-10-29 10:24:54 CSDN博客

WPF框架系列课程(小白进阶选择)

WPF框架系列课程(小白进阶选择) 参考资料下载地址1:https://pan.baidu.com/s/1RzeBXGIRPbsAJcScF8xvVQ 提取码:rbp8 参考资料下载地址2:https://share.weiyun.com/VAU3sFU2 密码:9cqtcj 本文将从零基础开始讲解WPF控件、数据绑定、模板样式、资源字典、命令系统、依赖属性、路由事件、动画行为等一系列的知识,内容包含WPF的数据绑定、MVVM概念与实操、样式、模板、命令、依赖属性、路由事件、行为、自定义控件、3D、动画等高级知识,想学习wpf的小伙伴可以认真阅读本文,希望我的文章对大家有所帮助。 首先,我们先来认识wpf,那么什么是wpf呢? WPF(Windows Presentation Foundat...阅读全文

博文 2023-11-30 10:39:44 kaidnxhd2023

Nginx工作原理

本文分享自天翼云开发者社区《Nginx工作原理》,作者:王****秀Nginx的进程模型Nginx服务器由一个Master进程和多个Worker进程组成:Master进程:管理Worker进程。对外接口:接收外部的操作(信号);对内转发:根据外部操作的不同,通过信号管理Worker;监听:监控Worker进程的运行状态,Worker进程异常终止后,自动重启Worker进程。Worker进程:所有Worker进程都是平等的,用于处理网络请求。进程数量:在nginx.conf中配置,一般设置为核心数,充分利用CPU资源,同时,避免进程数量过多,避免进程竞争CPU资源,增加上下文切换的损耗。HTTP连接建立和请求处理过程Nginx启动时,Master进程加载配置文件。Master进程,初始化监听的...阅读全文

博文 2023-10-30 16:07:23 Tianyiyun

什么是无服务器架构技术?

本文分享自天翼云开发者社区《什么是无服务器架构技术?》,作者:SD万无服务器架构(Serverless Architecture)是jin年来逐渐兴起的一种软件架构方案,它采用了一种全新的方式来处理应用程序的部署、运行和扩展。与传统的服务器架构相比,无服务器架构具有很多优势,包括可扩展性、弹性、可靠性和安全性等。一、无服务器架构的基本概念和特点1.基本概念无服务器架构是指将应用程序的部署、运行和扩展都交给了云服务提供商来处理,开发者只需要通过API调用来访问和操作应用程序,不再需要考虑服务器、网络、负载均衡等问题。在无服务器架构中,云服务提供商会为开发者提供一系列工具和服务,包括API网关、流量控制、负载均衡、缓存、安全等,开发者只需要关注业务逻辑的实现即可。2.特点无服务器架构的主要特点包...阅读全文

[最新47章]Three.js可视化企业实战WEBGL课(23年12月升级版)

[最新47章]Three.js可视化企业实战WEBGL课(23年12月升级版) 网盘地址:https://pan.baidu.com/s/1JUzSfbQ95949f7LBDoyRDQ 提取码:mog6 腾讯微云下载地址:https://share.weiyun.com/Sa6MSzwS 密码:n99b5x 今天给大家讲讲关于Three.js可视化相关的内容,从0基础到企业项目实战,内容一共47章,其中包含Three.js开发入门、three.js环境搭建、WebGPU与WGSL入门与原理、blender基础进阶、Cesium入门等,结合大量实战案例,比如全景看房与科技展馆案例、智慧城市案例、Cesium智慧广州项目实战案例、海景酒店日夜交替全景展示、AI寻路避障自动导航案例、可视化物理模拟...阅读全文

博文 2023-12-11 11:27:50 maudnwiugbn

创建本地yum仓库

本文分享自天翼云开发者社区《创建本地yum仓库》,作者: zzzzgj;背景有的部署环境不通外网,但希望继续使用yum命令下载依赖包而不修改部署脚本逻辑。因此记录一个本地repo的建立方法。1、获取依赖包# 如在通网的机器上下载openssl-devel所有依赖yumdownloader --resolve --alldeps openssl-devel2、创建仓库创建一个(本地)存储库并用yum它来解决您的依赖关系。CentOS wiki提供了一个如何做到这一点。CentOS wiki HowTos / CreateLocalRepos。简要操作如下:1.为本地存储库创建一个目录,例如/home/teledb/repo。2.将RPM放置到该目录中:cd /home/teledb/repoy...阅读全文

Mysql设置binlog过期时间并自动删除 - Ruthless

Mysql设置binlog过期时间并自动删除 问题: Mysql数据库由于业务原因,数据量增长迅速,binlog日志会增加较多,占用大部分磁盘空间。 解决方案: 出于节约空间考虑,可进行删除多余binary日志,并设置定期删除操作。 1、查看binlog过期时间 mysql> show variables like 'expire_logs_days'; 或者 mysql> select @@global.expire_logs_days; +------------------+-------+ | Variable_name | Value | +------------------+-------+ | expire_logs_days | 0 | +-----------------...阅读全文

博文 2024-02-20 18:05:46 博客园

云主机使用的硬盘类型及对应的存储类型详解

本文分享自天翼云开发者社区《云主机使用的硬盘类型及对应的存储类型详解》,作者:不知不觉随着云计算的普及,云主机已成为企业和个人用户的重要选择。云主机为用户提供了灵活、可伸缩的计算资源,并且具有高可用性、高可扩展性以及易于管理的特点。在云主机的使用过程中,硬盘类型和存储类型的选择是非常重要的环节。本文将详细介绍云主机所使用的硬盘类型以及对应的存储类型,帮助读者更好地了解和选择适合自己需求的云存储方案。一、云主机使用的硬盘类型SSD硬盘SSD(Solid State Drive)硬盘,即固态硬盘,是一种基于闪存芯片的存储设备。与传统的机械硬盘(HDD)相比,SSD硬盘具有更高的读写速度、更低的延迟、更高的耐用性和更高的性能。因此,SSD硬盘通常用于需要高I/O性能的应用场景,如数据库、Web服务...阅读全文

详细解释云平台的可扩展性和灵活性

本文分享自天翼云开发者社区《详细解释云平台的可扩展性和灵活性》,作者:3****m一、云平台的可扩展性云平台的可扩展性指的是平台能够根据用户需求的变化,动态地扩展或缩减计算、存储和网络等资源的能力。这种能力可以帮助用户应对业务高峰和低谷,避免因资源不足或浪费而导致的性能瓶颈或成本过高。云平台的可扩展性主要体现在以下几个方面:1.计算资源的可扩展性:云平台可以根据用户的需求,动态地增加或减少虚拟机、容器等计算资源的数量,以满足业务的弹性需求。同时,云平台还支持多种计算实例类型,可以根据不同的业务需求选择最合适的计算资源。2.存储资源的可扩展性:云平台提供了弹性可扩展的存储服务,可以根据用户的需求动态地增加或减少存储容量,避免因存储不足而导致的数据丢失或性能下降。此外,云平台还支持多种存储类型,...阅读全文

JDBC快速入门:从环境搭建到代码编写,轻松实现数据库增删改查操作!

通过上篇文章我们已经对JDBC的基本概念和工作原理都有了一定的了解,本篇文章我们继续来探索如何从零开始,一步步搭建开发环境,编写代码,最后实现数据库的增删改查操作。 ## 一、开发环境搭建 首先,我们需要准备的开发环境有:Java开发工具包(JDK)、数据库(如MySQL)、数据库驱动(如MySQL Connector/J)。 #### 安装JDK: 你可以从Oracle官网下载适合你操作系统的JDK版本,按照提示进行安装即可。相信这个大家早已经安装过了,在这里就不再多说了。 #### 安装数据库: 同样在官网下载MySQL安装包,按照提示进行安装。安装完成后,需要创建一个数据库和表,用于后续的测试。 #### 下载数据库驱动: 在MySQL官网下载对应版本的MySQL Connector/...阅读全文

博文 2023-12-26 16:00:17 YDYXCODE

世界第一!

近日,国际权威标准性能评测组织SPEC(Standard Performance Evaluation Corporation,即国际标准性能评测组织)公布了全新Cloud IaaS 2018 Benchmark 测试结果,天翼云平台在综合性能及平台相对可扩展性比拼中夺得世界第一。在9台组规模测试、ARM指令集架构测试场景中,天翼云平台的测试结果一举刷新世界纪录;应用实例复制数、相对可扩展性和平均实例配置时间等指标均达到全球领先水平,充分体现天翼云平台优秀的算力调度能力和大规模扩展能力。​科技硬实力,刷新世界纪录SPEC Cloud IaaS 2018 Benchmark是SPEC开发的基于大数据场景下的云基准标准测试套件,用以衡量云计算的性能,Benchmark基准测试模型主要测试的是Ia...阅读全文

博文 2023-12-08 18:11:18 Tianyiyun

NFS v3及v4协议区别

本文分享自天翼云开发者社区《NFS v3及v4协议区别》,作者:章****凯NFS v4相比v3,有部分功能的增强,如果应用需要实现如下功能,则必须使用NFS v4(建议和应用侧确实是否有NFS v4需求,一般情况下,应用侧会对是否采用NFS v4有明确需求):ID Domain MappingNFS v4引入Domain概念,加强了权限管控的能力。访问NFS v4的卷需要授权,因此性能相比NFS v3略有下降。授权NFS V4访问,需要部署LDAP服务器做权限管控,并涉及操作系统部分配置文件修改NFS v4.x Access Control Lists (ACLs)NFS v4支持同一文件的不同用户权限控制,例如对文件1.txt,用户A是755权限,用户B是600权限,通常这类权限管控要求...阅读全文

博文 2024-08-09 16:15:32 Tianyiyun

弹性云主机支持多种规格

本文分享自天翼云开发者社区《弹性云主机支持多种规格》,作者:每日知识小分享随着云计算技术的快速发展,弹性云主机已经成为了一种广泛使用的云计算服务。弹性云主机是一种可动态调整的计算资源,可以根据用户的需求进行灵活配置。其中,支持多种规格是弹性云主机的一项重要特性,它可以让用户根据实际需求选择合适的规格,以满足不同的应用场景。一、弹性云主机简介弹性云主机是一种基于云计算技术的虚拟化平台,它可以为用户提供独立的、可动态调整的计算资源。弹性云主机可以根据用户的需求进行灵活配置,包括CPU、内存、存储等方面。这种服务可以帮助用户降低IT成本,提高工作效率,同时还可以提供高可用性和灵活性。二、多种规格支持弹性云主机支持多种规格,包括不同的CPU、内存和存储配置。用户可以根据自己的需求选择合适的规格,以满...阅读全文

如何利用容器与中间件实现微服务架构下的高可用性和弹性扩展

本文分享自天翼云开发者社区《如何利用容器与中间件实现微服务架构下的高可用性和弹性扩展》,作者:c****w在当今的互联网时代,微服务架构已经成为许多企业选择的架构模式,它能够提高系统的灵活性、可维护性和可扩展性。然而,微服务架构下的高可用性和弹性扩展是一个复杂的挑战。本文将介绍如何利用容器与中间件来实现微服务架构下的高可用性和弹性扩展的解决方案。1. 理解微服务架构下的高可用性和弹性扩展需求在微服务架构中,系统由多个微小的服务组成,每个服务都是一个独立的单元,可以独立部署和扩展。因此,要实现高可用性和弹性扩展,需要考虑以下几个方面:服务的自动发现和注册服务的负载均衡和容错处理弹性扩展和自动伸缩故障自愈和自动恢复2. 利用容器实现微服务的高可用性容器技术如Docker和Kubernetes可以...阅读全文

JDBC快速入门:看我如何用JDBC数据库连接池,轻松解决大量并发请求问题!

我们已经知道JDBC是Java语言中用来规范客户端程序如何访问数据库的应用程序接口,也是大多数Java开发者与数据库打交道的必备工具。但是,你是否知道,JDBC在处理大量并发请求时,可能会遇到一些问题?这就是我们今天要讨论的主题——JDBC数据库连接池。 首先,让我们来了解一下什么是数据库连接池。 ## 一、数据库连接池简介 JDBC连接池,全称为Java多线程数据库连接池,是一种用于管理数据库连接的技术。其主要作用是减少每次请求时创建和释放数据库连接的开销,以此提高系统性能。 在应用程序和数据库之间,JDBC连接池会建立一个连接池,当需要访问数据库时,无需每次都重新创建连接,而是直接从池中获取已有的连接。 ![image.png](http://static.itsharecircle.c...阅读全文

npm install XXX 、package.json 中的bin、node_moduels 下.bin目录三者关系_node_modules bin 文件怎么创建

官方链接 npm install xxx会在node_modules下安装对应的依赖,如果安装的依赖下面的package.json目录里面有bin配置, 比如cross-env 那么就会在node_modules目录下的.bin目录生成对应的脚本文件 所以我们可以在package.json中的scripts中使用对应的脚本。 官方翻译 bin 许多软件包都有一个或多个可执行文件,他们希望将它们安装到 PATH 中。npm 使这非常容易(事实上,它使用此功能来安装“npm”可执行文件。) 要使用它,bin请在 package.json 中提供一个字段,该字段是命令名称到本地文件名的映射。安装时,npm 会将该文件符号链接到 prefix/bin全局安装或./node_modules/.bin/...阅读全文

博文 2024-02-12 20:37:02 CSDN博客

MyBatis实战指南(二):工作原理与基础使用详解

MyBatis是一个优秀的持久层框架,它支持定制化SQL、存储过程以及高级映射。那么,它是如何工作的呢?又如何进行基础的使用呢?本文将带你了解MyBatis的工作原理及基础使用。 ## 一、MyBatis的工作原理 ### 1.1 MyBatis的工作原理 工作原理图示: ![image.png](http://static.itsharecircle.com/240111/fb3da40016d1dcdc2b11db5767113d68.png) **1、读取MyBatis配置文件** mybatis-config.xml为MyBatis的全局配置文件,配置了MyBatis的运行环境等信息,例如数据库连接信息。 **2、加载映射文件(SQL映射文件,一般是XXXMapper.xml)** ...阅读全文

博文 2024-01-11 14:49:32 YDYXCODE

Palworld幻兽帕鲁世界参数修改最佳实践(Ubuntu)

本文为您介绍对Palworld游戏世界参数进行修改的最佳实践。操作场景本文以Ubuntu操作系统为例,为您介绍通过Palworld专有镜像一键部署Palworld服务器后对游戏世界参数进行修改的具体操作。操作步骤1.登陆root用户。在云主机控制台点击云主机列表中“远程登录”按钮,登录云主机。输入root后回车,再输入创建时使用的密码,即可进入root用户。2.执行命令 su - steam。3.执行命令 cd /home/steam/.steam/SteamApps/common/PalServer,进入该目录下。4.执行命令 cp DefaultPalWorldSettings.ini Pal/Saved/Config/LinuxServer/PalWorldSettings.ini。5...阅读全文

博文 2024-02-05 15:06:16 Tianyiyun

【完结18章】C++大型流媒体项目-从底层到应用层千万级直播系统实战

【完结18章】C++大型流媒体项目-从底层到应用层千万级直播系统实战 一、什么是流媒体。 流媒体是一种以流的形式在网络上进行数字媒体(音频、视频)传输的技术。 它将频、音视频之类的连续媒体经压缩编码、数据打包后按照一定的时间间隔要求连续地发送给接收方,接收方在后续数据不断到达的同时对接收到的数据进行重组、解码和播放。 如果你对流媒体感兴趣的话,可以看一下 Live555,一个更流行且更专业的流媒体库。 它支持了各种标准流媒体传输协议,如 RTP/RTCP、RTSP、SIP,实现了对多种音视频编码格式的音视频数据的流化、接收和处理等支持。播放 VLC 和 MPlayer 都是基于它来实现流媒体播放的功能,并且非常适合嵌入式领域。 二、流媒体特征 (1)内容主要是时间上连续的媒体数据(音频、视频...阅读全文

博文 2024-08-16 16:05:42 woaidaqipaiqiu1122

Mysql修改binlog日志过期时间 - 风一样的小李子

1.临时生效 # 查看默认设置的过期时间 show variables like "%expire_logs%"; # 设置保留15天 set global expire_logs_days=15 # 刷新日志 flush logs; #查看新生成的binlog日志 show master status\G: 注意:以上命令在数据库执行会立即生效,请确定设置数据的保留日期,以免误删 2.永久生效 # 修改配置文件 vim /etc/my.cnf [mysqld]模块 expire_logs_days=15 注意:在配置文件修改后,需要重启才能永久生效。另,0表示永不过期,单位是...阅读全文

博文 2024-02-20 18:09:33 博客园

linux各个目录的作用

本文分享自天翼云开发者社区《linux各个目录的作用》,作者:技术小白/bin/:存放系统命令的目录,普通用户和超级用户都可以执行,不过放在/bin下的命令在单用户模式下也可以执行;/sbin/:保存和系统环境设置相关的命令,只有超级用户可以使用这些命令进行系统环境设置,但是有些命令可以允许普通用户查看;/usr/bin/:存放系统命令的目录,普通用户和超级用户都可以执行,这些命令和系统无关,在单用户模式下不能执行;/usr/sbin/:存放根文件系统不必要的系统管理命令,例如多数服务程序,只有超级用户可以使用;/boot/:系统启动目录,保存系统启动相关文件,如内核文件和启动引导程序;/dev/:设备文件保存位置;/etc/:配置文件保存位置,系统内所有采用默认安装(rpm安装)的服务的配...阅读全文

博文 2024-06-07 11:18:33 Tianyiyun

Java如何打印Hbase rowkey

步骤1: 设置HBase环境与连接确保已经正确配置了HBase的客户端依赖(如hbase-client、hbase-common等),并设置了HBase的ZooKeeper地址。以下是一个简化的示例,假设您已经有了一个配置好的Configuration对象(conf)和表名(tableName):import org.apache.hadoop.hbase.HBaseConfiguration;import org.apache.hadoop.hbase.TableName;import org.apache.hadoop.hbase.client.Connection;import org.apache.hadoop.hbase.client.ConnectionFactory;// 创建...阅读全文

博文 2024-05-12 12:49:11 zhidiantech

云主机(操作系统:CentOS7版本)安装nfs客户端,挂载文件系统

本文分享自天翼云开发者社区《云主机(操作系统:CentOS7版本)安装nfs客户端,挂载文件系统》,作者:c****n1.保证宿主机上有nfs-utils1.1若宿主机yum源不可以用(1)本地下载nfs-utils安装包下载链接:https://mp.csdn.net/mp_download/manage/download/UpDetailed?spm=3001.5299(2)登录宿主机,创建文件夹存放nfs-utils: mkdir /root/lhx(3)进入目录/root/lhx: cd /root/lhx(4)宿主机上安装rz,用于nfs-utils安装包传输到宿主机:yum install lrzsz(5)nfs-utils安装包传输到宿主机:rz -be(6)宿主机上安装gen...阅读全文

云空间视频监控的可扩展性:适应不断增长的监控需求

本文分享自天翼云开发者社区《云空间视频监控的可扩展性:适应不断增长的监控需求》,作者:二进制诗人随着企业和组织不断扩大,对视频监控系统的需求也在持续增长。云空间视频监控以其卓越的可扩展性,为满足这些日益增长的监控需求提供了理想的解决方案。本文旨在分享云视频监控的可扩展性优势,并提供从开发到部署的详细操作过程。云视频监控的可扩展优势云视频监控系统相比传统的本地监控系统,具有以下可扩展性优势:按需扩展:用户可以根据实际需求增加或减少监控摄像头数量,无需进行大规模的硬件投资。无缝集成:新加入的摄像头可以轻松集成到现有的云监控平台中,保持系统的统一性和整洁性。资源优化:云服务提供商通常会提供动态资源分配,确保监控系统的高性能运行,即使是在负载增加的情况下。规划可扩展的云视频监控系统在开发一个可扩展的...阅读全文

一文带您了解如何降低对象存储成本

本文分享自天翼云开发者社区《一文带您了解如何降低对象存储成本》,作者:刘****筠首先,需要了解天翼云对象存储(原生版)I型ZOS的三种存储类型,分别供标准、低频、归档存储,全面覆盖从热到冷的各种数据存储场景,您可根据使用场景和性能要求选择合适的存储类型。标准存储提供高可靠、高可用、高性能的存储服务,适用于频繁访问(平均一月访问多次)的存储场景,比如移动应用、网站、音视频、社交图片、大数据分析等业务场景。低频存储提供高可靠、低成本的存储服务,适用于不频繁访问(平均一月访问一次)的存储场景,但在需要时也能快速实时访问数据的业务场景,比如数据备份、监控数据存储等场景。归档存储提供高可靠、更低成本的存储服务,需要解冻后访问,适用于很少访问(平均一年访问一次)的存储场景,比如档案数据、医疗影像、长期...阅读全文

AI+云原生应用开发 从设计到部署运维全链路实战与提效【11章】

AI+云原生应用开发 从设计到部署运维全链路实战与提效【11章】 云原生开发是一种利用云平台优势,使用微服务、容器、服务网格、不可变基础设施等技术手段,构建弹性、可靠、自动化的云原生应用的开发模式。其核心特征包括: 容器化: 使用 Docker 等容器技术,将应用和运行时环境打包,以更轻量和灵活的方式交付和部署应用。 动态编排: 使用 Kubernetes 等编排框架,实现应用的自动部署、扩缩容、维护等。 微服务架构: 采用微服务架构和接口规范,拆分应用为松耦合的微服务。 持续交付: 借助持续集成和持续交付(CI/CD)实践,自动将代码构建、测试并部署到生产环境。 自动伸缩: 根据负载情况,平台可以自动调度资源,实现应用的弹性伸缩。 服务发现: 应用间通过服务注册与发现而非预配置与硬编码来实...阅读全文

博文 2024-08-26 14:21:52 woaidaqipaiqiu1122

支持S3协议的S3cmd工具简单使用

本文分享自天翼云开发者社区《支持S3协议的S3cmd工具简单使用》,作者:付****健一:安装方法#wget http://nchc.dl.sourceforge.net/project/s3tools/s3cmd/1.0.0/s3cmd-1.0.0.tar.gz #tar -zxf s3cmd-1.0.0.tar.gz -C /usr/local/ #mv /usr/local/s3cmd-1.0.0/ /usr/local/s3cmd/ #ln -s /usr/local/s3cmd/s3cmd /usr/bin/s3cmd二:使用方法1.配置Access Key ID 和 Secret Access Key#s3cmd --configure2.列举所有的Buckets#s3cmd l...阅读全文

博文 2024-08-09 16:17:28 Tianyiyun

魔乐社区体验:探索Llama 3.1模型微调之旅

在2024年的AI领域,Meta发布的Llama 3.1模型无疑成为了研究者和开发者的新宠。我有幸通过魔乐社区提供的资源,对这一模型进行了深入的学习和实践。在这个过程中,魔乐社区的资源和支持给我留下了深刻的印象。环境准备的便捷性魔乐社区提供的实践指导非常详尽,从安装Ascend CANN Toolkit和Kernels到openMind Library以及openMind Hub Client的安装,每一步都有清晰的命令和说明。这大大简化了环境搭建的过程,即使是对于新手来说,也能够快速上手。​模型下载与推理的直观体验通过魔乐社区提供的链接,用户能够轻松下载Llama 3.1模型,并使用openMind Library和LLaMa Factory进行模型推理。实践指导中的示例代码和配置文件非常...阅读全文

博文 2024-09-04 15:22:20 Tianyiyun

AI+云原生应用开发 从设计到部署运维全链路实战与提效【已完结11章】

AI+云原生应用开发 从设计到部署运维全链路实战与提效【已完结11章】 大模型的分类 按照输入数据类型的不同,大模型主要可以分为以下三大类: 语言大模型 是指在自然语言处理(NLP)领域中的一类大模型,通常用于处理文本数据和理解自然语言。 视觉大模型 是指在计算机视觉(CV)领域中使用的大模型,通常用于图像处理和分析。 多模态大模型 是指能够处理多种不同类型数据的大模型,例如文本、图像、音频等多模态数据。 按照应用领域的不同,大模型主要可以分为 L0、L1、L2 三个层级: L0 通用大模型 是指可以在多个领域和任务上通用的大模型。通用大模型就像完成了大学前素质教育阶段的学生,有基础的认知能力,数学、英语、化学、物理等各学科也都懂一点。 L1 行业大模型 是指那些针对特定行业或领域的大模型。...阅读全文

博文 2024-09-19 14:44:06 woaidaqipaiqiu1122

MQ大牛成长课——从0到1手写分布式消息队列中间件「官方同步」

xia仔ke:xingkeit.top/9583/ 随着互联网和大数据技术的迅猛发展,消息队列作为一种重要的消息传递机制,在分布式系统中扮演着至关重要的角色。RocketMQ是一个开源的分布式消息中间件,广泛应用于企业级消息传递、流量控制和异步处理等场景。本文将深入剖析RocketMQ的架构原理,探讨其核心组件、消息传递机制、存储机制以及高可用性设计等方面,以帮助读者更好地理解其工作原理和应用场景。 1. RocketMQ概述 RocketMQ最初由阿里巴巴开发,旨在为高可用、高性能的消息传递提供解决方案。它支持多种消息传递模式,包括点对点和发布/订阅,具备良好的扩展性和可靠性。RocketMQ不仅适用于传统的消息传递需求,还支持事务消息、定时消息和顺序消息等多种复杂场景。 2. Rocke...阅读全文

Flink【环境搭建 01】(flink-1.9.3 集群版安装、配置、验证)

我使用的安装文件是 flink-1.9.3-bin-scala_2.12.tgz ,以下内容均以此版本进行说明。 说明 搭建集群首先要进行集群的规划【哪台做主节点,哪些做从节点】,这里简单搭建一个 3 节点的 Flink Standalone 集群,其中三台主机Flink01、Flink02、Flink03 均为 worker 节点,Flink01 为 master 节点。 1. 配置免密登录【每台服务器】 Flink 组件之间需要基于 SSH 进行通讯。 1.1 配置映射 配置 ip 地址和主机名映射:==很关键==通过ifconfig查询本机的ip地址,这个地方没有配置正确的话节点会有问题。 vim /etc/hosts xxx.xx.x.x flink01 flink01 xxx.xx...阅读全文

博文 2024-10-11 18:01:25 阿里云开发者社区

MQ大牛成长课–从0到1手写分布式消息队列中间件(完结)

MQ大牛成长课–从0到1手写分布式消息队列中间件(完结) 获课:www.bcwit.top/5291/ 获取ZY↑↑方打开链接↑↑ 如何吃透分布式MQ框架 要吃透分布式消息队列(MQ)框架,首先需要理解消息队列的基础概念、工作原理以及如何在分布式系统中应用它。以下是一个从基础到进阶的学习路线,可以帮助你全面掌握分布式消息队列框架。 1. 理解消息队列的基础概念 1.1 消息队列(MQ)的基本定义 消息队列(Message Queue, MQ)是一种进程间通信的中间件,它允许应用程序之间通过消息的形式交换信息。消息队列的核心是解耦系统间的依赖关系,使得生产者和消费者可以独立地运行。MQ系统通常支持异步通信,可以提高系统的性能和扩展性。 1.2 MQ的基本概念 生产者:产生消息的应用。 消费者:...阅读全文

【完结13章】Electron+Vue3+AI+云存储--实战跨平台桌面应用

【完结13章】Electron+Vue3+AI+云存储--实战跨平台桌面应用 课程融合Electron、Vue3、AI及云存储,以项目为驱动,从零打造跨平台、智能化、高安全性及扩展性的桌面应用。全面应用并高效掌握Electron,及与主流技术整合的疑难问题解决。 什么是云存储? 云存储是一种数据存储在远端服务器集群在线访问的存储类型,用户无需关注存储位置。云存储服务提供商负责安全地存储、管理和维护存储服务器、基础设施和网络,以确保用户数据的可靠性、可用性以及性能。基于高度虚拟化的基础架构云存储可以提供广泛的弹性来应对不确定性的容量和性能的诉求。 与传统的数据存储方式相比,云存储提供了更灵活、可靠、可扩展的解决方案,用户无需购买和管理自己的存储基础设施,并且可以随时随地方便地访问和管理数据。传...阅读全文

博文 2024-11-29 14:50:56 woaidaqipaiqiu1122

LLM算法工程师全能实战教程

LLM算法工程师全能实战教程 获课:xuelingit.xyz/13757/ 获取ZY↑↑方打开链接↑↑ 如何保证LLM系统的高可用性? 保证大型语言模型(LLM)系统的高可用性(High Availability, HA)对于确保服务的连续性和用户体验至关重要。实现这一目标需要从系统架构设计、运维管理以及容错机制等多个角度入手。以下是确保LLM系统高可用性的关键策略: 1. 架构设计 分布式部署:将应用和服务分散部署在多个地理区域或数据中心,以减少单点故障的风险。 负载均衡:使用硬件或软件负载均衡器来分配流量,避免某些服务器过载,并提高整体系统的响应速度。 微服务架构:将应用程序分解为一系列小而独立的服务,这些服务可以独立部署、扩展和维护,从而增加灵活性和可靠性。 2. 容错与冗余 多实例...阅读全文

如何基于云产品搭建一个高可用性的网站

本文分享自天翼云开发者社区《如何基于云产品搭建一个高可用性的网站》,作者:黎****伟如何基于云产品搭建一个高可用性的网站?从传统机房服务器迁移至云计算平台,无论是可用性的提高,还是维护成本的降低,都是云计算带来的不可否认的优势。本案示例通过使用天翼云常用的三个云产品 ECS+ELB+RDS 来帮助用户快速地在云端搭 建具备高可用性的网站 wordpress。一、所需资源配置1)ECS 云主机 2台2) RDS MySQL8.0示例 1套3)EIP 2 个4)ELB 增强型负载均衡 1 套二、网站架构​三、 高可用架构部署实现1、RDS 作为 WordPress 网站数据库云数据库 RDS 是一种稳定可靠、可弹性伸缩的在线数据库服务,默认 部署的是主备架构。出于这方面的考虑,我们让应用数据库...阅读全文

MQ大牛成长课–从0到1手写分布式消息队列中间件-mk

MQ大牛成长课–从0到1手写分布式消息队列中间件(完结)​xia仔ke:itazs.fun/5291/获取资源:上方URL获取资源构建一个从零开始的分布式消息队列中间件是一个复杂但非常有意义的项目。分布式消息队列在现代微服务架构中扮演着至关重要的角色,它可以解耦服务之间的直接依赖,提高系统的可扩展性和可靠性。以下是一个从设计到实现的详细指南,帮助你从零开始构建一个简单的分布式消息队列中间件。1. 设计阶段1.1 确定需求消息持久化:消息是否需要持久化存储?消息顺序:是否需要保证消息的顺序?消息确认:是否需要消息确认机制?高可用性:如何保证系统的高可用性?负载均衡:如何实现负载均衡?安全性:如何保证消息的安全传输?1.2 架构设计消息代理:负责接收、存储和转发消息。生产者:发送消息到消息代理。...阅读全文

一体机场景ceph高可用介绍

本文分享自天翼云开发者社区《一体机场景ceph高可用介绍》,作者:b****n一体机场景使用ceph开源架构作为存储系统的主体架构,原生方案支持存储数据高可用性,包括副本数可以灵活控制/支持故障域分隔,数据强一致性/多种故障场景自动进行修复自愈/没有单点故障,自动管理。部署形态​存储引擎组件部署形态​IO高可用-流程​组件高可用-心跳​存储数据高可用-备份​ 图像 小部...阅读全文

博文 2024-11-11 16:27:02 Tianyiyun

MQ大牛成长课–从0到1手写分布式消息队列中间件

MQ大牛成长课–从0到1手写分布式消息队列中间件​获课:MQ大牛成长课–从0到1手写分布式消息队列中间件获取ZY↑↑方打开链接↑↑创建一个分布式消息队列中间件(MQ)是一个复杂的任务,涉及到多个计算机科学领域的知识。从零开始手写一个MQ可以帮助你深入理解其工作原理和内部机制。下面我们将探讨一些关键概念和技术点,这些对于构建一个高效的分布式消息队列至关重要。1. 消息模型首先需要定义消息队列的基本模型。通常有两种常见的模式:点对点(P2P) 和 发布/订阅(Pub/Sub)。在P2P中,消息被发送到特定的接收者;而在Pub/Sub模式下,生产者将消息发布到主题,所有订阅该主题的消费者都可以收到消息。2. 基本组件Producer(生产者):负责生成消息并将其发送到队列。Consumer(消费者...阅读全文

C++从0实现百万并发Reactor服务器

xia仔ke:xingkeit.top/9297/ 在现代计算机系统中,调用可执行程序是一个重要的操作,涉及到多种编程语言和操作系统的交互。可执行程序是指可以在操作系统上直接运行的文件,它包含了程序的代码及其所需的资源。通过调用可执行程序,用户和应用程序能够实现特定功能或完成特定任务。本文将探讨调用可执行程序的基本概念、实现机制及其在不同环境下的应用。 1. 可执行程序的定义与特点 可执行程序通常是由编译器或解释器生成的,其文件格式取决于操作系统。例如,在Windows系统中,常见的可执行文件格式是.exe,而在Unix/Linux系统中则是没有扩展名的二进制文件。可执行程序的主要特点包括: 自包含性:可执行程序通常包含了所需的所有代码和资源,可以独立运行。 跨平台性:一些可执行程序可以在不...阅读全文

Kubernetes系统精讲 Go语言实战K8S集群可视化(完整分享)

Kubernetes系统精讲 Go语言实战K8S集群可视化(完整分享)​获课:Kubernetes系统精讲 Go语言实战K8S集群可视化(完整分享)Kubernetes系统精讲 主要的知识内容Kubernetes(通常简称K8s)是一个开源的容器编排平台,用于自动化部署、扩展和管理容器化应用程序。它最初由Google设计,现在由云原生计算基金会(CNCF)维护。以下是Kubernetes系统精讲中涵盖的主要知识内容:1. Kubernetes 架构Master节点:负责集群管理和控制,包括API服务器、调度器、控制器管理器和etcd(键值存储数据库)。Worker节点:运行实际的应用程序容器,包含Kubelet(与主节点通信)、Kube-proxy(网络代理)和容器运行时(如Docker或c...阅读全文

RAW镜像格式介绍

本文分享自天翼云开发者社区《RAW镜像格式介绍》,作者:z****nRAW(Raw Disk Image)是一种简单而基本的虚拟化镜像格式,用于存储虚拟机的磁盘内容。它是一种原始的二进制文件格式,直接将虚拟机的磁盘映像保存为连续的字节流,没有经过特定的压缩或加密处理。以下是对RAW格式的一些介绍:简单性:RAW格式是一种非常简单的镜像格式,没有复杂的结构或元数据。它仅仅是将虚拟机的磁盘内容以原始的二进制形式保存在文件中。平台无关性:RAW格式是平台无关的,因此可以在各种虚拟化平台和工具中使用。这意味着你可以在不同的虚拟化环境中使用相同的RAW镜像文件,而无需进行转换或修改。兼容性:由于其简单性和平台无关性,RAW格式的虚拟机镜像文件在各种虚拟化平台和工具中具有良好的兼容性。它可以在QEMU、...阅读全文

如何设置国内yum源

设置国内yum源的一般步骤:1. 备份当前的yum源配置首先,建议备份现有的yum源配置,以便在需要时可以恢复。sudo cp /etc/yum.repos.d /etc/yum.repos.d.bak -r (建议把原目录下的源文件删除掉)2. 选择一个国内的镜像源常见的国内yum源有:阿里云清华大学开源软件镜像站网易开源镜像站3. 修改yum源以阿里云为例,操作步骤如下:CentOS假设您使用的是CentOS,那么可以通过以下步骤来配置阿里云的yum源:进入yum配置目录:cd /etc/yum.repos.d下载阿里云的CentOS repo文件:sudo curl -O http://mirrors.aliyun.com/repo/Centos-7.repo注意:根据您的CentOS...阅读全文

博文 2024-12-05 19:46:24 zhidiantech

Springboot3+Vue3语言识别翻译项目(可毕设,运营副业)

Springboot3+Vue3语言识别翻译项目(可毕设,运营副业)​获课:itazs.fun/5303/Spring Boot 3 + Vue 3:打造高效语言识别翻译项目在当今全球化的时代,语言障碍成为跨文化交流的巨大挑战。为了打破这一障碍,结合Spring Boot 3和Vue 3技术栈,我们可以开发一个高效、用户友好的语言识别翻译项目。该项目不仅适用于毕业设计,还可以作为一项有潜力的运营副业,为用户提供便捷的语言翻译服务。项目背景与目标随着人工智能技术的飞速发展,语言识别与翻译技术逐渐成熟,为跨语言交流提供了极大的便利。本项目旨在利用Spring Boot 3和Vue 3框架,结合第三方语言识别与翻译API,构建一个实时、准确的语言识别翻译系统。用户可以通过上传音频文件或实时录音,系...阅读全文

C++大型流媒体项目-从底层到应用层千万级直播系统实战

C++大型流媒体项目-从底层到应用层千万级直播系统实战​获课:点我获取资源:上方URL获取资源构建一个支持千万级用户的大型流媒体直播系统是一项复杂且具有挑战性的任务。这样的系统需要从底层到应用层进行全面的设计和优化,以确保高性能、高可用性和可扩展性。以下是一个从底层到应用层的详细设计方案,帮助你构建一个支持千万级用户的直播系统。1. 系统架构设计1.1 总体架构前端:用户界面,包括Web、移动应用等。后端:处理业务逻辑,包括用户管理、房间管理、消息管理等。流媒体服务器:处理视频流的推流、转码、分发等。存储系统:存储用户数据、视频数据等。数据库:存储用户信息、直播信息等。缓存系统:提高数据读取速度,减轻数据库压力。消息队列:处理异步任务,如消息推送、日志记录等。监控系统:实时监控系统性能,及时...阅读全文

Cesium可视化系统实战课程

Cesium可视化系统实战课程 Cesium介绍 Cesium是便用JavaScript开发的基于WebGL的实现三维地球和地图可视化的JS库,Cesium支持海量的三维模型数据,影像数据,地形高程数据,矢量数据等丰富的地理数据的加载。在交通,规划,城市管理,地形仿真等领城有非常广泛的应用。Cesium为三维的GIS提供了一个高效的数据可视化平台。 Cesium 作为一个较为年轻的三维可视化框架,在数字地球项目的应用上有着巨大的优势,其具有以下 3 点特性: 1)支持多种视图 能够以 2D、2.5D 和 3D 形式对地图进行展示,并且无需分别编写代码。 2)支持地理信息数据动态可视化 a. 能够使用时间轴动态展示具有时间属性的数据。 b. 能够使用符合 OGC 标准的 WMS、WMTS 等多...阅读全文

博文 2025-02-13 14:47:00 woaidaqipaiqiu1122

Three.js可视化企业实战WEBGL课-itazsfx

Three.js可视化企业实战WEBGL课|完结​获课:itazs.fun/6029/获取资源:上方URL获取资源Three.js 可视化技术探讨Three.js 是一个基于 WebGL 的 JavaScript 库,用于在网页上创建和显示3D图形。它简化了 WebGL 的复杂性,使得开发者可以更容易地创建复杂的3D场景和动画。本文将探讨 Three.js 的基本概念、应用场景、开发流程以及一些高级技巧。1. Three.js 概述1.1 什么是 Three.js?Three.js 是一个开源的 JavaScript 库,由 Ricardo Cabello(又名 Mr.doob)于2010年创建。它基于 WebGL 技术,提供了一套丰富的 API 和工具,帮助开发者轻松地在网页上创建和操作3...阅读全文

2024版Linux视频教程

2024版Linux视频教程​获课:itazs.fun/4432/VMware的功能和作用.VMware是一款功能强大的虚拟化软件,它在数据中心和云计算领域发挥着重要作用。以下是VMware的主要功能和作用:主要功能虚拟化基础架构:VMware提供了虚拟化基础架构解决方案,通过其核心产品如vSphere,将物理服务器转化为多个虚拟服务器(VMs),每个虚拟服务器都可以运行自己的操作系统和应用程序。高可用性:VMware支持高可用性(HA)功能,确保在物理服务器发生故障时,虚拟机可以自动在集群内的其他服务器上重新启动,从而保证了业务的连续性和数据的完整性。集中管理:通过vCenter Server,VMware实现了对虚拟机的集中管理。管理员可以方便地监控、配置、迁移和部署虚拟机,提高了管理效...阅读全文

BAT大牛带你深度剖析Android 十大开源框架

BAT大牛带你深度剖析Android 十大开源框架​获课:www点bcwit点top/3401/获取ZY↑↑方打开链接↑↑在Android开发领域,开源框架和库扮演着至关重要的角色,它们为开发者提供了丰富的工具和库,极大地提升了开发效率和应用质量。以下是Android平台上十个最流行的开源框架或库的深度剖析,涵盖其具体功能、应用场景、优势劣势及其对移动开发的影响,同时提供详细的技术细节和最佳实践建议。1. Retrofit具体功能: Retrofit是一个类型安全的HTTP网络请求框架,它能够将REST API轻松地转化为Java接口,简化了Android中网络请求的代码编写。应用场景: 适用于需要与服务器进行数据交互的应用场景,尤其是处理RESTful API请求时。优势:类型安全的请求:...阅读全文