Python
Java
PHP
IOS
Android
Nodejs
JavaScript
Html5
Windows
Ubuntu
Linux
用分布式锁和redis实现原子性递增,解决编号重复问题
import com baomidou mybatisplus core conditions query QueryWrapper import lombok extern slf4j Slf4j import org apache co
Maven
Redis
分布式
数据库
Windows下快速启动Kafka以及三种发送消息的方式
目录 一 下载Kafka 二 启动kafka 2 1 启动kafka前得先启动zk 2 2 启动kafka 三 操作Kafka 3 1 创建 Kafka 主题 Topic 3 2 将信息写入主题 Topic 3 3 读取信息 四 Java实
kafka
分布式
Java
(一)TiDB简介
TiDB是PingCAP公司自主设计 研发的开放源分布式关系型数据库 NewSQL 是一个款同时支持在线事务处理与在线分析处理 Hybird Transactional and Analytical Processing HTAP 的融合型
TiDB技术
数据库
分布式
mysql
分布式.数据库架构(Mysql 就这么点东西,分库分表读写分离集群演化)
缘起 讲个创业故事 某一天老总想做一个HR的Saas系统 其中员工信息表 但不同员工信息表有一部分是相同的 也有一部分不同的 我们就把不同的放在一个json字段 Mysql 8 0以后支持 中 Dao用的Mybatis 以及MybatisG
分布式
数据库架构
数据库
超级无敌详细使用ubuntu搭建hadoop完全分布式集群
一 软件准备 安装VMware 下载ubuntu镜像 阿里源ubuntu下载地址 选择自己适合的版本 以下我使用的是18 04 server版就是没有桌面的 安装桌面版如果自己电脑配置不行的话启动集群容易卡死 说明一下哈就是桌面版和服务器版
Java
Ubuntu
Hadoop
分布式
深度学习
HADOOP调优与运维问题汇总
一 Hadoop调优 1 调整操作系统打开文件描述符的上限 通过命令 ulimit a 可以看到所有系统资源参数 这里面需要重点设置的是 open files 和 max user processes 其它可以酌情设置 要永久设置资源参数
Hadoop Hive Spark 大数据安全
Hadoop
大数据
分布式
学习笔记-架构的演进之分布式架构-服务发现-2月day19
文章目录 服务发现 Service Discovery 服务发现要解决注册 维护和发现三大功能问题 服务的注册 Service Registration 服务的维护 Service Maintaining 服务的发现 Service Dis
分布式
架构
Ray框架下pytorch模型训练(图像分类)
最近学习Ray框架进行分布式模型训练 Ray框架下的pytorch模型与普通的pytorch框架还是有一定区别 记录一下留做笔记 这里没有用官网文档给的数据集 在上一篇写了如何加载自己的pytorch数据集 在定义训练模型时 在TorchT
Pytorch
深度学习
分类
分布式
分布式接口幂等性设计实现
面对分布式架构和微服务复杂的系统架构和网络超时服务器异常等带来的系统稳定性问题 分布式接口的幂等性设计显得尤为重要 本文简要介绍了几种分布式接口幂等性设计实现 包括Token去重机制 乐观锁机制 数据库主键和状态机实现等 以加深理解 1 分
分布式系列
分布式
微服务
HBASE Phoenix异步创建索引报错
hbase phoenix异步创建索引报错 使用 hbase phoenix异步创建索引报错 错误信息如下 Error ERROR 102 08001 Malformed connection url ERROR 102 08001 ERR
HBase高手之路
Hbase
大数据
分布式
【大数据哔哔集20210110】后起之秀ClickHouse的优缺点和核心特性
点击上方蓝色字体 选择 设为星标 回复 资源 获取更多惊喜 ClickHouse is a column oriented database management system DBMS for online analytical proc
数据库
分布式
Java
mysql
大数据
Redis实现分布式锁的7种方案,及正确使用姿势!
redis学习笔记 7种方案前言 日常开发中 秒杀下单 抢红包等等业务场景 都需要用到分布式锁 而Redis非常适合作为分布式锁使用 本文将分七个方案展开 跟大家探讨Redis分布式锁的正确使用方式 如果有不正确的地方 欢迎大家指出哈 一起
Redis
分布式
数据库
《消息队列高手课》如何利用事务消息实现分布式事务?
一说起事务 你可能自然会联想到数据库 的确 我们日常使用事务的场景 绝大部分都是在操作数据库的时候 像 MySQL Oracle 这些主流的关系型数据库 也都提供了完整的事务实现 那消息队列为什么也需要事务呢 其实很多场景下 我们 发消息
MQ
分布式
Java
kafka
[gulimall]订单及库存
1 提交订单 查询商品信息 查询收货地址 查询库存信息 计算价格 2 下订单 1 验证令牌防止重复提交 获取当前用户登录的信息 通过lua脚本验证令牌和删除令牌 2 验证价格 从数据库查询最新的商品价格 和订单的金额对比 如果不一致则返回错
gulimall
rabbitmq
Java
分布式
Redis分布式锁原理及go的实现
业务背景 后台定时任务刷新Redis的数据到数据库中 有多台机器开启了此定时同步的任务 但是需要其中一台工作 其他的作为备用 提高可用性 使用Redis分布式锁进行限制 拿到锁的机器去执行具体业务 拿不到锁的继续轮询 分布式锁原理 分布式锁
Redis
数据库
分布式
Golang
kafka消费者模式
一 单线程消费者模式 package nj zb kb23 kafka import org apache kafka clients consumer ConsumerConfig import org apache kafka clie
kafka
LINQ
分布式
Docker安装RabbitMQ
安装Rabbitmq 1 使用docker查询rabbitmq的镜像 docker search rabbitmq 2 安装镜像 安装name为rabbitmq的这里是直接安装最新的 如果需要安装其他版本在rabbitmq后面跟上版本号即可
rabbitmq
Docker
分布式
Spark大数据分与实践笔记(第七章 Spark Streaming实时计算框架-01)
第七章 Spark Streaming实时计算框架 近年来 在Web应用 网络监控 传感监测 电信金融 生产制造等领域 增强了对数据实时处理的需求 而Spark中的Spark Streaming实时计算框架就是为了实现对数据实时处理的需求而
大数据linuxspark
spark
大数据
分布式
新引擎HeatWave将MySQL查询性能提升400倍
参考资料 https www oracle com a ocom docs mysql heatwave technical brief pdf 前言 我刚去MySQL官方文档查个函数 顺便发现一个新东西 HeatWave 看起来很厉害的样
数据技术
mysql
数据库
大数据
分布式
Understanding and Detecting Software Upgrade Failures in Distributed Systems
分布式系统中的升级故障 Tips 摘要 介绍 方法论 升级故障的严重程度 升级故障的根本原因 升级故障的触发因素 测试和检测升级故障 未来研究方向 相关工作和总结 后记 Tips 作者主页 论文下载地址 摘要 升级是破坏分布式系统可用性的不
论文阅读
分布式
系统架构
«
1 ...
46
47
48
49
50
51
52
...57
»