程序员经验分享-hwhale

尚硅谷电影推荐系统搭建遇到的问题及知识

2023-11-15

尚硅谷电影推荐系统搭建遇到的问题及知识

腾讯云Superset问题（需更新数据库用户）

登录master节点： cd /usr/local/service/superset/bin export
PYTHONPATH=/usr/local/service/superset/conf ./superset db upgrade
./superset fab create-admin ./superset init 这样试试

./mongod的时候提示找不到共享库文件libcrypto.so.10

linux下安装jiava
你还在ping吗？7种进阶方法让你快速测试端口连通性
linux 内存清理/释放命令
Linux - 设置帮助文件为中文
3种方法更改Linux系统的主机名(hostname)
mysql开启tab自动补全功能

win终端Terminal常用快捷键

linux系统中root用户被提示：Operation not permitted
使用chattr 修改前使用chattr 修改后

Hadoop

Shuffle是什么？

在Hadoop中数据从Map阶段传递给Reduce阶段的过程就叫Shuffle，Shuffle机制是整个MapReduce框架中最核心的部分。

ES问题

启动前配置文件中的 network.host 属性设置为 0.0.0.0 后才能启动在这里插入图片描述

Zookeeper

如何彻底删除Kafka中的topic (marked for deletion)
彻底删除Kafka中的topic

Flume ng

解压.tar.gz出错gzip: stdin: not in gzip format tar: /Child returned status 1 tar: Error is not recoverable: exiting now

Kafka

Kafka配置说明-server.properties

Azkaban

compileTestJava 错误问题

Execution failed for task ‘:azkaban-exec-server:compileTestJava’.

> Compilation failed with exit code 1; see the compiler error output
for details.

-x test表示跳过测试

编译成功
在这里插入图片描述

其他

使用netstat、lsof查看端口占用情况
netstat
netstat用来查看系统当前系统网络状态信息，包括端口，连接情况等，常用方式如下：

netstat -atunlp,各参数含义如下:

-t : 指明显示TCP端口
-u : 指明显示UDP端口
-l : 仅显示监听套接字(LISTEN状态的套接字)
-p : 显示进程标识符和程序名称，每一个套接字/端口都属于一个程序
-n : 不进行DNS解析
-a 显示所有连接的端口
执行后得表格一目了然，就不做截图了，当然，在众多表目中找一个特定得，肯定不那么顺手，一般该指令会遇grep配合使用，比如查找端口22,就用netstat -tunlp | grep 22 或者干脆netstat -an | grep 22就可以了，查看其它端口类似，当然也可以通过端口状态查找即netstat -anp | grep TIME_WAIT，即只会显示含有TIME_WAIT字符串的条目

lsof
lsof的作用是列出当前系统打开文件(list open files)，不过通过-i参数也能查看端口的连接情况，-i后跟冒号端口可以查看指定端口信息，直接-i是系统当前所有打开的端口

lsof -i:22 #查看22端口连接情况，默认为sshd端口 如下图：

查看连接数

可以看到当前通过端口22连接到机器的一共有4个(主机名和ip已打码)，通过该命令就能清楚知道当前端口状态

本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系:hwhale#tublm.com(使用前将#替换为@)

Linux环境搭建

尚硅谷电影推荐系统搭建遇到的问题及知识 的相关文章

  • windows下的C++ socket服务器（2）

    博客园 闪存 首页 新随笔 联系 管理 订阅 随笔 16 文章 0 评论 33 windows下的C socket服务器二 int make server socket int port 1 void handleAccept int so

  • Windows 使用第三方工具curl 模拟GET 请求

    Windows环境之Curl下载地址 https curl se windows Curl 基本用法 1 访问百度网页 并将网页源码保存到本地 curl o news txt www baidu com 2 访问百度网页 并显示请求头部信息

  • 算法：滑动窗口解决连续区间子数组问题

    文章目录 实现原理 实现思路 典型例题 长度最小的子数组 无重复字符的最小字串 最大连续1的个数III 将x减到0的最小操作 水果成篮 找到字符串中所有字母异位词 哈希表比较优化 对哈希表内元素比较的优化 总结 本篇积累的是滑动窗口的问题

  • 今天来尝试一下docker

    1 先在服务器上下载docker 这儿使用官方安装脚本自动安装 阿里 curl fsSL https get docker com bash s docker mirror aliyun 我这儿还查看了一下版本 这个就安装成功了 2 环境配

  • Python3.6+RobotFramework自动化测试框架环境搭建-学习笔记

    Python3 6 RobotFramework自动化测试框架环境搭建 学习笔记 一 Appium服务端 1 JDK安装 1 1 推荐JDK版本 1 2 下载地址 1 3 下载方法 1 4 安装方法 2 安卓SDK 2 1 下载方法 2 3

  • 【学习记录】STM32利用定时器中断实现定时闪烁指示灯

    任务 定时闪烁指示灯 任务目标 掌握 CubeMX 软件配置定时器实现定时功能的方法 任务内容 控制开发板上的指示灯LED每隔1s闪烁 任务实现 使用的STM32芯片是STM32F407ZET6 第一步 设置高速时钟 设置LED 第二步 配

  • java使用反射修改注解参数值内容

    方法一 该方法不太灵活 过程 使用反射获取指定method上方的指定注解 拿到该注解的String类型的参数值 使用反射修改该String对象内字符数组的地址 import java lang annotation import java

  • mysql查询json字段中value值，mysql查询字段不包含某个字符串

    工作中遇到问题 需要查询表中某个字段不包含某个指定字符串的问题 以及查询json数据中某个key对应的value值 问题1 查询 user id 不包含 字符的数据 数据如下 id user id 51 jingi ctfo com 52

  • 逻辑思维三大定律

    逻辑思维三大定律 同一律 矛盾律 排中律 同一律 A 是 A 前后思维中 概念要同一 白马非马论违反同一律 商家的买一赠一 前后两个一不是同一个概念 违反同一律 同一律是逻辑思维的基础 矛盾律 A 是 B A 不是B 这两句话矛盾 对同一事

  • c盘那些文件可以删除

    c盘那些文件可以删除 http www xitongzhijia net xtjc 20150507 47691 html

  • OSPF笔记（一）：OSPF基本特点、自治系统、区域、RID冲突

    一 OSPF基本特点 1 1 支持无类域间路由 CIDR 1 2 无环路 1 区域内 100 无环 2 区域间 不一定无环 1 3 收敛速度快 1 4 使用组播收发协议数据 224 0 0 5 224 0 0 6 1 5 支持多条等价路由

  • MySQL数据库 学习笔记 零基础入门 面试 整理

    一 MySQL基础篇 1 数据库技术的基本概念和方法 1 1 数据库基本概念 1 数据 数据 Data 指对客观事物进行描述并可以鉴别的符号 这些符号是可识别的 抽象的 不仅仅指狭义上的数字 而是有多种表现形式 字母 文字 文本 图形 音频

  • 【笔试强训选择题】Day32.习题（错题）解析

    作者简介 大家好 我是未央 博客首页 未央 303 系列专栏 笔试强训选择题 每日一句 人的一生 可以有所作为的时机只有一次 那就是现在 文章目录 前言 一 Day32习题 错题 解析 总结 前言 今天是笔试强训第32天 一 Day32习题

随机推荐

  • React Native API

    Dimensions 面对现代手机五花八门的屏占比 不知道宽度的情况下可以使用 import Dimensions from react native const DimenStyle Dimensions get window 屏幕宽度

  • 深度学习研究思路

    研究思路 一 数字图像 基础研究 图像的文件格式 图片有常见的bmp jpg png 等 三种图像之间的差别 位图和矢量图区别 矢量图又叫向量图 是用一系列计算机指令来描述和记录一幅图 一幅图可以解为一系列由点 线 面等到组成的子图 它所记

  • Vue ECharts y轴设置固定分段 + makerline设置为不同的样式作为区分 - 附完整示例

    echarts 一个基于 JavaScript 的开源可视化图表库 官方文档 Apache ECharts Apache EChartsApache ECharts 一款基于JavaScript的数据可视化图表库 提供直观 生动 可交互 可

  • JS_随机选取指定数组中的颜色值

    思路 定义需要的颜色 生成已定数组长度范围内的随机数 随机数与i对比 let colorList 1882f8 f95757 FFBF11 11BBEC FB7C26 46BE1A let colorMath Math floor Math

  • 使用命令行编译和运行java程序

    前言 现在很多IDE都可以自动编译和运行java程序了 但是我觉得还是有必要学会用命令行编译和运行java程序 这样就能更好理解java程序运行的机制 为了不依赖IDE 我用记事本作为编辑器 1 安装JDK 安装过程我就不仔细讲了 网上很多

  • C++ 中 static 静态对象的使用总结

    背景 全局 静态数据区主要用于存放全局变量和静态变量 在程序启动时 全局 静态数据已经分配了存储空间 全局 静态数据区中的数据在程序结束后由操作系统释放 未初始化的静态变量会被程序自动初始化为 0 静态局部变量在程序执行到该对象的声明处时被

  • 回文串(algorithm)

    题目 回文子串的个数 中心扩展 给你一个字符串 s 请你统计并返回这个字符串中 回文子串 的数目 回文字符串 是正着读和倒过来读一样的字符串 子字符串 是字符串中的由连续字符组成的一个序列 具有不同开始位置或结束位置的子串 即使是由相同的字

  • Nacos简单使用及相关配置注意点

    1 Nacos安装 本文采用 docker 方式进行安装 docker 安装较为简单便捷 自己学习推荐采用此方式进行 docker 基本命令就不再赘述了 此处附上主要命令 此处nacos安装版本采用2 0 3 拉取 2 0 3 版本的 na

  • 【极验黑科技】文生图大模型在极验人机对抗领域的应用

    自极验于2013年开创性地提出新一代的智能验证码概念开始 就始终在人机对抗领域不停地升级迭代 极验全球首创的 行为式验证 在十多年来 为全球近40万的开发者使用 如小米 新浪微博 东方航空 国家工商局等企业携手极验验证码进行升级 使得现在传

  • Python数据分析之对一个游戏的运营情况进行分析

    Python数据分析之对一个游戏的运营情况进行分析 文章目录 Python数据分析之对一个游戏的运营情况进行分析 一 分析目标 二 数据介绍 三 结论 1 新增用户分析 2 玩家活跃度分析 3 玩家付费情况分析 4 玩家游戏习惯分析 四 详

  • 稳健回归-鲁棒回归

    稳健回归 稳健回归 robust regression 是统计学稳健估计中的一种方法 其主要思路是将对异常值十分敏感的经典最小二乘回归中的目标函数进行修改 经典最小二乘回归以使误差平方和达到最小为其目标函数 稳健回归 robust regr

  • 如何将项目提交到别人的仓库

    大纲 1 在gitee中克隆 clone 别人仓库的代码 首先 进入别人的仓库 点击 克隆 下载 2 在你存放项目的文件夹下克隆你刚刚复制的代码 右键点击Git Clone即可 点击OK 就开始克隆了 克隆成功之后 文件上会出现一个绿色的

  • 了解预训练以及在自编码器中的应用

    预训练是一种机器学习技术 在这种技术中 模型被训练以在标注数据少或不存在的情况下自动从未标记的数据中学习 预训练可以为模型提供先验知识 使其能够在特定任务上更好地泛化 预训练过程通常分为两个阶段 无监督预训练和有监督微调 无监督预训练 模型

  • unity屏幕后处理Bloom优化(光晕）

    前言 前几天看米哈游的技术总监说 崩坏3 的bloom效果的实现是 1 高亮像素过滤 2 向下采样 降采样 3 向上采样 4 将模糊后的图像和原图像混合 经过上面的步骤 能高效的实现bloom效果 常规的bloom是使用 提取高亮 卷积滤波

  • [专利与论文-20]：江苏省南京市2022年电子信息申报操作指南

    1 学时认定 每年公需课不能低于30学时 2 流程

  • elastic search中易并行聚合算法，三角选择原则，近似聚合算法浅析

    1 有些聚合分析的算法 是很容易就可以并行的 比如说max 有些聚合分析的算法 是不好并行的 比如说 count distinct 并不是说 在每个node上 直接就出一些distinct value 就可以的 因为数据可能会很多 es会采

  • DMX512协议是什么 DMX512数字灯光控制系统介绍

    基于DMX512控制协议进行调光控制的灯光系统叫做数字灯光系统 目前 包括电脑灯在内的各种舞台效果灯 调光控制器 控制台 换色器 电动吊杆等各种舞台灯光设备 以其对DMX512协议的全面支持 已全面实现调光控制的数字化 并在此基础上 逐渐趋

  • 74HC595 使用记录 国产UTC品牌

    芯片型号 U74HC595A 数据手册时序图 实际测试时序图 通道1 595的14脚 通道2 595 的11脚 通道3 595 的9脚 结论 U74HC595A 国产 UTC品牌 数据手册与实测数据不一致

  • CentOS 7.9 64位 SCC版安装FastDfs和配置Nginx

    最近练习的项目中需要用到FastDfs 和Nginx 这里记录一下安装和配置过程 个人使用部署过程遇到了很多的坑 准备把过程记下来不然忘了 首先 购买 试用阿里云 CentOS 7 9 64位Scc版系统 进入远程桌面 由于项目较老 所以我

  • 尚硅谷电影推荐系统搭建遇到的问题及知识

    尚硅谷电影推荐系统搭建遇到的问题及知识 Hadoop ES问题 Zookeeper Flume ng Kafka Azkaban 其他 腾讯云Superset问题 需更新数据库用户 登录master节点 cd usr local servi

热门标签