互联网科技列表
-
配置docker私有仓库
创建docker私有化仓库有时候使用Docker Hub这样的公共仓库可能不方便(有时候无法访问),用户可以创建一个本地仓库供私人使用,这里使用官方提供的工具docker-registry来配置私有库
2022-06-03 镜像 仓库 私有 工具 服务 标签 阿里 目录 地址 实例 登录 运行 配置 方法 密码 存储 成功 官方 实战 容器 -
HDFS主机维护操作(笔记)
主机的维护操作主机的维护操作主要包括Active NameNode(活跃状态的名字节点) 、Standby NameNode(备用状态的名字节点) 、DataNode(数据节点) 、ResourceM
2022-06-03 节点 下线 命令 目录 状态 备用 数据 行为 进程 主机 名字 切换 管理 功能 所在 故障 资源 资源管理 笔记 -
dfs.datanode.directoryscan.throttle.limit.ms.per.
hadoop 2.7.6报错记录:2019-05-20 16:21:36,324 ERROR org.apache.hadoop.hdfs.server.datanode.DirectoryScann
2022-06-03 方案 解决方案 问题 配置 -
细品慢酌QuickTest关键视图(4)
无论是在关键字视图中添加对象、添加操作步骤,还是在关键字视图中使用循环与条件语句,编辑完成后都需要调试测试脚本,以验证测试脚本是否存在逻辑及语法错误,从而保证脚本的正确运行。QuickTest是否能够
2022-06-03 脚本 函数 断点 测试 运行 视图 关键 关键字 箭头 一行 三个 对话框 步骤 对话 按钮 菜单 如图 选择 专家 图标 -
Hadoop的MapReduce执行流程图
Hadoop的MapReduce shuffle过程,非常重要。只有熟悉整个过程才能对业务了如指掌。MapReduce执行流程输入和拆分:不属于map和reduce的主要过程,但属于整个计算框架消耗时
2022-06-03 数据 过程 文件 参数 结果 处理 格式 节点 重要 形式 用户 存储 输出 配置 信息 内存 内容 多个 大小 所在 -
hadoop单节点搭建
企业大数据来源1.企业内部日志文件数据库**用户行为数据2.企业外部爬虫第三方购买(蚂蚁数据银行)--贵阳大数据=海量数据+复杂类型的数据hadoop是由谷歌的三篇论文《mapreduce》 --》m
2022-06-03 文件 数据 用户 服务 任务 存储 管理 配置 普通 资源 主机 分布式 环境 系统 目录 防火墙 切换 调度 防火 信息 -
基于.netcore的MVC应用开发经验共享
1 起个头很多95后的程序员没有搞明白MVC,需要多练习才行。MVC实际上不是设计模式,而是架构模式/体系结构模式,体系结构是老称呼了,现在基本上都叫架构了。模型-视图-控制器 (MVC) 体系结构模
2022-06-03 数据 方法 数据库 视图 模型 控制 控制器 文件 应用 代码 参数 路由 逻辑 测试 更新 对象 输入 名称 字符 模式 -
十四、MapReduce--OutputFormat和RecordWriter抽象类
一、基本原理 reduce执行完毕之后,每个reduce都会将KV输出到一个文件中。那么KV输出到文件中时是以什么格式输出的呢?这就涉及到两个抽象类:OutputFormat和RecordWrite
2022-06-03 输出 文件 文本 格式 就是 紧凑 一行 两个 任务 分行 分隔符 原理 对象 常用 数据 方式 方法 顺序 中带 中时 -
hadoop&spark安装(下)
上一遍文章中其实最主要的就是JAVA环境变量以及hadoop环境变量的设置,这两个设置好了的话,运行hadoop基本上不会出问题。在hadoop的基础上安装spark好简单。安装Spark之前需要先安
2022-06-03 环境 集群 变量 配置 内容 节点 文件 上一 输入 成功 两个 命令 基础 就是 拷贝 文章 样子 流程 浏览器 用户 -
Postgres-XL 数据库
Postgres-XL是一个大规模并行数据库,建立在PostgreSQL 9.5之上,与PostgreSQL 9.5高度兼容。它的不同之处在于它同时支持商业智能工作负载和高容量事务写入和读取工作负载。
2022-06-03 数据 节点 事务 集群 全局 应用 配置 数据库 可用性 版本 问题 工作 一致 一致性 代码 分布式 协调员 压力 基础 是在 -
Spark SQL常见4种数据源(详细)
通用load/write方法手动指定选项Spark SQL的DataFrame接口支持多种数据源的操作。一个DataFrame可以进行RDDs方式的操作,也可以被注册为临时表。把DataFrame注册
2022-06-03 数据 文件 数据源 格式 目录 支持 类型 方式 可以通过 数据库 存储 信息 功能 方法 用户 系统 查询 编译 不同 仓库 -
HDFS 入门和基本操作
1、HDFS 是做什么的Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS,hdfs是分布式计算中数据存储管理的基础,是基于流数据模式访
2022-06-03 文件 数据 存储 客户 客户端 系统 副本 处理 命令 管理 对象 文件夹 目录 信息 就是 方法 时候 容错 服务 多个 -
cssci和核心期刊的区别
cssci和核心期刊的区别cssci是核心期刊的一种,核心期刊有很多种其中包括cssci。CSSCI即中文社会科学引文索引,由南京大学主持,也叫来源期刊目录。目前国内有7大核心期刊(或来源期刊)遴选体
2022-06-03 期刊 核心 核心期刊 来源 数据 中国 科学 目的 评价 数据库 社会科学 作用 北大 社会 中文 制作 中国人 大学 就是 引文 -
java验证码学习一
package com.sys.web.sesoion;import java.io.IOException;import java.io.PrintWriter;import javax.servl
2022-06-03 随机数 学习 验证 -
C4J私有化的小程序数据统计分析
线上流量红利逐渐消失的今天,产品的获客成本从几元,飙升到了现在的几百元,甚至上千元,流量大战悄然打响!而 "微信社会"中的小程序,凭借着离消费者一指之遥的距离,成为商家不被淘汰的制胜法宝 。2019年
2022-06-03 用户 成本 数据 渠道 产品 私有 运营 分析 体验 行为 业务 增长 迭代 程序 高性能 应用 有效 企业 架构 模块 -
安装Neo4j提示:Unable to determine the path to java.exe
安装Neo4j 压缩版时提示如图所示的错误:出现这种原因是发现系统没有安装相应的java环境。从java网站现在java开发软件:安装完jdk,这后在安装 neo4j 如图:
2022-06-03 如图 提示 原因 开发软件 环境 系统 网站 软件 错误 开发 -
Full GC问题
【现象】:应用响应慢,被监控脚本重启。【原因分析】:使用jvisualvm远程连接或直接使用命令查看GC情况,如发现应用进行的Full GC时间较长,或次数较多【解决方案】:调整JVM配置或GC方式。
2022-06-03 方式 应用 原因 原因分析 命令 情况 方案 时间 次数 现象 脚本 解决方案 分析 监控 调整 配置 问题 -
QT Model/View 六个连续冲击
Qt Model/View 学习笔记 (一)介绍Qt 4推出了一组新的item view类,它们使用model/view结构来管理数据与表示层的关系。这种结构带来的功能上的分离给了开发人员更大的弹性来
2022-06-03 数据 选择 数据项 结构 标准 函数 接口 信息 模型 不同 用户 信号 角色 功能 组件 数据结构 子类 形式 多个 方式 -
svn可以update但是无法commit解决
今天在一个老的svn项目上提交一些修改的代码,发现出现:svn: E120108: Commit failed (details follow):svn: E120108: Error running
2022-06-03 代码 项目 好用 检查 -
学习Apollo服务配置中心,与SpringBoot整合
学习Apollo服务配置中心,与SpringBoot整合通过spring-boot搭建的业务系统,可以通过Apollo提供远程的配置服务,以达到集群环境统一使用一套动态配置的目的。1.关于NameSp
2022-06-03 配置 一致 一致性 服务 可用性 系统 分布式 客户 客户端 环境 服务配置 整合 动态 容错性 就是 文件 概念 网络 阿波 容错