互联网科技列表
-
MapReduce的思想
项目实战案例:搜狗日志查询分析数据:一、电商大数据平台整体架构1、大数据(Hadoop、Spark、Hive)都是一种数据仓库的实现方式核心问题:数据存储、数据计算什么是数据仓库?传统的解决大数据的方
2022-06-03 数据 分析 查询 资料 开发 仓库 任务 日志 架构 模型 处理 体系 全套 学习资料 平台 整体 方式 瀑布 视频 语言 -
Spark bind on port 0. Attempting port 1 问题解决
Linux 下运行spark local bind on port 0. Attempting port 1 问题2016-11-01 16:04:56 [org.apache.spark.util.
2022-06-03 问题 成功 主机 代码 原因 地址 实际 情况 用户 用户名 端口 中加 运行 -
大数据需要学习什么?
大数据需要学习什么?很多人问过我这个问题。每一次回答完都觉得自己讲得太片面了,总是没有一个合适的契机去好好总结这些内容,直到开始写这篇东西。大数据是近五年兴起的行业,发展迅速,很多技术经过这些年的迭代
2022-06-03 数据 分布式 存储 学习 开发 东西 怎么办 问题 系统 内容 组件 语言 服务器 项目 应用 服务 不断 数据库 文章 场景 -
java.lang.outofmemoryerror:java heap space
堆空间被占满:现象:明确的出现了报错,java.lang.outofmemoryerror:java heap space解决:1. 先查看参数,vi /tomcat/bin/catalina.sh,
2022-06-03 内存 最大 大小 最大值 参数 年轻 最小 较大 一致 代码 命令 官方 实际 建议 性能 现象 空间 系统 影响 推荐 -
数据的保存和读取
1数据的保存btn_ok.setOnClickListener(new OnClickListener() {@Overridepublic void onClick(View v) {String
2022-06-03 数据 成功 字符 字符串 文档 -
56. Netty源代码分析-服务器初始化 NioEventLoopGroup实例化
一. 代码下载Netty代码下载和编译参考前一篇Netty文章https://blog.51cto.com/483181/2112163二. 服务器代码分析2.1 服务器代码编写一般Netty服务器端
2022-06-03 代码 实例 方法 函数 对象 数组 类型 线程 分析 服务器 服务 也就是 参数 算法 源代码 不同 代码下载 名字 大小 数目 -
Mac os /linux vi/vim永久显示行号开启高亮模式
临时显示:进入vi编辑器,输入命令:set number //下次在进入vi 无法显示行号:set nonumber //本次vi关闭行号显示vi 每次修改后推荐使用命令:source ~/.bash
2022-06-03 推荐 测试 接口 行号 命令 步骤 二维 二维码 模式 永久 个人 乱码 参数 基础 感想 效果 数据 数据库 文章 文章精选 -
jmeter调用时如何改变已定的变量名称
在jmeter文件调用的时候,遇到一个问题,被调用的文件(称为basic文件吧)里面定的变量名称是code,在调用basic文件时,要先在数据库中查出code,再做为参数传入,数据库查询后,变量调用时
2022-06-03 文件 名称 变量 参数 情况 数据 数据库 问题 不同 时候 查询 -
kafka kerberos 认证访问与非认证访问共存下的ACL问题
在一个正在运行的kafka集群中添加kerberos认证和ACL权限控制,同时保证以前所有的producer\consumer服务不中断解决方式: 使kafka集群监听两个端口,一个为无认证连接,另一
2022-06-03 认证 集群 方式 权限 用户 配置 时候 用户名 错误 问题 两个 原因 同时 就是 数据 方法 日志 正在 端口 级别 -
Spark笔记整理(四):Spark RDD算子实战
[TOC]Spark算子概述RDD:弹性分布式数据集,是一种特殊集合、支持多种来源、有容错机制、可以被缓存、支持并行操作,一个RDD代表多个分区里的数据集。RDD有两种操作算子:Transformat
2022-06-03 数据 元素 函数 算子 结果 代码 文件 测试 输出 系统 相同 参数 面的 就是 两个 多个 容器 数组 程序 类型 -
大数据分布式内存
一.创建目录1.mkdir -p /home/mongodb/data/master2.mkdir -p /home/mongodb/data/slaver3.mkdir -p /home/mongo
2022-06-03 文件 配置 代码 命令 实战 工程 核心 目录 部分 内存 分布式 数据 -
sqoop使用手册--mysql配置
首先在安装了mysql数据库的那台虚拟机上面执行mysql -u root -p进入sql的密码为空create database stock;grant all privileges on . to
2022-06-03 数据 驱动 接下来 就是 拷贝 数据库 权限 目录 中创 中将 主机 之间 可在 命令 密码 教材 系统 赋权 集群 来安 -
xmpp+openfire+spark+centos 安装
1、环境准备centos6.5x64 ,2、卸载系统自带的jdkrpm -qa|grep jdkrpm -e --nodeps java*3、安装jdkrpm -ivh jdk-8u66-linux-
2022-06-03 密码 成功 环境 用户 服务 登录 输入 选择 信息 内容 变量 地址 域名 客户 客户端 数据 数据库 步骤 版本 界面 -
Spark集群硬件配置推荐
Spark集群硬件配置推荐计算与存储:大多数Spark作业可能需要从外部存储系统(例如 :Cassandra、Hadoop文件系统或HBase)读取输入数据,所以要让Spark计算引擎尽可能靠近数据持
2022-06-03 内存 配置 数据 磁盘 存储 集群 性能 节点 推荐 网络 变量 多个 容量 系统 运行 地址 应用程序 建议 机器 瓶颈 -
数据为王,大数据能为企业带来什么?
据了解,互联网上每一秒钟传输的视频,需要花费一个人5年的时间才能看完。可以说,用"海量、爆炸性增长"来形容大数据,已经不是什么新鲜事了。 大数据已成为全球IT支出的新增长点,这块不断增大的蛋糕开始吸引
2022-06-03 数据 企业 人才 技术 事物 公司 市场 越来越 越来 分析 营销 新鲜 精准 美好 追根溯源 重中之重 不断 作用 决定性 前景 -
Spark学习之路---Spark核心概念
Spark核心概念简介一个Spark应用都由驱动器程序发起集群上的各种并发操作,一个驱动器程序一般包含多个执行器节点,驱动器程序通过一个SaprkContext对象访问saprk。RDD(弹性分布式数
2022-06-03 程序 驱动器 驱动 分布式 核心 概念 元素 函数 多个 对象 弹性 数据 简介 节点 集群 执行器 应用 支持 行动 之路 -
Easy Scheduler 1.0.3 发布,分布式工作流任务调度系统
Easy Scheduler Release 1.0.3Easy Scheduler 1.0.3是1.x系列中的第四个版本。新特性:[EasyScheduler-254] 流程定义删除和批量删除[Ea
2022-06-03 支持 任务 流程 工作流 工作 调度 在线 统计 系统 参数 数据 项目 运行 伙伴 全局 实例 文件 状态 租户 资源 -
python全局变量-局部变量用法和区别
对于很多初学的同学,对全局和局部变量容易混淆,看看下面给大家的讲解相信都应该明白两者的区别了。定义:全局变量:在模块内、在所有函数的外面、在class外面局部变量:在函数内、在class的方法内下面来
2022-06-03 变量 全局 函数 局部 方法 运行 结果 肯定 例子 先声 全都 同学 地方 是在 模块 第一次 量值 问题 明用 -
播放器技术分享(2):缓冲区管理
搞音视频开发好些年,分享过许多博客文章,比如:前几年发布的《FFmpeg Tips》系列,《Android 音频开发》系列,《直播疑难杂症排查》系列等等。最近想把多年来开发和优化播放器的经验也分享出来
2022-06-03 缓冲 缓冲区 数据 播放器 网络 线程 技术 主动 作用 视频 频繁 场景 文章 抵抗 管理 会主 内存 时候 模块 速度 -
WHQL 认证服务过程
WHQL是Windows Hardware Quality Labs的简称,意思为"Windows操作系统硬件质量实验室",其微软徽标认证计划( Microsoft Logo Program )使得各
2022-06-03 微软 认证 系统 证书 软件 驱动 产品 代码 企业 测试 数字 律师 数字证书 硬件 操作系统 帐户 徽标 执照 报告 方式