互联网科技列表
-
(版本定制)第15课：Spark Streaming源码解读之No Receivers彻底思考
hu本期内容：1、Kafka解密背景：目前No Receivers在企业中使用的越来越多，No Receivers具有更强的控制度，语义一致性。No Receivers是我们操作数据来源自然方式，操作
2022-06-03 数据 方式 源码 一致 一致性 方法 来源 缓存 语义 企业 内存 内容 分布式 制度 多台 好处 实际 对象 弊端 时候 -
对缓存击穿的一点思考
前言缓存（内存 or Memcached or Redis.....）在互联网项目中广泛应用，本篇博客将讨论下缓存击穿这一个话题，涵盖缓存击穿的现象、解决的思路、以及通过代码抽象方式来处理缓存击穿。什
2022-06-03 缓存 查询 代码 序列 业务 数据 模板 粒度 检查 思路 接口 方式 机制 现象 问题 集群 同步 处理 也就是 互联网 -
spring自定义泛型类中AutoWired注入为null
我在实际开发中遇到有一段公共的代码，几个方法都需要掉，但如果单独拉出来写一个方法的话，入参又不同，所以想到了用泛型。比如这是一段公共代码：//保存订单信息,需要多个方法调用OrderFilterReq
2022-06-03 代码 方法 方式 不同 信息 办法 多个 实例 实际 接口 订单 这是 拉出 尝试 开发 管理 -
利用Python调用HBASE
利用Python调用HBASE的 需要安装thrift hbase-thrift启动hbase的thrift服务：bin/hbase-daemon.sh start thrift 默认端口是9090m
2022-06-03 数据 名字 时候 环境 端口 问题 装好 同步 开发 服务 -
HQL操作日常使用命令总结
建表create table mydb.userinfo(name string,addressi string)ROW FORMAT DELIMITEDFIELDS TERMINATED BY '\
2022-06-03 数据 查询 最大 个数 动态 参数 多个 字段 常用 数量 文件 目录 程序 语句 过程 会报 分区表 可通 容错 处理 -
小编带您Volatile的详解
volatile关键字修饰的共享变量主要有两个特点：1.保证了不同线程访问的内存可见性 2.禁止重排序在说内存可见性和有序性之前，我们有必要看一下Java的内存模型(注意和JVM内存模型的区分)为什么
2022-06-03 线程 内存 主存 编带 原子 变量 保证 工作 有序 有序性 缓存 规则 指令 结果 代码 数据 处理 两个 就是 屏障 -
Spark SQL读取MySQL的dept和hive的emp表，做join和分组查询，后写到json
val jdbcDF = spark.read.format("jdbc").option("url", "jdbc:mysql://hadoop000:3306").option("dbtable"
2022-06-03 分组 查询 -
8500WN智能网卡曝光 强悍配置加上完美外形
据台湾媒体最新报道，台湾无线网卡厂商最新推出一款大功率80DBI无线网卡-横空出世8500WN集成机。售价约1180新台币(折合人民币约298元)台湾卡王是全球著名的大功率无线网卡生产厂商，2007年
2022-06-03 无线 芯片 网卡 无线网卡 大功 大功率 频段 支持 传统 传输 信号 性能 台湾 横空出世 全球 厂商 模式 安全 功能 速度 -
RobotFramework安装与简单使用
RIDE（ Robot Framework Test Data Editor）适合用于web的自动化测试。一、 相关环境的安装首先搭建python环境，到http://www.python.org下载
2022-06-03 命令 环境 管理 关键 关键字 变量 地址 套件 截图 文件 时候 根目录 版本 目录 程式 管理员 身份 中加 别为 建好 -
Spark笔记整理（一）：spark单机安装部署、分布式集群与HA安装部署+spark源码编译
[TOC]spark单机安装部署1.安装scala解压：tar -zxvf soft/scala-2.10.5.tgz -C app/重命名：mv scala-2.10.5/ scala配置到环境变量
2022-06-03 配置 进程 节点 集群 编译 文件 目录 变量 机器 环境 端口 单机 源码 成功 内容 手动 状态 用量 程序 面的 -
Hadoop 实践（三） hadoop dfs 命令
hadoop dfs 命令：OverviewcatchgrpchmodchowncopyFromLocalcopyToLocalcountcpdudusexpungegetgetmergelslsrm
2022-06-03 文件 命令 实践 -
centos hadoop安装及配置
1） 配置jdk。2） 配置ssh。3） 配置Hadoop相关文件。配置jdk下载 jdk1.8.XXXXXXX.tar.gz解压 tar -zxvf jdk1.8.XXXXXX.tar.gzvim
2022-06-03 配置 密码 文件 登陆 -
Hadoop之机架感知
背景当没有配置机架信息时，所有的机器hadoop都默认在同一个默认的机架下，名为"/default-rack"，这种情况下，任何一台 datanode机器，不管物理上是否属于同一个机架，都会被认为是在
2022-06-03 机架 机器 之间 数据 集群 网络 选择 配置 两个 情况 副本 脚本 节点 信息 不同 地址 层次 流量 三个 所在 -
UIAutomator环境配置
1、JDK配置JDK必须是1.6以上的版本在系统变量新建:变量名:JAVA_HOME变量值:D:\java\jdk1.7.0_79编辑系统变量path在尾端加入两个路径:(记住每个路径用分号分隔)%J
2022-06-03 变量 系统 路径 量值 配置 分号 两个 成功 信息 版本 目录 而定 输入 环境 -
银行业大数据量清单报表案例
【摘要】银行数据查询业务中，经常会碰到数据量很大的清单报表。由于用户输入的查询条件可能很宽泛，因此会从数据库中查出几百上千万甚至过亿行的记录，比如银行流水记录；为了避免内存溢出，一般都会使用关系型数据
2022-06-03 数据 数据库 银行 查询 报表 清单 复杂 宽泛 很大 不尽人意 上千 业务 人意 内存 场景 复杂度 常会 底层 情况 摘要 -
大数据学习实践总结(2)--环境搭建，JAVA引导，HADOOP搭建
PS:后续的文章会把我实践的内容分解成为一个个的小模块，方便大家的学习，交流。文未我也会附上相关的代码。一起加油！ 学有三年的大数据原理，一直没有实践过。最近准备离职，正好把自己所学的大数据内容全部实
2022-06-03 实践 就是 原理 命令 数据 学习 个人 内容 环境 文件 系统 网段 虚机 还是 编程 很大 最大 代码 参数 基础 -
lr 远程控制报Vuser compilation failed.
lr 使用本地压力机执行场景没有问题，连接远程机器，执行场景有error ，报Vuser compilation failed.解决：在contrler添加压力机时：设置上临时目录
2022-06-03 压力 压力机 场景 机器 目录 问题 远程控制 控制 -
adb devices指令实例讲解
在讲这个指令之前，我首先启动了一个名称为"Galaxy_Nexus_4.4.2"的手机模拟器（有时我们也管其叫安卓虚拟设备），并且通过USB数据线将我的手机设备和PC进行了连接，而后我应用"Andro
2022-06-03 设备 模拟器 状态 信息 手机 物理 指令 序列 序列号 服务器 服务 内容 就是 屏幕 类型 系统 如图 测试 实例 不同 -
OBD车联网综合管理解决方案
汽车智能管理系统，适配覆盖汽油车，柴油车，电动汽车，油电混合车。智能车辆管理系统治融合车联网、4G通讯、OBD总线控制、驾驶行为记录、GPS定位、一键启动等技术，可适用于政企车队、汽车租赁、汽车金融、
2022-06-03 汽车 控制 手机 智能 车辆 钥匙 一键 管理 凉爽 后备箱 总线 时间 柴油 柴油车 汽油 系统 车门 轨迹 关锁 电动 -
storm的基本概念安装测试
strom简介官方网址：http://storm.apache.org/是一个免费，开源的分布式实时计算系统，使用它可以轻松实现数据流的实时处理，Strom很简单，可以用任何编程语言storm用例：实
2022-06-03 节点 处理 机器 进程 运行 任务 数据 集群 目录 方法 分配 工作 配置 之间 实时 不断 命令 数目 状态 程序