互联网科技列表
-
SQL 难点解决：直观分组
1、 对位分组示例 1：按顺序分别列出使用 Chinese、English、French 作为官方语言的国家数量MySQL8:with t(name,ord) as (select 'Chinese'
2022-06-03 数量 分组 城市 示例 相同 字符 字符集 语言 最大 国家 地区 奥运 条件 顺序 不同 官方 最长 位置 信息 总成 -
十一、MapReduce--自定义Input输入
在"MapReduce--input之输入原理"中说到实现定义输入的方法，其实就是继承InputFormat以及 RecordReader实现其中的方法。下面例子讲解操作。1、需求将多个文件合并成一个
2022-06-03 文件 输入 内容 数据 方法 标志 输出 例子 原理 多个 就是 所在 源码 系统 缓冲区 路径 需求 中包 中通 并成 -
什么是大数据开放
大数据的价值评估，需要从社会效益、企业效益、个人效益和产品效益来综合评价。比如，金融数据和电商数据碰撞到一起，就产生了像小额贷款那样的互联网金融；电信数据和政府数据相遇，可以产生人口统计学方面的价值，
2022-06-03 数据 开放 价值 企业 信息 平台 效益 重要 基础 政府 金融 科研 能力 电商 处理 建设 明显 主动 一方 两面 -
Storm笔记整理（四）：Storm核心概念与验证——并行度与流式分组
[TOC]Storm核心概念之并行度Work1个worker进程执行的是1个topology的子集（注：不会出现1个worker为多个topology服务）。1个worker进程会启动1个或多个exe
2022-06-03 数据 线程 组件 交易额 商品 交易 商城 网站 时间 订单 金额 模式 方法 对象 分组 集群 配置 数字 进程 处理 -
在Hive中如何实现数据分区
Hive中的分区就是分目录，把一个大的数据集根据业务需要分割成更小的数据集。那么在Hive中如何进行数据分区呢？分区时应该注意什么样的问题呢？它的分区数如何进行限制呢？一、Hive only：加载分区
2022-06-03 数据 动态 目录 最大 文件 查询 命令 子目 子目录 就是 时候 问题 限制 不同 不错 有效 重要 上千 业务 两个 -
python笔记-模块
模块是一段代码，以.py结束的文件引入：import math，放在脚本的顶端调用函数:模块名.函数名导入模块中的一部分from modname import name1[, name2[, ...
2022-06-03 模块 函数 代码 文件 脚本 顶端 笔记 -
扩展Spring Data QBE实现动态范围查询
Spring Data JPA提供了Query by Example (QBE) 查询技术，实现了动态条件查询，不必再写烦琐的条件判断。但QBE不支持范围查询，本文结合QBE和Specificatio
2022-06-03 查询 范围 动态 代码 条件 支持 烦琐 地址 基础 实例 技术 接口 源码 示例 结构 云飞 私有 -
VBS Exit
ExitTest -退出整个TEST。ExitAction - 退出当前操作，无论其循环属性如何。ExitActionIteration - 退出操作的当前循环。ExitRun - 退出测试，无论其循
2022-06-03 语句 循环 位置 控制权 过程 控制 所在 属性 方法 上一 全局 测试 -
HDFS学习小结(Hadoop2.xx版本)v1.2
hadoop2.xx 集群搭建：http://bigtrash.blog.51cto.com/8966424/18304231.HDFS（Hadoop Distributed File System）
2022-06-03 文件 副本 数据 存储 节点 安全 信息 内存 状态 集群 管理 备份 时间 目录 系统 升级 位置 参数 报告 机制 -
Kafka-2.11学习笔记（二）Shell脚本介绍
鲁春利的工作笔记，谁说程序员不能有文艺范？Kafka主要的shell脚本有[hadoop@nnode kafka0.8.2.1]$ ll总计 80-rwxr-xr-x 1 hadoop hadoop
2022-06-03 参数 信息 脚本 配置 消息 目录 路径 参考 帮助 数据 数目 环境 节点 存储 笔记 三个 两个 个数 可以通过 命令 -
基于Storm流计算天猫双十一作战室项目实战（Storm Kafka HBase )
基于Storm流计算天猫双十一作战室项目实战（Storm Kafka HBase Highchats）网盘地址：https://pan.baidu.com/s/18Hd94BmSDGSeZRRA-MD
2022-06-03 开发 项目 企业 个人 图表 地址 学员 平台 技术 经验 项目开发 实战 陡直 实际 架构 环境 备用 实践 设计 作战室 -
管理使用Greenplum集群
1. 管理使用Greenplum集群1.1 启动Greenplum数据库$ gpstart -a1.2 对于要求重启数据库生效$ gpstop -r1.3 仅重新载入更改配置文件生效$ gpstop
2022-06-03 数据 数据库 模式 级别 信息 统计 日志 用户 目录 配置 管理 不同 有效 垃圾 客户 客户端 数值 服务器 状态 空间 -
安装Hadoop2.7.3
1.解压并移动到相应目录，我习惯将软件放到/opt目录下，命令如下：tar -zxvf hadoop-2.7.3.tar.gzmv hadoop-2.7.3 /opt2.修改/etc/profile3
2022-06-03 命令 机器 目录 成功 文件 文件夹 格式 节点 软件 过程 集群 移动 -
spring-boot-plus快速开始 Quick Start(一)
spring-boot-plus快速开始 Quick Start1. clone项目到本地git clone git@github.com:geekidea/spring-boot-plus.git2
2022-06-03 数据 数据库 插件 结构 项目 不用 内容 创建人 只有 名称 文件 日志 时间 环境 第一次 类型 系统 检查 配置 -
HDFS的基础组成部分及基础操作
HDFS组件结构图解说：1、如图所示中，NameNode充当master角色，职责包括：管理文档系统的命名空间(namespace)；调节客户端访问到需要的文件(存储在DateNode中的文件)2、D
2022-06-03 文件 数据 节点 目录 存储 信息 命令 资源 路径 服务 配置 相同 主机 位置 内容 功能 客户 客户端 时候 服务器 -
从物理执行角度透视Spark Job（23）
一、再次思考pipeline即使采用pipeline的方式，函数f对依赖的RDD中的数据集合的操作也会有两种方式：1， f(record),f作用于集合的每一条记录，每次只作用于一条记录；2， f(r
2022-06-03 数据 流动 物理 算子 结果 位置 作用 算法 角度 最大 上流 方式 时候 不同 内幕 函数 就是 思想 步骤 流程 -
jmeter的http测试用例
1、增加thread group2、增加http request3、增加view Results tree4、增加constant throught timer例如：配置6tps5、增加csv Dat
2022-06-03 配置 内容 参数 文件 可变 测试 -
微信带场景参数的二维码生成与使用功能实现？
参数二维码原理介绍：公众号目前有2种类型的二维码1、临时二维码，30天有效期2、永久二维码，没有失效时间渠道二维码生成（参数二维码生成）1、登录微号帮2、登录后进入管理中心首页选择->功能管理渠道二维
2022-06-03 二维 二维码 渠道 生成 粉丝 名称 参数 内容 数据 标签 标识 永久 分组 登录 管理 功能 有效 不用 公众 原理 -
python中字符串常用方法的应用
# 字符串方法：center# 作用是：将字符串在一定的宽度区域内居中显示# 这个方法和我们之前将的format 中的 ^ 一样 # ^print("<" + "hello".center(30)
2022-06-03 字符 字符串 方法 空格 索引 参数 小写 输入 三个 字母 意思 位置 函数 大写 字典 就是 路径 英文 常用 不同 -
python中format方法的使用
# 字段宽度、精度和千位分隔符# 100,000,000,000# 让一个数值在宽度为2的范围内输出，如果数值没到12位，左侧填充空格 4位呢print("a:{num:2}".format(nu
2022-06-03 年龄 宽度 空格 姓名 字符 字符串 解释 分隔符 字段 数值 数字 输出 就是 符号 精度 结果 范围 制作 方法