互联网科技列表
-
Django -- URLconf 配置技巧
本章我们将对视图和URL配置使用一些高超的小技巧。【流线型化函数导入(streamlining)】方法一:传统方法from django.conf.urls.defaults import *from
2022-06-03 函数 视图 方法 参数 模式 配置 位置 关键 关键字 前缀 模块 处理 代码 传统 变量 字符 字符串 缺点 不同 原始 -
HADOOP生态圈以及各组成部分的简介
重点组件:HDFS:分布式文件系统MAPREDUCE:分布式运算程序开发框架Hive:基于大数据技术(文件系统+运算框架)的SQL数据仓库工具Hbase:基于Hadoop的分布式海量数据库ZOOKEE
2022-06-03 分布式 数据 框架 运算 工具 文件 系统 组件 仓库 基础 工作流 技术 数据库 数据采集 日志 机器 海量 程序 程序开发 重点 -
Spark如何处理中文字符串
最近工作中需要用spark对中文的字符提取,由于环境一直是英文的,发现打印出来是乱码。后经研究,需要做一个UTF-8的转换大概如下:val data_file = sc.textFile("t
2022-06-03 UTF-8 字符 中文 乱码 环境 英文 工作 研究 字符串 -
一、Flume--数据采集器基本原理和使用
一、概述1、flume是什么1) Flume提供一个分布式的,可靠的,对大数据量的日志进行高效收集、聚集、移动的服务,Flume只能在Linux环境下运行。2) Flume基于流式架构,容错性强,也很
2022-06-03 文件 数据 属性 常用 类型 时间 监听 例子 单位 目录 存储 内容 配置 就是 格式 正则 拦截器 数量 文件夹 传输 -
Selenium IDE工具界面剖析
资源推荐:视频资源: 软件测试相关系列视频社区资源: 自动化测试交流群Selenium IDE简介Selenium IDE(Integrated Development Environment),是S
2022-06-03 测试 命令 脚本 元素 菜单 面板 选择 格式 页面 工具 信息 消息 视图 套件 情况 用户 代码 文件 有用 步骤 -
2.3.1.shell awk 入门
awk:好用的数据处理工具awk 也是一个非常棒的数据处理工具!sed 常常用于一整个行的处理, awk 则比较倾向于一行当中分成数个『栏位』(或者称为一个域,也就是一列)来处理。因此,awk 相当的
2022-06-03 命令 数据 处理 变量 一行 文件 动作 条件 例子 就是 格式 代表 引号 类型 逻辑 面的 帐号 输出 运算 内容 -
大数据hadoop领域技术总体介绍(各个组件的作用)
2019/2/16 星期六大数据领域技术总体介绍(各个组件的作用)1、大数据技术介绍大数据技术生态体系:Hadoop 元老级分布式海量数据存储、处理技术系统,擅长离线数据分析Hbase 基于hadoo
2022-06-03 数据 框架 分布式 处理 技术 组件 海量 集群 分析 服务 工具 编程 功能 生态 管理 运算 业务 数据处理 数据库 数据采集 -
数据结构与算法学习笔记之 适合大规模的数据排序
数据结构与算法学习笔记之 适合大规模的数据排序前言在数据排序的算法中,不同数据规模应当使用合适的排序算法才能达到最好的效果,如小规模的数据排序,可以使用冒泡排序、插入排序,选择排序,他们的时间复杂度都
2022-06-03 排序 数据 复杂 复杂度 时间 算法 学习 数组 空间 递归 笔记 数据结构 结构 之间 公式 情况 代码 过程 两个 元素 -
“数据治理那点事”系列之一:那些年我们一起踩过的坑
大数据时代,数据成为社会和组织的宝贵资产,像工业时代的石油和电力一样驱动万物,然而如果石油的杂质太多,电流的电压不稳,数据的价值岂不是大打折扣,甚至根本不可用不敢用,因此,数据治理是大数据时代我们用好
2022-06-03 数据 客户 问题 标准 质量 误区 工作 业务 技术 落地 时候 项目 厂商 原因 工具 就是 成果 架构 系统 组织架构 -
selenium学习:简单元素操作
WebDriver中常用方法:clear() 清除文本send_keys(*value) 模拟按键输入click() 单机元素网站的登陆from selenium import webdriverfr
2022-06-03 元素 方法 常用 文本 使用方法 内容 函数 单机 尺寸 属性 按钮 按键 接口 效果 有时候 用户 网站 表单 首付 定位 -
接口自动化测试系列之PHPUnit-接口测试的步骤
接着上篇文章接口自动化测试系列之PHPUnit-接口测试基础继续来说接口测试的步骤接口测试的步骤并没有什么特殊的,但其中比较关键的是阅读接口文档。这里有个特别奇怪的现象,我们作为测试每天都在读各种复杂
2022-06-03 接口 测试 文档 步骤 参数 代码 关键 情况 环境 还是 自动化 复杂 头疼 特殊 着急 重要 不厌其烦 差不多 接下来 上篇 -
selenium-6 测试脚本中等待方法
例1:from selenium import webdriverb = webdriver.Firefox()b.find_element_by_id("kw").send_keys("51cto"
2022-06-03 方法 脚本 应用 查询 测试 -
十、MapReduce--InputFormat以及RecordReader抽象类
一、基本原理 在map执行之前,需要将数据进行切片,每个切片对应一个map任务。而每个map任务并不是直接处理这些切片数据的,它是处理KV的。所以问题有两个:数据是如何切片的、切片是如何转为KV给m
2022-06-03 处理 数据 方法 文件 方式 大小 就是 两个 分隔符 源码 一行 任务 对象 常用 分析 规划 一致 严格按照 信息 内容 -
想搞一套基于文本通讯的简单C/S服务开源开发组件给大家用
开发构想近两年,开发上频繁的使用Redis数据库,其简单的通讯协议和快速的响应让我印象深刻,但是.Net下的ServiceStack组件的商业化着实对我产生了一些想法,当然,让我开发一套完整的Redi
2022-06-03 开发 语言 组件 通讯 符号 轮子 还是 选择 文本 服务 不错 可行 宽松 最大 良好 频繁 心有余而力不足 三个 先天 印象 -
大数据平台规划
背景1."云大开物",四大热门信息技术1.1 业务的发展越来越受到技术进步的影响。业务创新离不开技术创新。技术为业务服务?2.大数据技术栈全景:分布式编程分布式文件系统列数据库(HBase、Cassa
2022-06-03 数据 学习 机器 算法 数据库 服务 技术 生态 分析 应用 网络 平台 引擎 神经 神经网络 编程 自治 业务 分布式 方法 -
apche ab 压力测试工具
首先需要安装apche,地址:https://www.apachehaus.com/cgi-bin/download.plx下载完成后,需要解压该压缩包:如何启动ab工具:步骤1:打开cmd步骤2:进
2022-06-03 数目 时间 步骤 测试 数据 结果 工具 成功 地址 所在 指标 数值 数据分析 服务器 用户 目录 网络 链接 长度 分析 -
mac 启动本地kafka
打开终端执行下列命令1、zkserver start ----启动zk2、启动kafka2.1 cd /usr/local/Cellar/kafka/ ---到kafka安装目录2.2 ls ----
2022-06-03 配置 一致 形式 版本 端口 脚本 进程 命令 备注 文件 目录 终端 题名 消费 生产 -
精准测试与自动化测试的无缝对接
现代的专业软件测试中心,随着项目的迭代,通常针对每个系统构建了大量的自动化测试用例集,而启动一次全量的自动化测试以CI级触发,使之大比率通过,非常困难。测试工程师们常常需要投入很高的成本,把大量精力花
2022-06-03 测试 自动化 精准 单元 代码 方法 系统 分析 无缝 情况 方案 星云 框架 测试系统 覆盖率 运行 有效 版本 逻辑 客户 -
Fitnesse测试系列--安装及环境配置
Fitnesse安装1,在fitnesse下载安装包。http://fitnesse.org/FitNesseDownload 安装包是同事给我,他也是从这里下的,所以这个过程我算是没有完全验证。我的
2022-06-03 运行 文件 代码 环境 测试 配置 成功 乱码 按钮 注释 浏览器 目录 页面 浏览 输入 验证 精彩 一行 三个 代表 -
使用注解hibernate 单元测试 问题
我们再做项目时,后台中单元测试是提高开发效率不可缺少的,如果你用的是注解来整合开发ssh3,项目中用的是javaee5,那么可能你在单元测试的时候就会遇到问题,那是版本不支持,请你在项目中选择"属性"
2022-06-03 项目 单元 测试 开发 注解 问题 中用 后台 属性 效率 时候 版本 目录 支持 整合 选择 附加