ICode9

精准搜索请尝试: 精确搜索
  • iostat 详解2021-09-20 13:37:09

    ostat是I/O statistics(输入/输出统计)的缩写,iostat工具将对系统的磁盘操作活动进行监视。它的特点是汇报磁盘活动统计情况,同时也会汇报出CPU使用情况。iostat也有一个弱点,就是它不能对某个进程进行深入分析,仅对系统的整体情况进行分析 常见命令展示  iostat 安装 1 # ios

  • ffmpeg系列--音频相关知识简介--未完2021-09-18 13:32:30

    本系列文章会陆续更新与ffmpeg相关的知识点。 与音频相关的概念极多,这里把最近学习到的进行总结: 1、编解码算法:目前已知的音频算法比较繁多,比较常见的有pcm(puluse)、aac、等。 a、pcm:pcm又分为adpcm。 2、音频格式:其实音频格式可以有两种维度的理解,一种是纯粹的裸码流即其中全是

  • 解决数据库一张表中百万条数据2021-09-16 21:34:09

    问题: 后台有个定时任务,每5秒钟生成6条数据存储到数据库中,那么一个月就会有 3110400 条数据存储到数据库中。显然数据量达到了百万级,数据量越大后期的性能就开始下降。 解决: 手动为以后创建多张表,表名后面加上年月 yyyy_MM 为后缀。一个月用一张表。 在mybatis中使用sql

  • 分布式技术:限流、通讯、缓存,全部一锅端,浦发银行Java开发面试2021-09-16 13:05:34

    ClickHouse 是什么? ClickHouse:是一个用于联机分析(OLAP)的列式数据库管理系统(DBMS) 我们首先理清一些基础概念 OLTP:是传统的关系型数据库,主要操作增删改查,强调事务一致性,比如银行系统、电商系统 OLAP:是仓库型数据库,主要是读取数据,做复杂数据分析,侧重技术决策支持,提供直观简单

  • MySQL数据库——数据的分页2021-09-14 22:03:07

    一般情况下,通过传递页码和每页条数两个参数去分页查询数据库中的数据,在数据量较小(万级以下)时使用MySQL自带的limit来解决分页问题、在数据量较小的时候使用limit进行数据分页在性能上不会有明显的缓慢。 但是当数据量达到了万级以上的时候性能将会降低,会造成深度分页的问题,这

  • postgres获取普通的操作所影响的行数2021-09-14 17:01:34

    如何来获取普通的操作所影响的行数,PostgreSQL里面有一个内置的变量DIAGNOSTICS与ROW_COUNT可以做到这一点。 一、环境: DB:9.4beta3 二、准备: postgres=# create table test(id int); CREATE TABLE postgres=# insert into test select generate_series(1,20); INSERT 0 20 postg

  • 接口文档示例2021-09-14 11:02:44

     接口的四种类型:post  get  delete  put post请求:请求的数据是放置WebForms中,以表单的形式提交;数据量较大 get请求:通过地址栏提交数据;用户信息不安全,数据量较小

  • 01大数据概述2021-09-08 12:31:05

    1.为什么产生大数据技术? 人类社会数据量的爆炸性增长,信息量越来越多,新数据也在源源不断地产生。一般的工具无法处理这么庞大的数据量,随即产生了大数据技术。 2.为什么要学习大数据技术?  随着时代的发展,大数据已融入我们的生活,生活离不开大数据,大数据为人们的生活带来便利,产生商

  • 012021-09-06 21:05:07

    1.为什么产生大数据技术?    随着信息化时代的到来,大数据是网络信息时代的客观存在,其产生的意义并不是因为它有着庞大的数据量,而是要从中挖掘和提取有价值的信息,所以要为大数据提供一些技术支撑。 2.为什么要学习大数据技术? 学习大数据技术就是对大数据的分析和处理,数据量增长速

  • 【MySQL】大数据量表添加字段2021-09-02 12:02:50

    前几天因为需求调整,需要在某张表中添加一个新的字段,而要添加字段的表,正好是我们库中最大的一张表,表中大约有3300万条记录,占用空间32.5G,直接在表上添加字段,很容易卡死。 ​ 网上找了一下大数据量表添加字段的帖子,帖子数量还是很多的,套路也都差不多,主要就是两种方案: 方案一:通过创建

  • 2021-9-1——微机原理1、认知计算、智能控制导论2021-09-01 22:32:16

    微机原理1——基本概念: 上课的实质内容只有一幅图:   这是经典的16位CPU——Intel 8086 图中的16位数据线就是16个物理引脚,用于传输0/1数据,16个数据线也就意味着CPU在一次最小处理的单元周期中能处理16Bit的数据量,也就是2Byte的数据量。 而20位地址线就是20个物理引脚,用于访问

  • mongodb: 如何在大数据量集合上创建索引2021-08-31 11:03:04

    前台构建 foreground vs 后台构建 background MongoDB 3.6 版本构建索引支持前台构建和后台构建,后台构建索引: // 举例 db.people.createIndex( { zipcode: 1}, {background: true} ) 默认地,MongoDB 索引创建的 background 是 false,即前台创建。 对比如下: 方式 使用方法 构

  • 记录一次使用OpenCsv导入大数据量报错的问题2021-08-25 11:01:02

    导入100W的Csv数据,使用OpenCsv解析工具解析Csv,发现报错 报错内容 com.opencsv.exceptions.CsvMalformedLineException: Unterminated quoted field at end of CSV line. Beginning of lost text: [XXXXX...] at com.opencsv.CSVReader.readNext(CSVReader.java:355) ~[opencsv-4.

  • 查看SQL-SERVER数据库及各个表的数据量及占用空间大小2021-08-25 09:34:09

        1、查看某个数据库,直接执行存储过程sp_spaceused即可 exec sp_spaceused;       2、查看某个表,在存储过程后面加上表名即可 EXEC sp_spaceused '表名';     3、查看该数据库中的所有表,可以写一个存储过程,然后执行即可 存储过程如下: -- ========================

  • Jmeter系列(34)- Jmeter优化常识2021-08-23 18:03:40

    Jmeter UI页面是调试脚本的,运行脚本使用命令行运行;Windows使用batch,Linux使用shell Jmeter减少使用各类监听控件,吃内存、CPU;用后置处理去拿log文件,生成图表 加大jvm的空间,默认是256M 使用最新版的Jmeter 提取响应结果时,数据量较少使用正则;数据量较大时,使用JSON提取器 避免在一条

  • MySQL数据量统计2021-08-23 11:32:04

    MySQL数据量统计 MySQL information_schema的常见使用 MySQL information_schema information_schema数据库表说明: SCHEMATA表:提供了当前mysql实例中所有数据库的信息。是show databases的结果取之此表。 TABLES表:提供了关于数据库中的表的信息(包括视图)。详细表述了某个

  • Redis之NoSql概述2021-08-18 17:33:53

    Nosql概述 为什么要用Nosql 1.单机MySQL的年代! 90年代,一个基本的网站访问量一般不会太大,单个数据库完全足够! 那个时候,更多的去使用静态网页Html,服务器根本没有太大的压力! 思考一下这种情况下: 整个网站的瓶颈是什么? 1.数据量如果太大,一个机器放不下了! 2.数据超过300万条就

  • 虚拟点赞浏览功能的大数据量测试2021-08-18 01:02:32

    记录下之前测试过的一个比较有意义的技术需求,算是一个总结 --------------------------------------------------------------------------------------- 背景介绍 我们社区业务模块,存在几个内容类型,酒话、酒评、文章和视频,由于前期需要营造社区的活跃气氛,需要支持部分虚拟数据生

  • Linux iostat命令详解2021-08-14 09:02:23

    iostat是I/O statistics(输入/输出统计)的缩写,iostat工具将对系统的磁盘操作活动进行监视。它的特点是汇报磁盘活动统计情况,同时也会汇报出CPU使用情况。iostat也有一个弱点,就是它不能对某个进程进行深入分析,仅对系统的整体情况进行分析。 iostat 安装 #iostat属于sysstat软件包。

  • 软件评测师--第八小时 应用负载压力测试2021-08-06 12:02:01

    一、基础概念 1、负载压力测试    在一定约束条件下测试系统所能承受的并发用户量、运行时间、数据量,以确定系统所能承受的最大负载压力 2、负载压力测试属与性能测试    包含: 并发性测试、疲劳强度测试、大数据量测试 3、性能测试策略    性能调优、性能评测 4、性能

  • 分库分表精辟解读2021-08-05 13:33:37

    文章目录 分库分表介绍: 一、为什么要分库:二、为什么要分表:选型介绍: 一、三个问题:二、中间件对比:三、概念介绍:四、两种方案: 分库分表介绍: 分库分表的目的是为了系统高并发、高可用。分库和年发表是两回事,两个概念,都是为了防止数据库服务因为同一时间内访问量过大导致

  • 大数据量query,QP意图理解搜索引擎算法测试2021-08-04 17:32:04

    搜索引擎质量指标(nDCG) 参考博客https://blog.csdn.net/LintaoD/article/details/82661206 特征feature:相关性 时效性 质量 点击率 权威度 冷启动 搜索/推荐业务哪一些场景要放到缓存 搜索:特征 大页cache和小页cache 实现区别 小页缓存是为了提高进入搜索结果页的加载速度,是渐

  • poi生成excel大数据量的合并单元格操作优化2021-08-03 12:34:09

    poi生成excel大数据量的合并单元格操作优化 之前根据官网给的api和example,对excel单元格的合并操作使用下方的代码(poi版本 3.12) public class MergedCells { public static void main(String[] args) throws IOException { HSSFWorkbook wb = new HSSFWorkboo

  • 卑微打工人!Java面试突击第一季百度云2021-07-30 16:01:37

    ClickHouse 是什么? ClickHouse:是一个用于联机分析(OLAP)的列式数据库管理系统(DBMS) 我们首先理清一些基础概念 OLTP:是传统的关系型数据库,主要操作增删改查,强调事务一致性,比如银行系统、电商系统OLAP:是仓库型数据库,主要是读取数据,做复杂数据分析,侧重技术决策支持,提供直观简

  • ORACLE 统计前三十天每天的数据量2021-07-28 16:31:15

    select ChartDate,(select count(*) from b2c_issuelists where to_date(substr(DEPOT_RECEIVING_DATETIME,1,10),'yyyy-MM-dd') = a.ChartDate ) AllData,(select count(*) from b2c_issuelists where QUO_START_DATETIME is not null and QUO_END_DATETIME is not

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有