当前位置： 首页 > news >正文

面试官问百万数据excel导出功能如何实现？

news 2026/2/8 10:16:55

文章目录

  • 背景
  • 实现
    • 1.异步处理
      • 1.1 使用job
      • 1.2 使用mq
    • 2.使用easyexcel
    • 4.多个sheet
    • 5.计算limit的起始位置
    • 6.文件上传到OSS
    • 7.通过WebSocket推送通知
    • 8.总条数可配置
    • 9.order by商品编号
    • 总结

背景

用户在UI界面上点击全部导出按钮，就能导出所有商品数据。

咋一看，这个需求挺简单的。

但如果我告诉你，导出的记录条数，可能有一百多万，甚至两百万呢？
这时你可能会倒吸一口气。因为你可能会面临如下问题：

  1. 如果同步导数据，接口很容易超时。
  2. 如果把所有数据一次性装载到内存，很容易引起OOM。
  3. 数据量太大sql语句必定很慢。
  4. 相同商品编号的数据要放到一起。
  5. 如果走异步࿰

相关文章：

面试官问百万数据excel导出功能如何实现？

文章目录 背景实现1.异步处理1.1 使用job1.2 使用mq2.使用easyexcel4.多个sheet5.计算limit的起始位置6.文件上传到OSS7.通过WebSocket推送通知8.总条数可配置9.order by商品编号总结背景 用户在UI界面上点击全部导出按钮，就能导出所有商品数据。 咋一看，这个需求挺简单的。…...

编程日记 2023/3/11 0:08:52

理解HTTPS及配置

HTTP的弊端及HTTPS的由来 众所周知HTTP协议是以TCP协议为基石诞生的一个用于传输Web内容的一个网络协议,在“网络分层模型”中属于“应用层协议”的一种.那么在这里我们并不研究该协议标准本身,而是从安全角度去探究使用该协议传输数据本身存在的安全问题:(1)、通信使用明文(不…...

编程日记 2023/3/11 0:07:49

IP-guard浏览器上传下载智能加解密，让管理更省心省力

现在员工日常工作中经常会通过浏览器访问公司的业务系统（OA、JIRA等），或者访问其他外部系统，访问下载服务器的文档变得更便捷，工作地点也不再局限于办公室中。为确保应用系统机密安全且又不影响员工的正常工作&#xf…...

编程日记 2023/3/11 0:06:46

leetcode day22 位运算

位运算咋这么老难 剑指 Offer 56 - I. 数组中数字出现的次数 借评论区大佬答案：nums [1,2,10,4,1,4,3,3] a^a0a^0aa^b^ca^c^ba&(-a)最低位为1的二进制（从又到左）所有的异或结果得到sum2^108flag-8&88可分为两组，一组为与…...

编程日记 2023/3/11 0:05:42

java中如何判断map是否为空

java中判断map是否为空的方法是：利用isEmpty()函数来判断。函数介绍：isEmpty()是Java中用于判断某种容器是否有元素的系统库函数。如用来判断ArrayList，HashSet，HashMap是否有元素等。在Java中，可以用isEmpty();判断一…...

编程日记 2023/3/11 0:04:38

C语言数据结构：链表的增删改查及动态创建

目录 一，链表与数组 ① 定义区别 ② 实现区别 二，链表遍历和计算链表中节点数量 ① 链表遍历 ② 计算节点数量 三，查找链表节点 四，增加节点到链表中 ① 在节点后方插入 ② 在节点前方插入 ● 在头节点前方插入 ● 在…...

编程日记 2023/3/11 0:03:36

「Python 基础」I/O 编程、正则表达式

文章目录1. I/O 编程文件读写StringIO 和 BytesIO操作文件和目录序列化2. 正则表达式进阶re 模块1. I/O 编程 I/O指Input/Output； Input Stream 从外面（磁盘、网络）流进内存； Output Stream 从内存流到外面； 同步 …...

编程日记 2023/3/11 0:02:32

java 把pdf图片文档和文章文档转成文字的方法

java 提供了一些库和工具可以用来把 PDF 文档和图片文档转成文本。 Apache PDFBox：这是一个开源的 PDF 库，可以用来提取 PDF 文件中的文本内容。 iText：这是一个用于创建和处理 PDF 文件的库，可以用来提取 PDF 文件中的文本内容。…...

编程日记 2023/3/11 0:01:25

JavaScript 中的全部对象

宿主对象（host Objects）：由 JavaScript 宿主环境提供的对象，它们的行为完全由宿主环境决定。 【 浏览器环境宿主，全局对象window，window 上又有很多属性，如 document。 全局对象 window 上的属…...

编程日记 2023/3/11 0:00:20

【教学典型案例】23.部分服务总是频繁出现掉线情况

目录一：背景介绍问题描述解决二：问题分析过程解决过程设计到的知识1、nacos的data目录作用。2、nacos data目下的protocol目录3、nacos ip混乱问题三：总结一：背景介绍 问题描述 因为某些特殊原因需要把nacos迁移到另一个版本的n…...

编程日记 2023/3/10 23:59:18

线程安全 List 效率测试

List 常见类以及各自优缺点可自行参考 https://blog.csdn.net/weixin_39883065/article/details/111197724 本机环境 java 版本：1.8.0_161 window 信息： 测试代码 下面通过代码测试 List 线程安全类 Vector、Collections.synchronizedList(List lis…...

编程日记 2023/3/10 23:58:15

LeetCode 热题 C++ 581. 最短无序连续子数组 617. 合并二叉树

581. 最短无序连续子数组 给你一个整数数组 nums ，你需要找出一个 连续子数组 ，如果对这个子数组进行升序排序，那么整个数组都会变为升序排序。 请你找出符合题意的 最短 子数组，并输出它的长度。 示例 1： 输入&am…...

编程日记 2023/3/10 23:57:13

鉴源论坛 · 观模丨模型检查综述

作者 | 李建文 华东师范大学软件工程学院博导 版块 | 鉴源论坛 观模 01 模型检查的历史 模型检查是一种起源于20世纪70年代末的形式化验证技术。该技术最初由Edmund M. Clarke、E. Allen Emerson和Joseph Sifakis提出，他们因在模型检查领域的贡献而获得了2007年的…...

编程日记 2023/3/10 23:56:12

Easy Deep Learning——池化层

池化是什么？它有什么作用？ 还是草地的场景，把草地分成一块块的网格，数量还是太多了，如何继续简化输入数据呢? 这时候可以只取一块网格中所有的小草的大小形状的平均值或者最大值作为一个输入数据，这样就大…...

编程日记 2023/3/10 23:55:05

TryHackMe-VulnNet: Active（ez 域渗透）

VulnNet: Active VulnNet Entertainment在他们以前的网络中遇到了不好的时光，该网络遭受了多次破坏。现在，他们移动了整个基础架构，并再次聘请您作为核心渗透测试人员。您的目标是获得对系统的完全访问权限并破坏域。 这应该是我在thm打的最…...

编程日记 2023/3/10 23:54:02

TencentOS Server 安装 PostgreSQL

TencentOS 简介 2019 年，随着腾讯公司外部客户的需求，以及公司开源协同战略的推进，tlinux 对外开源并进行了品牌升级，升级为 TencentOS Server。TencentOS 包含三大场景，分别如下： TencentOS Server&…...

编程日记 2023/3/10 23:52:59

多线程的风险 --- 线程安全

✨个人主页：bit me👇 ✨当前专栏：Java EE初阶👇 ✨每日一语：低头赶路，敬事如仪；自知自心，其路则明。 目 录🍸一. 线程不安全🍹二. 线程不安全的原因&#x1f…...

编程日记 2023/3/10 23:51:57

Linux信号详解

文章目录Linux信号什么是信号**从生活角度理解: **技术应用角度的信号进程的注意事项信号概念用kill -l命令可以察看系统定义的信号列表信号处理常见方式概览信号产生通过终端按键产生信号使用signal函数自定义SIGINT信号的处理方式使用sigprocmask函数阻塞2号信号和40号信号vo…...

编程日记 2023/3/10 23:50:55

JAVA使用POI操作EXCEL

设置公式totalRow.createCell(4).setCellFormula("SUM(E9:E35");// 执行公式wb.setForceFormulaRecalculation(true);合并单元格sheet.addMergedRegion(new CellRangeAddress(0, 0, 3, 7));单元格格式CellStyle cellStyle wb.createCellStyle();// 字体XSSFFont fon…...

编程日记 2023/3/10 23:49:52

只做笔记有必要买apple pencil吗？苹果笔的代替笔推荐

如果仅仅使用IPAD来进行打游戏和看剧的话，未免有些浪费。ipad的作用还是挺大的，可以用来做学习笔记，也可以用来做绘画，也可以用来做一些重要的内容。很多人都会认为，苹果的电容笔很好用，但是价格上要比一般…...

编程日记 2023/3/10 23:48:51

【力扣数据库知识手册笔记】索引

索引 索引的优缺点 优点1. 通过创建唯一性索引，可以保证数据库表中每一行数据的唯一性。2. 可以加快数据的检索速度（创建索引的主要原因）。3. 可以加速表和表之间的连接，实现数据的参考完整性。4. 可以在查询过程中，…...

编程新知 2026/1/25 4:36:37

Leetcode 3577. Count the Number of Computer Unlocking Permutations

Leetcode 3577. Count the Number of Computer Unlocking Permutations 1. 解题思路2. 代码实现 题目链接：3577. Count the Number of Computer Unlocking Permutations 1. 解题思路 这一题其实就是一个脑筋急转弯，要想要能够将所有的电脑解锁&#x…...

编程新知 2026/1/4 2:33:39

电脑插入多块移动硬盘后经常出现卡顿和蓝屏

当电脑在插入多块移动硬盘后频繁出现卡顿和蓝屏问题时，可能涉及硬件资源冲突、驱动兼容性、供电不足或系统设置等多方面原因。以下是逐步排查和解决方案： 1. 检查电源供电问题 问题原因：多块移动硬盘同时运行可能导致USB接口供电不足&#x…...

编程新知 2025/10/28 15:02:57

数据链路层的主要功能是什么

数据链路层（OSI模型第2层）的核心功能是在相邻网络节点（如交换机、主机）间提供可靠的数据帧传输服务，主要职责包括： 🔑 核心功能详解： 帧封装与解封装 封装： 将网络层下发…...

编程新知 2026/2/1 7:31:51

HBuilderX安装（uni-app和小程序开发）

下载HBuilderX 访问官方网站：https://www.dcloud.io/hbuilderx.html 根据您的操作系统选择合适版本： Windows版（推荐下载标准版） Windows系统安装步骤 运行安装程序： 双击下载的.exe安装文件 如果出现安全提示&…...

编程新知 2026/1/31 12:52:04

WordPress插件：AI多语言写作与智能配图、免费AI模型、SEO文章生成

厌倦手动写WordPress文章？AI自动生成，效率提升10倍！ 支持多语言、自动配图、定时发布，让内容创作更轻松！ AI内容生成 → 不想每天写文章？AI一键生成高质量内容！多语言支持 → 跨境电商必备&am…...

编程新知 2026/1/30 17:24:20

拉力测试cuda pytorch 把 4070显卡拉满

import torch import timedef stress_test_gpu(matrix_size16384, duration300):"""对GPU进行压力测试，通过持续的矩阵乘法来最大化GPU利用率参数:matrix_size: 矩阵维度大小，增大可提高计算复杂度duration: 测试持续时间（秒&…...

编程新知 2025/12/7 12:35:20

聊一聊接口测试的意义有哪些？

目录 一、隔离性 & 早期测试 二、保障系统集成质量 三、验证业务逻辑的核心层 四、提升测试效率与覆盖度 五、系统稳定性的守护者 六、驱动团队协作与契约管理 七、性能与扩展性的前置评估 八、持续交付的核心支撑 接口测试的意义可以从四个维度展开，首…...

编程新知 2025/10/14 6:46:13

Reasoning over Uncertain Text by Generative Large Language Models

https://ojs.aaai.org/index.php/AAAI/article/view/34674/36829https://ojs.aaai.org/index.php/AAAI/article/view/34674/36829 1. 概述 文本中的不确定性在许多语境中传达，从日常对话到特定领域的文档（例如医学文档）（Heritage 2013；Landmark、Gulbrandsen 和 Svenevei…...

编程新知 2026/2/8 2:27:29

高效线程安全的单例模式：Python 中的懒加载与自定义初始化参数

高效线程安全的单例模式：Python 中的懒加载与自定义初始化参数 在软件开发中，单例模式（Singleton Pattern）是一种常见的设计模式，确保一个类仅有一个实例，并提供一个全局访问点。在多线程环境下，实现单例模式时需要注意线程安全问题，以防止多个线程同时创建实例，导致…...

编程新知 2025/11/25 19:50:27