2024-03 归档

pyspark从hive导出数据到clickhouse

需求 从hive导出数据到clickhouse 大概有两百个字段，两千多万数据，30G左右 实现 采用pyspark导入，先上代码 #_*_ coding=UTF-8 _*_ import os i

Kafka的零拷贝原理解析

最近一个学员去滴滴面试，在第二面的时候遇到了这个问题： "请你简单说一下Kafka的零拷贝原理" 然后那个学员努力在大脑里检索了很久，没有回答上来。 那么今天，我们基于这个问题来看看，普通人和高手是如

webpack常见面试题

1.从零开始搭建一个简单的基于webpack的vue开发环境 a.安装webpack   npm i webpack -g b.项目初始化     

利用MybatisPlus两步实现多租户方案

1.定义一个TenantLineHandler的实现类： import com.baomidou.mybatisplus.extension.plugins.handler.TenantLineHan

拓扑排序小结_在线工具

首先来理解什么是拓扑排序；拓扑排序简单说是做事情的先后顺序，在现实生活中,人们经常要做连串事情，这些事情之闻有顺序关系或者依赖关系，在做一件事情之前必须先做另一件事，比如安排客人的座位、穿衣服的先后、

Runtime: Input type (torch.FloatTensor) and weight type (torch.cuda.FloatTensor) should be the same

pytorch框架在写test.py时，报了一个输入，输出类型不一致； RuntimeError: Input type (torch.FloatTensor) and weight type (t

架构设计基础设施保障IaaS之计算篇

IaaS之计算 1.1 IaaS概述 IaaS（Infrastructure as a Service ）提供托管的 IT 基础架构，供用户调配处理能力、存储、网络和其他基础计算资源。IaaS 提供商

  在编写自己的程序时，需要实现将数据导入数据库，并且是带参数的传递。 执行语句如下：   sql_str = "INSERT INTO teacher(t_name, t_inf

Feign的hystrix熔断器不起作用

问题描述 在开发spring-cloud项目的时候，Feign的熔断器不起作用，指定了fallback不起作用。 @FeignClient(name="produce", fallback=Produ

DjangoRestFramework框架三种分页功能的实现 – 在DjangoStarter项目模板中封装

前言 继续Django后端开发系列文章。刚好遇到一个分页的需求，就记录一下。 Django作为一个“全家桶”型的框架，本身啥都有，分页组件也是有的，但默认的分页组件没有对API开发做优化，所以Djan