• Java 写入Parquet文件到 NameServer 做了HA的hdfs

    环境信息:Hadoop集群名称data-testHadoop节点主机名:hadoop01hadoop02hadoop03写入Parquet文件到HdfsPathfile=newPath("hdfs:/test3.parquet");StringschemaStr="me...

    MySQL常见错误类型代码

    1005:创建表失败1006:创建数据库失败1007:数据库已存在,创建数据库失败1008:数据库不存在,删除数据库失败1009:不能删除数据库文件导致删除数据库失败1010:不能删除数据目录导致删除数据库失败1011:删除数据库文件失败1012:不能读取系统表中的记录1020:记录已被其他用户修改...

    架构的价值

    架构在Java世界里由一些类或接口组成,正是这些类或接口为应用程序骨架提供了个可重用的设计(应用程序中的一层或几层)。架构调用业务开发者写的应用程序,从而实现对程序流程的控制。1.研发过程带来的利益(1)开发更加高效屏蔽技术底层细节,开发者只需要写出相应的业务代码而不需要接触底层的API,这让程序员...

    DataWorks核心技术讲解

    标题大纲整体架构技术架构技术要点多租户元数据调度任务依赖资源调度调度整体架构数据集成同步界面数据集成架构设计数据集成-集群数据集成-并行数据集成-协议加速数据集成-流撒花完结...

    JVM 字节码指令表

    字节码助记符指令含义0x00nopNone0x01aconst_null将null推送至栈顶0x02iconst_m1将int型-1推送至栈顶0x03iconst_0将int型0推送至栈顶0x04iconst_1将int型1推送至栈顶0x05iconst_2将int型2推送至栈顶0x06iconst...

    MySQL 面试题

    MySQL面试题1、隔离级别与锁的关系回答这个问题,可以先阐述四种隔离级别,再阐述它们的实现原理。隔离级别就是依赖锁和MVCC实现的。2、实践中如何优化MySQL?最好是按照以下顺序优化:SQL语句及索引的优化数据库表结构的优化系统配置的优化硬件的优化3优化子查询用关联查询替代。优化GROUPBY和...

    推荐一个非常好用的kafka管理控制台可以管理多套集群

    Kafka-Maphttps://github.com/dushixiang/kafka-map一个美观简洁且强大的kafkaweb管理工具。可以配置多个集群(网络要可以通)可以查看每个主题的东西,副本和分区数可以查看消费组可以拉取消息内容:支持延时消息:唯一的缺点就是他要jdk11,但是自己把代码...

    Spring Boot从命令行执行将文件添加到classpath

    构造打包的时候<plugin><groupId>org.springframework.boot</groupId><artifactId>spring-boot-maven-plugin</artifactId><configura...

    大数据库仓库分层设计

    数据仓库分层业务数据层STG层也叫数据准备区,定位是缓存来自DB抽取、消息、日志解析落地的临时数据,结构与业务系统保持一致;负责对垃圾数据、不规范数据进行清洗转换;该层只为ODS层服务;ODS层操作数据层定位于业务明细数据保留区,负责保留数据接入时点后历史变更数据,数据原则上全量保留。模型设计依据业...

    MySQL explain执行计划详细解释

    一.explain语法explain<table_name>例如:explainselect*fromt3whereid=3952602;二.explain输出解释+----+-------------+-------+-------+-------------------+------...