Carm's Blog

虽暗将曦

Delta Lake深入分析(1)

初识Delta Lake

Delta Lake深入分析(1)–初识Delta Lake 什么是Delta Lake? Delta Lake is an open-source storage layer that brings ACID transactions to Apache Spark™ and big data workloads. Delta Lake是一个开源的存储层，提供ACID事务能力，支持...

Posted by Carm on October 22, 2019

SQL On Hadoop

SQL-on-Hadoop,Hive,Impala,Presto,Spark SQL

SQL On Hadoop SQL On Hadoop解决方案为用户提供关系模型和SQL查询接口，并透明的将SQL语句转化为Hadoop生态系统中的处理技术，此来管理和查询海量结构化数据。用户不需要额外去学习复杂的分布式计算框架（如MapReduce、Tez、Spark等），只需要将业务操作以SQL方式展示，降低用户学习成本。三层模型： Hive Apache Hive数据仓库软件可...

Posted by carm on September 4, 2019

Java代码调试总结(待续)

远程java debug,VisualVM远程监控JVM

Java代码调试总结远程Debug java启动命令后面添加参数： -agentlib:jdwp=transport=dt_socket,server=y,suspend=n,address=5005 suspend可选值为： y/n 打印GC信息 -Xms20M -Xmx20M -Xmn10M -verbose:gc -XX:+PrintGCDetails -XX:Surviv...

Posted by carm on April 2, 2019

222SSH免密码登录配置222

通过配置ssh,实现无需输入密码就能访问远程用户222

SSH免密码登录配置222 备忘录–openssh 声明：原创文章，转载自由，但需注明出处。系统环境 Centos7.2 openssh6.6 生成秘钥 # 假设当前用户为www $ ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa $ cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized...

Posted by carm on April 2, 2019

牛客网用户群体分析

统计分析用户择业方向

牛客网用户群体分析本文属原创，欢迎转载，但请转载时注明出处最近看到师兄一直在牛客网刷机试题,想想也是，校招马上就要开始了，刷一些经典题型即可以巩固所学知识，也可以对接下来的校招笔试、机试做些准备。牛客网是一个在线编程网站，主要提供互联网公司（如BAT）一些经典面试题的在线编程。突发奇想，既然是为了找工作服务的，是不是注册的用户很大部分是计算机相关专业的在校学生？接着，能不能...

Posted by carm on July 18, 2016