企业微信接口相关 1. 获取 access_token1.1 术语1.1.1 secretsecret是企业应用里面用于保障数据安全的“钥匙”，每一个应用都有一个独立的访问密钥，为了保证数据的安全，secret务必不能泄漏。目前secret有： 自建应用secret。在管理后台->“应用与小程序”->“应用”->“自建”，点进某个应用，即可看到。 基础应用secret。某些基础应用（如“审批”“ 2023-10-23 微信接口 wechat
datax本地idea配置 下载源码打包alibaba/DataX: DataX是阿里云DataWorks数据集成的开源版本。 (github.com) 执行打包命令1mvn -U clean package assembly:assembly -Dmaven.test.skip=true 配置启动参数在 idea 中找到 com.alibaba.datax.core.Engine 类 在 vm option 中写 2023-08-17 大数据
hexo-auto-category配置 以往在写 blog 的时候 ，通常是使用1new page "xxx"来新建文章，但是这样有一个问题 就是新建的文件全部都堆在 /_post 文件下，blog 多了以后非常难维护，如果我们 手动做了 分类，这个时候因为 我们 在 front-matter 中 categories 是手动维护的，，如果文件夹出现了修改或者说 blog 的移动，这个时候还需要手动的去修改 cate 2023-07-14 环境配置 hexo插件
机器部署相关 hadoop 各应用部署NameNode 服务 单独 部署 (集群规模不大时 NameNode 也可以和 DataNode 放在一台机器上) DataNode 和 NodeManager 在一台机器上 ResourceManage 和 NameNdoe 建议 独立 部署在一台上 historyServer 通常和 resourceManager 在一起 角色 机器1 机器2 机器3 机器4 2023-07-14 大数据 hadoop
通用返回类 有些时候 我们需要封装一个 通用返回类 来承载我们返回的数据 1234567891011121314151617181920212223242526272829303132333435363738394041424344454647484950515253545556575859606162636465666768697071727374757677787980818283848586878889 2023-07-13 java工具类 java
python调用azkaban接口上传文件 python调用 1234567891011121314151617181920212223242526272829303132import os.path import requests def login_azkaban(): headers = { "Content-Type": "application/x-w 2023-07-13 调度-azkaban azkaban
hive表级血源解析 hive血源通过查看代码 发现 hive 自带了 一个表级血源解析工具类1org.apache.hadoop.hive.ql.tools.LineageInfo 我们可以这样使用1234567891011121314public static void main(String[] args) throws IOException, ParseException, Semantic 2023-07-13 大数据 hive
hive-exec的guava冲突 在 引入 hive-exec 的maven 依赖后 Application 无法启动报 hive-exec 的 guava 与系统自带的 guava 冲突此时 尝试在 maven 中1234<exclusion> <groupId>com.google.guava</groupId> <artifactId>guava</art 2023-07-13 大数据 hive
hive编译 1.下载源码由于 git 上 (branch-2.1)的pom version 为 2.1.2 所以 需要从 Release rel/release-2.1.1 · apache/hive (github.com)下载源码 2.编译切换到 hive 根目录下 编译1mvn clean package -DskipTests -Pdist在 windows 下编译时, hive-common 2023-07-13 大数据 hive
深入理解java虚拟机-ch1-修改class文件 1.安装asmtools.jar2.创建一个java文件并编译2.1创建 Foo.java123456789101112public class Foo{ public static void main(String[] args){ boolean flag = true; if(flag){ System.o 2023-07-13 java虚拟机 jvm