Introduction: 这篇记录了GAN,生成对抗，转载请注明。Reference：  Deep Bayes Slides https://zhuanlan.zhihu.com/p/25071913 https://zhuanlan.zhihu.com/p/55393813f-Divergence For distributions P and Q f-divergence is defined as:  KL-divergence:Reversed KL-divergence:Total variation:  Earth Mover Distance Wasserstein距离：We ...

Introduction: 这篇笔记会记录一些离散隐变量模型，转载请注明。Reference：Deep Bayes Motivation  Easier to interpret discrete categories than continuous spectrumexample: discrete variational autoencoder Allow the model to make a discrete choiceexample: hard attentionAn attention module generates binary mask of where to look a...

Introduction 这篇笔记比较系统地阐述了一些变分推断的方法，欢迎食用。转载请注明：https://blog.nowcoder.net/n/c0e560ac1acb42f9a88b525da39b9189Reference: Deep Bayes Full Bayesian inference Training StageTesting StageComment: The denominator in training stage sometimes may be intractable. Posterior distributions can be calculated analyt...

这篇是关于因果推断后门路径准则的。关于因果图的一些别的representation和learning方面的事情，感觉会和PGM比较像。 Backdoor Path Criterion 举几个例子{V},{W},{V,W}都可以阻断后门路径。所以可以选取这三组其中一个来进行control。 后门路径从A到Y，没有混淆变量 对于这张图包含V或者W的集合都可以。 还有很多例子，就不举例子了。。。 Disjunctive Criterion Disjunctive criterion的含义是：Control for all(observed) causes of the exposure, the o...

这篇是关于因果推断基础里数据分层比较的Conditioning and MarginalizationIgnorability Standardization Example Probability of MACE given Saxa=yes: 350/4000=0.088Probability of MACE given Saxa=no: 500/7000=0.071为了获得更加清晰的结果，我们可以对数据进行分层研究Stratification：根据是否用过OAD来进行层次的划分所以其实根据这个关系，说明Saxa=yes和Saxa=no对结果其实影响不大。也就是说要达到ignorabili...

select workingExp,company_name from table1 where responsibility like '%hive%' and salary > '8000'; select avg(t1.salary) as new_salary, t2.city_name from table1 t1 right outer join table2 t2 on t1.city_code = t2.city_code group by t2.city_name;

hive DDL操作：create/drop/alter database CREATE DATABASE IF NOT EXISTS test1 LOCATION '/hive/test1' WITH DBPROPERTIES('creator'='John','date'='2019-02-25'); ALTER DATABASE test1 SET DBPROPERTIES('creator'='Marry'); DROP DATABASE test1;create/drop/alter table #********* Begin *********# echo " CREA...

spark udf练习 # -*- coding: UTF-8 -*- from pyspark.sql import SparkSession import json if __name__ == '__main__': spark = SparkSession.builder.master("local").appName("demo").getOrCreate() #**********begin**********# df = spark.read.option("header", True).option("del...

关键词提取：小公司照抄成熟的相应类别网站

kafka 常用命令 查看当前服务器中的所有 Topicbin/kafka-topics.sh --list --zookeeper zk01:2181创建 Topic./kafka-topics.sh --create --zookeeper zk01:2181 --replication-factor 1 --partitions 3 --topic first 说明：replication-factor 是指副本数量，partitions 是指分区数量 删除 Topicbin/kafka-topics.sh --delete --zookeeper zk01:2181 --topic t...

# 先统计所有可能的对,并且区分是否是直接好友或者间接好友 # 累加 # 过滤 # -*- coding: UTF-8 -*- from pyspark import SparkContext def fun1(line): result = [] arrs = str(line).split(" ") me = arrs[0] for x in range(1, len(arrs)): friendA = arrs[x] resultA = (me + "_" + friendA, 0) if hash(me) > hash(friendA) e...

展示量合约

done list:因果推断/因果推断coursera宾大，未获得证书PGM coursera视频获得证书baidu比赛（跑不动，代码github）随机过程reinforcement learning网络中的计算思维组合数学计算广告视频protein structure prediction（代码开源）deep bayes 视频过一遍joyful pandas看了一遍强化学习：原理与python实践完成Introduction to Federated learning B站完成。深入浅出图神经网络 读完了 快餐书,可能还需要读第二遍MarTechKDD比赛视频学习完 doing list：对...

这是一个无奈的坑。本来想快速搞完javacc编译那块的。但是发现和自己的想法有出入，决定专门开个博客玩吧。先留坑。