-
图神经网络综述(GNN Survey)
’’’最近了解了一下GNN,写本文概述以加深理解,主要参考一下两篇综述文章:清华大学孙茂松组的 Graph Neural Networks: A Review of Methods and ApplicationsIEEE Fellow, Philip S. Yu的 A Comprehensive Survey on Graph Neural Networks’’’符号定义 标记 描述 m维欧式空间 ...…
-
NAACL2018 一种新的embedding方法--原理与实验 Deep contextualized word representations (ELMo)
Introduction之前的glove以及word2vec的word embedding在nlp任务中都取得了最好的效果, 现在几乎没有一个NLP的任务中不加word embedding.我们常用的获取embedding方法都是通过训练language model, 将language model中预测的hidden state做为word的表示, 给定N个tokens的序列, 前向language model就是通过前k-1个输入序列的hidden表示, 预测第k个位置的token, ...…
-
机器学习-决策树
决策树基本算法我们要判断一个复杂的问题往往通过多次简单判断来得出结论. 比如我们看到一个小姐姐我们会判断这个小姐姐是不是一个美女, 这是一个很简单的例子, 假设我们只有两个答案, 一个是,一个否, 我们首先看五官是否端正, 如果是, 我们再看有没有麻子痘痘, 如果没有我们再看看身材.. 通过上诉一系列询问最后得出结论这个小姐姐是\不是美女. 对于其中的每次判断, 都是一个决策过程, 因为我们的判断比较简单, 只会分出两种情况, 最后得到一颗二叉树, 二叉树的每个非叶子节点都代表一次决策, ...…
-
机器学习-线性模型
机器学习理论部分系列笔记, 主要参考资料周志华的<<机器学习>>, 李航的<<统计学习方法>>, 网络上的资源很多出处找不到了, 不列举.线性回归给定数据集, 其中.最简单的情况, 当x的属性只有一个的时候, 线性回归模型学得一个线性模型以尽可能准确的预测真实值输出. 即其中w, b为待学习的参数,通过最小化均方误差确定w和b的值:求上式极值直接对w, b求偏导得到:另上式都等于0, 可求得闭式解:通常情况下, x有d个属性, 此时其中, 有...…
-
数值分析-迭代法
简单例子求的值在计算机中需要通过迭代计算,等价方程,转化为方程求根问题。给定一个初始值,另,是增量,于是, 即 于是省略高阶项, 有 python:while abs(x*x-a) > 0.001: x = 1/2*(x+a/x)解线性方程组的迭代法谱,谱半径定义:为A的特征值, x为A对应的特征向量, A的全体特征值成为A的谱, 记做, 记 为矩阵A的谱半径.求解线性方程, 其中, 迭代求解步骤: 将A分裂为, 其中M为非奇异矩阵, 且容易求解. 于是, 即 , 即...…
-
R-net
R-net论文,ACL2017问题描述SQuAD数据集是斯坦福大学发布的公开数据集,提供train和dev训练集,未公开test数据集。该数据集上的数据给定一段passage和一个Question,求取Answer,Answer为文中出现的一个东西,Passage、Question 和Answer对如下所示。Passage: Tesla later approached Morgan to ask for more funds to build a more powerful transm...…
-
认识编辑器之神-vim,我常用的一些功能插件
vim是一个非常好用的编辑器,尤其是她的可扩展性简直好的没话说,不要以为vim的插件只能用vimscript写,现在大型的好用的插件大部分都是用python编写的,当然还有很多其他语言编写的插件。关于vim的用法和一些技巧可以看《practical vim》这本书可以带你入门,这本书告诉你为什么vim是编辑器之神,即使不用任何插件vim的能力也不是一般的编辑器可以比拟的。之前我也用过Emacs,里面有一个evil-mode可以模拟vim的按键,如果我没看这本书我可能就用emacs了,但...…
-
带你认识龚琳娜
兄弟,你对龚老师的理解还停留在《法海你不懂爱》上吗?下面的东西我只是觉得好,并不知道为什么好,其实对于我来说,这已经够了 空间实在有限,只能将源格式转换成webm,压缩到源文件的大约1/5,不得不说webm真是一种神奇的格式,压缩这么厉害竟然还有这么好的效果,想要更好的体验强烈推荐点击视频下方链接去b站观看跟着我一起读,龚琳娜 老师第一次听老师唱歌就是下面这首《小河淌水》,卧槽,真的听哭了,第一次,也是唯一一次听歌竟然特么听哭了。当然如果看完整的视频你肯定会更加感动,这里的压缩的很厉害非...…
-
在fedora中安装windows的一些软件
有几个windows的软件在linux中还是很需要的,下面以QQ为例,简单介绍下安装。由于deepin有一些对wine的优化,所以这里参考网上的方法也移植了deepin的wine需要的软件包到http://mirrors.ustc.edu.cn/deepin/pool/non-free/d/ 下载以下包 deepin-wine_*_all.deb deepin-wine32_*_i386.deb deepin-libwine_*_i386.deb deepin-wine32-p...…
-
爬网页的一些tips
爬虫是获得数据强有力的工具,爬虫技巧需要一些积累, 前些天实验需要写了一个爬虫记录一下以后可能用到的东西 下面的代码大部分稍加改动都可以直接用的 用到的一些包 简单网站的网页获取 有js代码 简单模仿人获取 by chrome 有js内容,不执行js,且定义变化头, firefox版 不执行js的终极方案用到的一些包import requests # 获取网页from bs4 import BeautifulSoup # 解析网页import re #正则,用于解析网页im...…
-
vim 的一些设置
markdown同步渲染,且支持mathjax安装instant-markdown-d并在 “/usr/lib/node_modules/instant-markdown-d”中修改index.html文件。在<head></head>标签中间插入下面的代码<script type="text/javascript" src="https://cdn.mathjax.org/mathjax/latest/MathJax.js?config=TeX-AMS-MM...…
-
Fedora 系统的一些设置
Fedora 在开始使用之前需要进行一些必要的配置,以使其更容易使用,且外观更好看 tmux bashrc dircolor git font gnome pythontmux#设置前缀为Ctrl + aset -g prefix C-a#解除Ctrl+b 与前缀的对应关系unbind C-bset-option -g mouse on#upbind-key k select-pane -U#downbind-key j select-pane -D#leftbind-k...…
-
aria2c下载工具
下载百度云内容 通用下载下载百度云内容 安装aria2 dnf install aria2 配置aria2 #用户名 #rpc-user=user #密码 #rpc-passwd=passwd #上面的认证方式不建议使用,建议使用下面的token方式 #设置加密的密钥 #rpc-secret=token #允许rpc enable-rpc=true #允许所有来源, web界面跨域权限需要 rpc-allow-origin-all=true #允...…