机器之心原创

机器之心编辑部

人工智能的意识初探(机器之心开放人工智能专业词汇集)(1)

作为最早关注人工智能技术的媒体,机器之心在编译国外技术博客、论文、专家观点等内容上已经积累了超过两年多的经验。期间,从无到有,机器之心的编译团队一直在积累专业词汇。虽然有很多的文章因为专业性我们没能尽善尽美的编译为中文呈现给大家,但我们一直在进步、一直在积累、一直在提高自己的专业性。

两年来,机器之心编译团队整理过翻译词汇对照表「红宝书」,编辑个人也整理过类似的词典。而我们也从机器之心读者留言中发现,有些人工智能专业词汇没有统一的翻译标准,这可能是因地区、跨专业等等原因造成的。举个例子,DeepMind 的一篇论文中有个词汇为 differentiable boundary tree,当时机器之心的翻译为可微分界树,但后来有读者表示这样的译法如果不保留英文很难明白表达的意思且建议翻译为可微分边界树。

读者在此项目中,可通过以上表盘查看自己想要了解的专业词汇。在单个首字母中,表格的组织形式为:英文/缩写、汉语、来源&扩展。

来源&扩展是对该词汇的注解,内容为机器之心往期的相关文章。例如下图所示的「算法」,我们关联到的三篇文章是《回归、分类与聚类:三大方向剖解机器学习算法的优缺点》和《机器学习算法附速查表》和《深度学习算法全景图:从理论证明其正确性》。因此,我们希望不仅能提供相对应的术语,同时还希望能为读者提供每一个术语的来源和概念上的扩展。但由于这一部分工作量较大,我们还将与读者共同推进这一部分扩展的进程。

准确性

本项目中所有英文专业词汇对照的中文都来自机器之心编译的文章和系列机器学习教科书(如周志华的《机器学习》和李航的《统计学习方法》等),我们力求在提供准确翻译的同时保留最常用的形式。同时,为了保证词汇翻译的准确性,我们将此项目向读者开源,并希望能与读者共同迭代术语的准确度。除此之外,我们还将为每一个词汇提供来源与扩展进一步提升词汇的置信度。

机器之心术语编译标准

因为该项目很多术语都是机器之心平常编译文章所积累的,所以我们首先需要向读者说明机器之心术语编译的标准。

1. 常见术语的编译标准

机器之心常见术语的编译首先会确保术语的正确性,其次再考虑术语的传播广度。例如常见术语。logistic regression,首先机器之心会保证该术语的准确度。我们常见 logistic regression 会翻译为逻辑回归,但中文「逻辑」与 logistic 的含义还是有些差别,因此我们并不太倾向于采用这种译法。在准确度的基础上,我们会考虑术语的传播广度。例如有学者建议可以将 logistic regression 译为对数几率回归,但鉴于该译法的传播度不广,看到中文并不会马上检索到对应英文和概念,所以我们最终在常见术语编译标准下将 logistic regression 译为 logistical 回归。机器之心在对常见术语编译时并不会保留英文,也不会做进一步说明。

2. 非常见术语的编译标准

机器之心在编译技术文章或论文时,常常会遇到非常见的术语。因为像论文那样的文章是在特定领域下为解决特定问题而规范化书写的,所以就会存在较多的非常见的术语。而机器之心在编译非常见术语时,唯一的标准就是准确性,通常我们也会保留英文。因为非常见术语通常是数学、神经科学和物理学等领域上的专业术语,机器之心会尽可能地借鉴其他领域内的译法和意义而确定如何编译。例如 fixed-point theorem,在参考数学的情况下,我们会更倾向于译为不动点定理,fixed-point 译为不动点而不是定点。

3. 歧义术语的编译标准

还有很多术语其实是有歧义的,而对于这一类词,机器之心的编译标准会根据语义进行确定,因此也会有一些误差。例如 bias 在描述神经网络层级单元时可以译为偏置项。而在描述训练误差和与叉验证误差间的关系或学习曲线时,bias 可以译为偏差。这样的例子还有很多,比如 Stationary 在马尔可夫模型中可译为稳态分布(Stationary distribution),在最优化问题中可译为驻点(Stationary point),而在涉及博弈论或对抗性训练时,其又可能表达为静态。

以上是机器之心大概编译术语的标准,虽然我们在常用术语的编译上错误率相对较少,但在非常见术语和歧义术语上仍然会出现一些错误。尤其是在非常见术语的编译上,没有特定的背景知识很容易在编译上出现误差。因此我们希望能与读者共同加强术语的编译质量。

词汇更新

本词汇库目前拥有的专业词汇共计 500 个,主要为机器学习基础概念和术语,同时也是该项目的基本词汇。机器之心将继续完善术语的收录和扩展阅读的构建。词汇更新主要分为两个阶段,第一阶段机器之心将继续完善基础词汇的构建,即通过权威教科书或其它有公信力的资料抽取常见术语。第二阶段机器之心将持续性地把编译论文或其他资料所出现的非常见术语更新到词汇表中。

读者的反馈意见和更新建议将贯穿整个阶段,并且我们将在项目致谢页中展示对该项目起积极作用的读者。因为我们希望术语的更新更具准确度和置信度,所以我们希望读者能附上该术语的来源地址与扩展地址。因此,我们能更客观地更新词汇,并附上可信的来源与扩展。

Letter A

Accumulated error backpropagation累积误差逆传播
Activation Function激活函数
Adaptive Resonance Theory/ART自适应谐振理论
Addictive model加性学习
Adversarial Networks对抗网络
Affine Layer仿射层
Affinity matrix亲和矩阵
Agent代理 / 智能体
Algorithm算法
Alpha-beta pruningα-β剪枝
Anomaly detection异常检测
Approximation近似
Area Under ROC Curve/AUCRoc 曲线下面积
Artificial General Intelligence/AGI通用人工智能
Artificial Intelligence/AI人工智能
Association analysis关联分析
Attention mechanism注意力机制
Attribute conditional independence assumption 属性条件独立性假设
Attribute space属性空间
Attribute value属性值
Autoencoder自编码器
Automatic speech recognition自动语音识别
Automatic summarization自动摘要
Average gradient平均梯度
Average-Pooling平均池化

Letter B

Backpropagation Through Time通过时间的反向传播
Backpropagation/BP反向传播
Base learner基学习器
Base learning algorithm基学习算法
Batch Normalization/BN批量归一化
Bayes decision rule 贝叶斯判定准则
Bayes Model Averaging/BMA贝叶斯模型平均
Bayes optimal classifier贝叶斯最优分类器
Bayesian decision theory贝叶斯决策论
Bayesian network贝叶斯网络
Between-class scatter matrix类间散度矩阵
Bias偏置 / 偏差
Bias-variance decomposition偏差-方差分解
Bias-Variance Dilemma偏差 - 方差困境
Bi-directional Long-Short Term Memory/Bi-LSTM双向长短期记忆
Binary classification二分类
Binomial test二项检验
Bi-partition二分法
Boltzmann machine玻尔兹曼机
Bootstrap sampling自助采样法/可重复采样/有放回采样
Bootstrapping自助法
Break-Event Point/BEP平衡点

Letter C

Calibration校准
Cascade-Correlation级联相关
Categorical attribute离散属性
Class-conditional probability类条件概率
Classification and regression tree/CART分类与回归树
Classifier分类器
Class-imbalance类别不平衡
Closed -form闭式
Cluster簇/类/集群
Cluster analysis聚类分析
Clustering聚类
Clustering ensemble聚类集成
Co-adapting共适应
Coding matrix编码矩阵
COLT国际学习理论会议
Committee-based learning基于委员会的学习
Competitive learning竞争型学习
Component learner组件学习器
Comprehensibility可解释性
Computation Cost计算成本
Computational Linguistics计算语言学
Computer vision计算机视觉
Concept drift概念漂移
Concept Learning System /CLS概念学习系统
Conditional entropy条件熵
Conditional mutual information条件互信息
Conditional Probability Table/CPT条件概率表
Conditional random field/CRF条件随机场
Conditional risk 条件风险
Confidence置信度
Confusion matrix混淆矩阵
Connection weight连接权
Connectionism连结主义
Consistency一致性/相合性
Contingency table列联表
Continuous attribute连续属性
Convergence收敛
Conversational agent会话智能体
Convex quadratic programming 凸二次规划
Convexity凸性
Convolutional neural network/CNN卷积神经网络
Co-occurrence同现
Correlation coefficient相关系数
Cosine similarity余弦相似度
Cost curve成本曲线
Cost Function成本函数
Cost matrix成本矩阵
Cost-sensitive成本敏感
Cross entropy交叉熵
Cross validation交叉验证
Crowdsourcing众包
Curse of dimensionality维数灾难
Cut point截断点
Cutting plane algorithm 割平面法

Letter D

Data mining数据挖掘
Data set数据集
Decision Boundary决策边界
Decision stump决策树桩
Decision tree决策树/判定树
Deduction演绎
Deep Belief Network深度信念网络
Deep Convolutional Generative Adversarial Network/DCGAN深度卷积生成对抗网络
Deep learning深度学习
Deep neural network/DNN深度神经网络
Deep Q-Learning深度 Q 学习
Deep Q-Network深度 Q 网络
Density estimation 密度估计
Density-based clustering密度聚类
Differentiable neural computer可微分神经计算机
Dimensionality reduction algorithm降维算法
Directed edge有向边
Disagreement measure不合度量
Discriminative model判别模型
Discriminator判别器
Distance measure距离度量
Distance metric learning距离度量学习
Distribution分布
Divergence散度
Diversity measure多样性度量/差异性度量
Domain adaption领域自适应
Downsampling下采样
D-separation (Directed separation)有向分离
Dual problem 对偶问题
Dummy node哑结点
Dynamic Fusion动态融合
Dynamic programming动态规划

Letter E

Eigenvalue decomposition特征值分解
Embedding嵌入
Emotional analysis情绪分析
Empirical conditional entropy经验条件熵
Empirical entropy经验熵
Empirical error经验误差
Empirical risk经验风险
End-to-End端到端
Energy-based model基于能量的模型
Ensemble learning集成学习
Ensemble pruning集成修剪
Error Correcting Output Codes/ECOC纠错输出码
Error rate错误率
Error-ambiguity decomposition误差-分歧分解
Euclidean distance欧氏距离
Evolutionary computation 演化计算
Expectation-Maximization期望最大化
Expected loss 期望损失
Exploding Gradient Problem梯度爆炸问题
Exponential loss function 指数损失函数
Extreme Learning Machine/ELM超限学习机

Letter F

Factorization因子分解
False negative假负类
False positive假正类
False Positive Rate/FPR假正例率
Feature engineering特征工程
Feature selection特征选择
Feature vector特征向量
Featured Learning特征学习
Feedforward Neural Networks/FNN前馈神经网络
Fine-tuning微调
Flipping output翻转法
Fluctuation震荡
Forward stagewise algorithm前向分步算法
Frequentist频率主义学派
Full-rank matrix满秩矩阵
Functional neuron功能神经元

Letter G

Gain ratio增益率
Game theory博弈论
Gaussian kernel function高斯核函数
Gaussian Mixture Model高斯混合模型
General Problem Solving通用问题求解
Generalization泛化
Generalization error泛化误差
Generalization error bound泛化误差上界
Generalized Lagrange function广义拉格朗日函数
Generalized linear model广义线性模型
Generalized Rayleigh quotient广义瑞利商
Generative Adversarial Networks/GAN生成对抗网络
Generative Model生成模型
Generator生成器
Genetic Algorithm/GA遗传算法
Gibbs sampling吉布斯采样
Gini index基尼指数
Global minimum全局最小
Global Optimization全局优化
Gradient boosting梯度提升
Gradient Descent梯度下降
Graph theory图论
Ground-truth真相/真实

Letter H

Hard margin 硬间隔
Hard voting硬投票
Harmonic mean调和平均
Hesse matrix海塞矩阵
Hidden dynamic model隐动态模型
Hidden layer隐藏层
Hidden Markov Model/HMM隐马尔可夫模型
Hierarchical clustering层次聚类
Hilbert space希尔伯特空间
Hinge loss function合页损失函数
Hold-out留出法
Homogeneous同质
Hybrid computing混合计算
Hyperparameter超参数
Hypothesis假设
Hypothesis test假设验证

Letter I

ICML国际机器学习会议
Improved iterative scaling/IIS改进的迭代尺度法
Incremental learning增量学习
Independent and identically distributed/i.i.d.独立同分布
Independent Component Analysis/ICA独立成分分析
Indicator function指示函数
Individual learner个体学习器
Induction归纳
Inductive bias归纳偏好
Inductive learning归纳学习
Inductive Logic Programming/ILP归纳逻辑程序设计
Information entropy信息熵
Information gain信息增益
Input layer输入层
Insensitive loss不敏感损失
Inter-cluster similarity 簇间相似度
International Conference for Machine Learning/ICML国际机器学习大会
Intra-cluster similarity簇内相似度
Intrinsic value固有值
Isometric Mapping/Isomap等度量映射
Isotonic regression等分回归
Iterative Dichotomiser迭代二分器

Letter K

Kernel method核方法
Kernel trick核技巧
Kernelized Linear Discriminant Analysis/KLDA 核线性判别分析
K-fold cross validationk 折交叉验证/k 倍交叉验证
K-Means ClusteringK - 均值聚类
K-Nearest Neighbours Algorithm/KNNK近邻算法
Knowledge base知识库
Knowledge Representation知识表征

Letter L

Label space标记空间
Lagrange duality拉格朗日对偶性
Lagrange multiplier拉格朗日乘子
Laplace smoothing拉普拉斯平滑
Laplacian correction拉普拉斯修正
Latent Dirichlet Allocation隐狄利克雷分布
Latent semantic analysis潜在语义分析
Latent variable隐变量
Lazy learning 懒惰学习
Learner学习器
Learning by analogy类比学习
Learning rate学习率
Learning Vector Quantization/LVQ学习向量量化
Least squares regression tree最小二乘回归树
Leave-One-Out/LOO留一法
linear chain conditional random field线性链条件随机场
Linear Discriminant Analysis/LDA线性判别分析
Linear model线性模型
Linear Regression线性回归
Link function联系函数
Local Markov property局部马尔可夫性
Local minimum局部最小
Log likelihood对数似然
Log odds/logit对数几率
Logistic RegressionLogistic 回归
Log-likelihood对数似然
Log-linear regression对数线性回归
Long-Short Term Memory/LSTM长短期记忆
Loss function损失函数

Letter M

Machine translation/MT机器翻译
Macron-P宏查准率
Macron-R宏查全率
Majority voting绝对多数投票法
Manifold assumption流形假设
Manifold learning流形学习
Margin theory间隔理论
Marginal distribution边际分布
Marginal independence 边际独立性
Marginalization 边际化
Markov Chain Monte Carlo/MCMC马尔可夫链蒙特卡罗方法
Markov Random Field马尔可夫随机场
Maximal clique最大团
Maximum Likelihood Estimation/MLE极大似然估计/极大似然法
Maximum margin最大间隔
Maximum weighted spanning tree最大带权生成树
Max-Pooling最大池化
Mean squared error均方误差
Meta-learner元学习器
Metric learning度量学习
Micro-P微查准率
Micro-R微查全率
Minimal Description Length/MDL最小描述长度
Minimax game极小极大博弈
Misclassification cost误分类成本
Mixture of experts混合专家
Momentum动量
Moral graph道德图/端正图
Multi-class classification多分类
Multi-document summarization多文档摘要
Multi-layer feedforward neural networks多层前馈神经网络
Multilayer Perceptron/MLP多层感知器
Multimodal learning多模态学习
Multiple Dimensional Scaling多维缩放
Multiple linear regression多元线性回归
Multi-response Linear Regression /MLR多响应线性回归
Mutual information互信息

Letter N

Naive bayes 朴素贝叶斯
Naive Bayes Classifier朴素贝叶斯分类器
Named entity recognition命名实体识别
Nash equilibrium纳什均衡
Natural language generation/NLG自然语言生成
Natural language processing自然语言处理
Negative class负类
Negative correlation负相关法
Negative Log Likelihood负对数似然
Neighbourhood Component Analysis/NCA近邻成分分析
Neural Machine Translation神经机器翻译
Neural Turing Machine神经图灵机
Newton method牛顿法
NIPS国际神经信息处理系统会议
No Free Lunch Theorem/NFL没有免费的午餐定理
Noise-contrastive estimation噪音对比估计
Nominal attribute列名属性
Non-convex optimization非凸优化
Nonlinear model非线性模型
Non-metric distance非度量距离
Non-negative matrix factorization非负矩阵分解
Non-ordinal attribute 无序属性
Non-Saturating Game非饱和博弈
Norm范数
Normalization归一化
Nuclear norm核范数
Numerical attribute数值属性

Letter O

Objective function目标函数
Oblique decision tree斜决策树
Occam's razor奥卡姆剃刀
Odds几率
Off-Policy离策略
One shot learning一次性学习
One-Dependent Estimator/ODE独依赖估计
On-Policy在策略
Ordinal attribute有序属性
Out-of-bag estimate包外估计
Output layer输出层
Output smearing输出调制法
Overfitting过拟合/过配
Oversampling过采样

Letter P

Paired t-test成对 t 检验
Pairwise成对型
Pairwise Markov property成对马尔可夫性
Parameter参数
Parameter estimation参数估计
Parameter tuning调参
Parse tree解析树
Particle Swarm Optimization/PSO粒子群优化算法
Part-of-speech tagging词性标注
Perceptron感知机
Performance measure性能度量
Plug and Play Generative Network即插即用生成网络
Plurality voting相对多数投票法
Polarity detection极性检测
Polynomial kernel function多项式核函数
Pooling池化
Positive class正类
Positive definite matrix正定矩阵
Post-hoc test后续检验
Post-pruning后剪枝
potential function势函数
Precision查准率/准确率
Prepruning预剪枝
Principal component analysis/PCA主成分分析
Principle of multiple explanations多释原则
Prior先验
Probability Graphical Model概率图模型
Proximal Gradient Descent/PGD近端梯度下降
Pruning剪枝
Pseudo-label伪标记

Letter Q

Quantized Neural Network量子化神经网络
Quantum computer量子计算机
Quantum Computing量子计算
Quasi Newton method拟牛顿法

Letter R

Radial Basis Function/RBF径向基函数
Random Forest Algorithm随机森林算法
Random walk随机漫步
Recall查全率/召回率
Receiver Operating Characteristic/ROC受试者工作特征
Rectified Linear Unit/ReLU线性修正单元
Recurrent Neural Network循环神经网络
Recursive neural network递归神经网络
Reference model 参考模型
Regression回归
Regularization正则化
Reinforcement learning/RL强化学习
Representation learning表征学习
Representer theorem表示定理
reproducing kernel Hilbert space/RKHS再生核希尔伯特空间
Re-sampling重采样法
Rescaling再缩放
Residual Mapping残差映射
Residual Network残差网络
Restricted Boltzmann Machine/RBM受限玻尔兹曼机
Restricted Isometry Property/RIP限定等距性
Re-weighting重赋权法
Robustness稳健性/鲁棒性
Root node根结点
Rule Engine规则引擎
Rule learning规则学习

Letter S

Saddle point鞍点
Sample space样本空间
Sampling采样
Score function 评分函数
Self-Driving自动驾驶
Self-Organizing Map/SOM自组织映射
Semi-naive Bayes classifiers 半朴素贝叶斯分类器
Semi-Supervised Learning半监督学习
semi-Supervised Support Vector Machine半监督支持向量机
Sentiment analysis情感分析
Separating hyperplane分离超平面
Sigmoid functionSigmoid 函数
Similarity measure相似度度量
Simulated annealing模拟退火
Simultaneous localization and mapping同步定位与地图构建
Singular Value Decomposition奇异值分解
Slack variables松弛变量
Smoothing平滑
Soft margin 软间隔
Soft margin maximization软间隔最大化
Soft voting软投票
Sparse representation稀疏表征
Sparsity稀疏性
Specialization特化
Spectral Clustering谱聚类
Speech Recognition语音识别
Splitting variable切分变量
Squashing function挤压函数
Stability-plasticity dilemma可塑性-稳定性困境
Statistical learning统计学习
Status feature function状态特征函
Stochastic gradient descent随机梯度下降
Stratified sampling分层采样
Structural risk结构风险
Structural risk minimization/SRM结构风险最小化
Subspace子空间
Supervised learning监督学习/有导师学习
support vector expansion 支持向量展式
Support Vector Machine/SVM支持向量机
Surrogat loss替代损失
Surrogate function替代函数
Symbolic learning符号学习
Symbolism符号主义
Synset同义词集

Letter T

T-Distribution Stochastic Neighbour Embedding/t-SNET - 分布随机近邻嵌入
Tensor张量
Tensor Processing Units/TPU张量处理单元
The least square method最小二乘法
Threshold阈值
Threshold logic unit阈值逻辑单元
Threshold-moving阈值移动
Time Step时间步骤
Tokenization标记化
Training error训练误差
Training instance训练示例/训练例
Transductive learning直推学习
Transfer learning迁移学习
Treebank树库
Tria-by-error试错法
True negative真负类
True positive真正类
True Positive Rate/TPR真正例率
Turing Machine图灵机
Twice-learning 二次学习

Letter U

Underfitting欠拟合/欠配
Undersampling欠采样
Understandability可理解性
Unequal cost非均等代价
Unit-step function单位阶跃函数
Univariate decision tree单变量决策树
Unsupervised learning无监督学习/无导师学习
Unsupervised layer-wise training无监督逐层训练
Upsampling上采样

Letter V

Vanishing Gradient Problem梯度消失问题
Variational inference变分推断
VC TheoryVC维理论
Version space版本空间
Viterbi algorithm维特比算法
Von Neumann architecture冯 · 诺伊曼架构

Letter W

Wasserstein GAN/WGANWasserstein生成对抗网络
Weak learner弱学习器
Weight权重
Weight sharing权共享
Weighted voting加权投票法
Within-class scatter matrix类内散度矩阵
Word embedding词嵌入
Word sense disambiguation词义消歧

Letter Z

Zero-data learning零数据学习
Zero-shot learning零次学习

,