亚博vip86.com 前端设计 程序设计 Java相关 移动开发 数据库/运维 软件/图像 大数据/云计算 其他经验
大数据/云/AI:HadoopApache PigApache KafkaApache StormImpalaZookeeperSASTensorFlow人工智能基础Apache KylinopenstackFlink
?大数据/云/AI

机器学习——几种距离度量方法比较【转载】

本文转自https: my.oschina.net/hunglish/blog/787596,原着地址:http: yuguangchuan.github.io/2015/11/17/Distance-measurement ? ? 1. 欧氏距离(Euclidea...[2019/9/2]

代码解读 | VINS 视觉前端

本文作者是计算机视觉life公众号成员蔡量力,由于格式问题部分内容显示可能有问题,更好的阅读体验,请查看原文链接:代码解读 | VINS 视觉前端 vins前端概述 在搞清楚VINS前端之前,首先要搞清楚什么是SLAM前端? SLAM的前端、后端系统本身没有特别明确的划分,但是在实际...[2019/9/2]

合并多个tensorflow模型的办法

直接上代码: import tensorflow as tf from tensorflow.python.tools import freeze_graph from tensorflow.python.framework.graph_util import convert_vari...[2019/9/2]

TensorFlow基础知识

1 综述 TensorFlow的编程系统中: 使用张量(tensor)来表示数据 使用图(graph)来表示计算任务。 图中的节点被称之为 op (operation 的缩写). 一个 op 获得 0 个或多个 Tensor, 执行计算, 产生 0 个或多个 Tensor. 每个 Te...[2019/9/2]

剑指Offer(二十五):复杂链表的复制

剑指Offer(二十五):复杂链表的复制 搜索微信公众号:''AI-ming3526''或者''计算机视觉这件小事'' 获取更多算法、机器学习干货 csdn:https: blog.csdn.net/baidu_31657889/ github:https: github.com/ai...[2019/9/2]

Attention机制的精要总结,附:中英文机器翻译的实现!

1. 什么是Attention机制 在“编码器—解码器(seq2seq)”?节?,解码器在各个时间步依赖相同的背景变量来获取输?序列信息。当编码器为循环神经?络时,背景变量来?它最终时间步的隐藏状态。 现在,让我们再次思考那?节提到的翻译例?:输?为英语序列“They”“are”“wa...[2019/9/2]

神经网络学习笔记(1)

原文链接:http: www.cnblogs.com/AlgrithmsRookie/p/11442235.html[2019/9/2]

hadoop--Unable to load native-hadoop library for your platform解决方法

笔者实验环境:centos 7.4.1708,hadoop-2.6.0-cdh5.14.2. 执行hadoop命令时出现以下告警,不能加载相关库: WARN util.NativeCodeLoader: Unable to load native-hadoop library...[2019/9/2]

Flink中Periodic水印和Punctuated水印实现原理(源码分析)

Flink中Periodic水印和Punctuated水印实现原理(源码分析)

在用户代码中,我们设置生成水印和事件时间的方法a ignTimestampsAndWatermarks()中这里有个方法的重载 我们传入的对象分为两种 A ignerWithPunctuatedWatermarks(可以理解为每条数据都会产生水印,如果不想产生水印,返回一个nul...[2019/9/2]

Flink中Idle停滞流机制(源码分析)

Flink中Idle停滞流机制(源码分析)

前几天在社区群上,有人问了一个问题   既然上游最小水印会决定窗口触发,那如果我上游其中一条流突然没有了数据,我的窗口还会继续触发吗? 看到这个问题,我蒙了???? 对哈,因为我是选择上游所有流中水印最小的一条作为当前水印时间,那万一最小水印的那条流突然里面没有数据了 那...[2019/9/2]

hadoop WordCount例子详解。

hadoop WordCount例子详解。

[学习笔记] 下载hadoop-2.7.4-src.tar.gz,拷贝hadoop-2.7.4-src.tar.gz中hadoop-mapreduce-project\hadoop-mapreduce-examples\src\main\java\org\apache\hadoop\...[2019/9/2]

Hbase基本原理

Hbase基本原理

一、hbase是什么 ?HBase 是一种类似于数据库的存储层,也就是说 HBase 适用于结构化的存储。并且 HBase 是一种列式的分布式数据库,是由当年的 Google 公布的 BigTable 的论文而生。HBase 底层依旧依赖 HDFS 来作为其物理存储。 &...[2019/9/2]

hadoop 安装

hadoop 开源软件,可靠的、分布式、可伸缩的框架。 分布在不同主机上的进程协同在一起构成的应用。 大数据解决了两个问题---------------------- 1T = 1024G1P = 1024T1E = 1024P1Z = 1024E1Y = 1024Z1N =...[2019/9/2]

替代Flume——Kafka Connect简介

我们知道过去对于Kafka的定义是分布式,分区化的,带备份机制的日志提交服务。也就是一个分布式的消息队列,这也是他最常见的用法。但是Kafka不止于此,打开最新的官网。 我们看到Kafka最新的定义是:Apache Kafka? is?a distributed stre...[2019/8/30]

剑指Offer(二十四):二叉树中和为某一值的路径

剑指Offer(二十四):二叉树中和为某一值的路径 搜索微信公众号:''AI-ming3526''或者''计算机视觉这件小事'' 获取更多算法、机器学习干货 csdn:https: blog.csdn.net/baidu_31657889/ github:https: github.c...[2019/8/30]

快速入门 Python 数据分析实用指南

Python 现如今已成为数据分析和数据科学使用上的标准语言和标准平台之一。那么作为一个新手小白,该如何快速入门 Python 数据分析呢? 下面根据数据分析的一般工作流程,梳理了相关知识技能以及学习指南。 数据分析一般工作流程如下: 数据采集 数据存储与提取 数据清洁及预处理 数...[2019/8/30]

seq2seq通俗理解----编码器和解码器(TensorFlow实现)

1. 什么是seq2seq 在?然语?处理的很多应?中,输?和输出都可以是不定?序列。以机器翻译为例,输?可以是?段不定?的英语?本序列,输出可以是?段不定?的法语?本序列,例如: 英语输?:“They”、“are”、“watching”、“.” 法语输出:“Ils”、“regard...[2019/8/30]

剑指Offer(二十三):二叉搜索树的后序遍历序列

剑指Offer(二十三):二叉搜索树的后序遍历序列 搜索微信公众号:''AI-ming3526''或者''计算机视觉这件小事'' 获取更多算法、机器学习干货 csdn:https: blog.csdn.net/baidu_31657889/ github:https: github.c...[2019/8/30]

Kafka集群环境配置

Kafka集群环境配置 1 环境准备 1.1 集群规划 Node02 Node03 Node04 zk zk zk kafka kafka kafka 1.2 jar包下载 安装包:kafka_2.11-0.8.2.1.tgz 下载地址:http: kafka....[2019/8/30]

AI资源对接需求汇总:第3期

更好的阅读体验,请查看首发原文链接:AI资源对接需求汇总:第3期 平台介绍 平台由人工智能领域几个知名原创公众号发起,总读者约25万。 主要面向人工智能领域的从业者,涵盖图像处理、三维计算机视觉、机器学习、深度学习、自然语言处理等技术,涉及手机影像、辅助/自动驾驶、移动机器人、无人机...[2019/8/30]

异常检测(2)——基于概率统计的异常检测(1)

  某个工厂生产了一批手机屏幕,为了评判手机屏幕的质量是否达到标准,质检员需要收集每个样本的若干项指标,比如大小、质量、光泽度等,根据这些指标进行打分,最后判断是否合格。现在为了提高效率,工厂决定使用智能检测进行第一步筛选,质检员只需要重点检测被系统判定为“不合格&rdquo...[2019/8/30]

win10 64下anaconda4.2.0(python3.5)

win10 64下anaconda4.2.0(python3.5)

python环境:win10 64下anaconda4.2.0(python3.5)。安装tensorflow过程是在Anaconda Prompt中进行安装 1:打开Anaconda Prompt   在安装之前,说几个关于conda的小命令   conda list:可以...[2019/8/30]

Flink的Job启动JobManager端(源码分析)

通过前面的文章了解到 Driver将用户代码转换成streamGraph再转换成Jobgraph后向Jobmanager端提交 JobManager启动以后会在Dispatcher.java起来RPC方法submitJob(jobGraph),用于接收来自Driver转化得到的J...[2019/8/30]

Hadoop RPC机制详解

     网络通信模块是分布式系统中最底层的模块,他直接支撑了上层分布式环境下复杂的进程间通信逻辑,是所有分布式系统的基础。远程过程调用(RPC)是一种常用的分布式网络通信协议,他允许运行于一台计算机的程序调用另一台计算机的子程序,同时将网络的通信细节隐藏起来,使得用户无需额外地为这个交...[2019/8/30]

大数据之路【第十篇】:kafka消息系统

大数据之路【第十篇】:kafka消息系统

一、简介 1、简介 简 介? Kafka是Linkedin于2010年12月份开源的消息系统? 一种分布式的、基于发布/订阅的消息系统 2、特点 – 消息持久化:通过O(1)的磁盘数据结构提供数据的持久化– 高吞吐量:每秒百万级的消息...[2019/8/30]

Windows用Eclipse来开发hadoop的WordCount的helloworld

[学习笔记] 2.Win7用Eclipse来开发hadoop的WordCount的helloworld网上下载hadoop-eclipse-plugin-2.7.4.jar,将该jar包拷贝到Eclipse安装目录下的dropins文件夹下,我的目录是C:\Users\test\ec...[2019/8/30]

Hadoop的eclipse的插件是怎么安装的?

[学习笔记] 1)网上下载hadoop-eclipse-plugin-2.7.4.jar,将该jar包拷贝到Eclipse安装目录下的dropins文件夹下,我的目录是C:\Users\test\eclipse\jee-oxygen\eclipse\dropins,然后重启Eclip...[2019/8/30]

自由变形技术(Free-Form Deformation)

自由变形技术(Free-Form Deformation)

  自由变形技术Free-Form Deformation是编辑几何模型的重要手段,它于80年代由Sederberg等人提出,目前许多三维建模软件中都有这种变形算法。自由变形方法在变形过程中并不是直接操作几何模型,而是把几何模型嵌入到变形空间,然后通过操作变形空间来使得嵌入其中的几何模型...[2019/8/29]

史诗级干货-python爬虫之增加CSDN访问量

史诗级干货-python爬虫之增加CSDN访问量 搜索微信公众号:‘AI-ming3526’或者’计算机视觉这件小事’ 获取更多算法、机器学习干货 csdn:https: blog.csdn.net/baidu_31657889/ github:https: github.com/ai...[2019/8/29]

剑指Offer(二十一):栈的压入、弹出序列

剑指Offer(二十一):栈的压入、弹出序列

剑指Offer(二十一):栈的压入、弹出序列 搜索微信公众号:''AI-ming3526''或者''计算机视觉这件小事'' 获取更多算法、机器学习干货 csdn:https: blog.csdn.net/baidu_31657889/ github:https: github.com/...[2019/8/29]

剑指Offer(二十二):从上往下打印二叉树

剑指Offer(二十二):从上往下打印二叉树 搜索微信公众号:''AI-ming3526''或者''计算机视觉这件小事'' 获取更多算法、机器学习干货 csdn:https: blog.csdn.net/baidu_31657889/ github:https: github.com/...[2019/8/29]

这次,在人工智能面前,人类输得一败涂地

霍金在生前向人类发出警告:慎用人工智能,当人工智能发展完全,就将是人类的末日。现在人工智能已经越来越深入地进入到大家的生活当中了,他们也越来越富有智慧,在某些领域,甚至已经打败了人类。科技的发展,在给大家带来便利的同时,也引发了大家的思考,让人类感到对未知恐惧:会不会有一天,人工智能程序...[2019/8/29]

综述 | 相机标定方法

本文作者蔡量力,公众号:计算机视觉life成员,由于格式原因,公式显示可能出问题,建议阅读原文链接:综述 | 相机标定方法 另外推荐几个原创的号 计算机视觉,Python,自然语言处理、数据挖掘相关,汇总最新资源,学习更高效! ? 在图像测量过程以及机器视觉应用中,为确定空间物体表面某...[2019/8/29]

ImageNet主要网络benchmark对比 - Mr-Lee

深度神经网络繁多,各自的性能指标怎样? 实际应用中,在速度、内存、准确率等各种约束下,应该尝试哪些模型作为backbone? 有paper对各个网络模型进行了对比分析,形成了一个看待所有主要模型的完整视角,其分析结果可以在实践中提供指导和帮助。 这篇博客主要整合了其中3篇文章的结论,...[2019/8/29]

python中几种自动微分库

简单介绍下python的几个自动求导工具,tangent、autograd、sympy;   在各种机器学习、深度学习框架中都包含了自动微分,微分主要有这么四种:手动微分法、数值微分法、符号微分法、自动微分法,这里分别简单走马观花(hello world式)的介绍下下面几种微分框架; ...[2019/8/29]

HDFS介绍~超详细

HDFS(Hadoop Distributed File System) ? (1) HDFS--Hadoop分布式文件存储系统 ? 源自于Google的GFS论文,HDFS是GFS的克隆版 HDFS是Hadoop中数据存储和管理的基础 他是一个高容错的...[2019/8/29]

Flink快速入门--安装与示例运行

flink是一款开源的大数据流式处理框架,他可以同时批处理和流处理,具有容错性、高吞吐、低延迟等优势,本文简述flink在windows和linux中安装步骤,和示例程序的运行。 首先要想运行Flink,我们需要下载并解压Flink的二进制包,下载地址如下:https: flink...[2019/8/29]

hadoop基本文件配置

[学习笔记] 5)hadoop基本文件配置:hadoop配置文件位于:/etc/hadoop下(etc即:“etcetera”(附加物))core-site.xml:???? &...[2019/8/29]

hdfs常用命令

[学习笔记] hdfs常用命令:i)防盗版实名手机尾号:73203。 hdfs dfs -mkdir /user 会在hadoop的根目录下创建一个目录。可以通过hdfs dfs -ls / 来查。 ii)在bin目录下,继续:hdfs dfs -put README...[2019/8/29]

Hadoop简介

Hadoop : Hadoop是Apache基金会旗下的一个分布式系统基础架构.主要包括 : 分布式文件系统HDFS,分布式资源管理系统Yarn.可以使得用户在不了解分布式底层细节的情况下,开发分布式程序,充分利用集群的分布式能力进行运算和存储 ? Hadoop核心构成 &...[2019/8/29]

Hadoop配置环境变量Program~2的用法

[学习笔记] 3)配置环境变量:(环境变量中的~1,~2,~3的用法)i)JAVA_HOME:注意C:\Program Files目录存在空格,变成C:\Progra~1\Java\jdk1.8.0_144。(注意:长于8个字符的文件名和文件夹名,都被简化成前面6个有效字符,后面~1...[2019/8/28]

?综述 | SLAM回环检测方法

本文作者任旭倩,公众号:计算机视觉life成员,由于格式原因,公式显示可能出问题,建议阅读原文链接:综述 | SLAM回环检测方法 在视觉SLAM问题中,位姿的估计往往是一个递推的过程,即由上一帧位姿解算当前帧位姿,因此其中的误差便这样一帧一帧的传递下去,也就是我们所说的累积误差。一个消...[2019/8/28]

jupyter notebook中导入其他ipynb文件中的代码

%%capture %run "../Untitled Folder 3/2nn.ipynb" %%capture 抑制输出%run "../Untitled Folder 3/2nn.ipynb" 应该是在当前文件中执行这个文件? 然后这个文件中的所有东西就相当...[2019/8/28]

人类的规划能力有多强大?

本文章译自OptaPlanner官网上,Geoffrey De Smet先生的博文,链接如下: https: www.optaplanner.org/blog/2015/06/03/HowGoodAreHumanPlanners.html?www.optaplanner.org ...[2019/8/28]

Kafka到底有几个Offset?——Kafka核心之偏移量机制

? Kafka是由LinkIn开源的实时数据处理框架,目前已经更新到2.3版本。不同于一般的消息中间件,Kafka通过数据持久化和磁盘读写获得了极高的吞吐量,并可以不依赖Storm,SparkStreaming的流处理平台,自己进行实时的流处理。 ? Kakfa的Offset机制是...[2019/8/28]

Flink的Job启动Driver端(源码分析)

整个Flink的Job启动是通过在Driver端通过用户的Envirement的execute()方法将用户的算子转化成StreamGraph 然后得到JobGraph通过远程RPC将这个JobGraph提交到JobManager对应的接口 JobManager转化成execut...[2019/8/28]

textRNN & textCNN的网络结构与代码实现!

1. 什么是textRNN textRNN指的是利用RNN循环神经网络解决文本分类问题,文本分类是自然语言处理的一个基本任务,试图推断出给定文本(句子、文档等)的标签或标签集合。 文本分类的应用非常广泛,如: 垃圾邮件分类:2分类问题,判断邮件是否为垃圾邮件 情感分析:2分类问题:判...[2019/8/27]

HBase 系列(九)——HBase 容灾与备份

一、前言 本文主要介绍 Hbase 常用的三种简单的容灾备份方案,即CopyTable、Export/Import、Snapshot。分别介绍如下: 二、CopyTable 2.1 简介 CopyTable可以将现有表的数据复制到新表中,具有以下特点: 支持时间区间 、row 区间 ...[2019/8/27]

HBase 系列(十)—— HBase 的 SQL 中间层 Phoenix

HBase 系列(十)—— HBase 的 SQL 中间层 Phoenix

一、Phoenix简介 Phoenix 是 HBase 的开源 SQL 中间层,它允许你使用标准 JDBC 的方式来操作 HBase 上的数据。在 Phoenix 之前,如果你要访问 HBase,只能调用它的 Java API,但相比于使用一行 SQL 就能实现数据查询,HBase 的 ...[2019/8/27]

【机器学习笔记】ID3构建决策树

  好多算法之类的,看理论描述,让人似懂非懂,代码走一走,现象就了然了。 引: from sklearn import tree names = [''size'', ''scale'', ''fruit'', ''butt''] labels = [1,1,1,1,...[2019/8/27]

462
2
记录数:1384 页数:1/2812345678910下一页尾页
加载更多