数据湖

前言     最近做了新闻去重算法的工作，mark下     两个应用场景：1. 重复新闻整体检测、去重   2. 从非重复的新闻…

参考 http://blog.csdn.net/u012162613/article/details/44261657       &nbs…

特征工程思维导图如下图。 本文借助sklearn介绍其中的预处理部分 二 单特征预处理        <1> 标准化 &nbsp…

昨天开始升级hpc的tensorflow，中间踩了个大坑。到现在才弄顺，mark一下。 gpu版的tf，可以在github上下载，然后按照教程使用pip安装。但需要更新很多系统包 …

1 背景 前面在redhat7服务器上升级了tensorflow1.0，发现GPU用不了 根据教程，测试GPU： # 新建一个 graph. import tensorflow a…

今天在使用format拼sql语句时遇到一下问题： 其中数据库中first_16字段是text类型 >>> s = ‘12345’ >>> q0…

问题：启动一个python进程，ps发现还有多个额外进程 说明： 一个multiprocessing.Manager对象会控制一个服务器进程，其他进程可以通过代理的方式来访问这个服…

pandas 处理格式化数据的利器。 本文会不断更新 1. DataFram 1.1 使用字典构造 >>> import pandas as pd >&gt…

1 关于语素 百度百科的解释： 语法单位有大有小，最大的语法单位是句子，比句子小的语法单位，依次是短语、词、语素。人类的语言是有声音、有意义的，是语音和语义的结合体，这便是语法单位…

哈工大ltp词性列表 Tag Description Example a adjective 美丽 b other noun-modifier 大型, 西式 c conjuncti…