Horse_Chasing的博客
Horse_Chasing · 共 5 篇文章
Python的三目运算符技巧
刚刚接触Python,今天用Python写爬虫时,突然发现它没有三目运算符,于是联想到之前写ruby和javascript的一些方式,应该可以实现 1、a = b if true else c 2、a = b || c 所有博客已经转移至leanote: http://blog.leanote.com/shiwei/ 或者: http://luoshiwei.me/
2016-03-31 00:24 · 编程语言 · 评论(0)
PostgreSQL主键自增方法
PG主键自增,方式跟oracle类似 1、首先创建序列 CREATE SEQUENCE test_c_id_seq START WITH 1 INCREMENT BY 1 NO MINVALUE NO MAXVALUE CACHE 1; 2、如果表已经存在了,则执行下面语句: alter table test_c alter column id set default nextval('test_c_id_seq'); 3、如果表不存在,则: create table table_name( id int not null primary key default nextval('id_se…
2016-03-31 00:19 · 数据库 · 评论(0)
PostgreSQL操作笔记
一、安装 (源码编译安装) 1、下载PG最新版本,解压 tar -xvf 2、./configure --prefix=/usr/local/pgsql9.2.4 --with-perl --with-python(可用perl、python语言写自定义的函数,一般可不需要) 3、make 4、make install 5、cd /usr/local/pgsql9.2.4 sudo ln -sf /usr/local/pgsql9.2.4 /usr/local/pgsql 这是为了方便后续的PG升级,更换软连接即可 6、安装后的配置:vim /etc/profile 加入如下内容 expor…
2015-12-14 00:15 · 数据库 · 评论(0)
Spark开发指南
目录 Spark开发指南 简介 接入Spark Java 初始化Spark Java 弹性分布式数据集 并行集合 外部数据集 RDD操作 基本操作 传递Functions到Spark Wroking with Key-Value Pairs使用键/值对工作 转换 动作 RDD持久化 存储级别的选择 移除数据 共享变量 Spark开发指南 简介 总的来说,每一个Spark应用程序,都是由一个驱动程序组成,它运行用户的main函数,并且在一个集群上执行各种各样的并行操作。Spark提 供的主要的抽象(概念)是一个弹性分布式数据集,它是一个元素集合,划分到集群的不同节点上,可以被并行操作。RDDs…
2015-04-22 14:11 · 编程语言 · 评论(0)
spark java api 开发
安装这里就不写了,因为网上已有中文介绍,这里主要是介绍一下入门,和hadoop一样,学习的时候,首先学习spark提供的字符统计例子:javaWordCount Java代码 import scala.Tuple2; import spark.api.java.JavaPairRDD; import spark.api.java.JavaRDD; import spark.api.java.JavaSparkContext; import spark.api.java.function.FlatMapFunction; import spark.api.java.function.Funct…
2015-04-22 14:10 · 编程语言 · 评论(0)