V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  yupbank  ›  全部回复第 1 页 / 共 2 页
回复总数  25
1  2  
use case of Normal and Old.
to retain change history and able to mutate a dictionary base object in rdd

```python
data = [dict(sound=1, counting=2, c=4) for _ in xrange(1000000)]

data_rdd = sc.parallelize(map(Normal, data))
#sc is pyspark context

def function(normal):
new_normal = normal.mutate('counting', 3).mutate('sound', 2)
#still do some calculation with normal [ 1 ]
#even do something with the change history through normal.son.current. normal.son.son.current [ 2 ]
return new_normal

data_rdd.map(function).collect()
```
----
但有些 use case 不会发生[ 1 ],[ 2 ]两种情况。 那样 gc 直接回收 old 。 因为在 spark 集群跑,所以一点点的性能优势可以放大好多。。

我想改进代码可读性。。毕竟直接 inplace 的改变对象的__class__ 好粗暴

(之前的设计不是我搞得。。
2016-05-10 16:15:37 +08:00
回复了 fleuria 创建的主题 酷工作 [北京][知乎] 招聘效率开发工程师, 15~30k
f 叔还在 zhihu 呢啊
2015-08-05 17:47:53 +08:00
回复了 cheng4741 创建的主题 程序员 接过外包的同学帮忙看一下,这个报价多少比较合理。
楼主从哪接的外包啊...

偶尔也想找点外包来做哎
2014-11-25 09:32:20 +08:00
回复了 yupbank 创建的主题 问与答 现在外包做 app 怎么收费啊?
@xjtlujoe 要是做一个带聊天,带设计的app大概要多少钱啊...
stdyun吧,不过如果网站不备案还想用自己的域名,任何一家都不靠谱

国家开个大会,就会抓一次,不然就得打游击...
2013-03-11 16:27:40 +08:00
回复了 a7898585 创建的主题 程序员 推荐个好用的ocr软件呗
gocr。
2013-03-06 13:31:50 +08:00
回复了 talentsnail 创建的主题 VPS 用户主要在国内,Linode,阿里云,应该选哪个?
是吧。。
2013-03-05 21:00:14 +08:00
回复了 talentsnail 创建的主题 VPS 用户主要在国内,Linode,阿里云,应该选哪个?
stdyun,速度快,客服好。
2013-02-06 18:26:17 +08:00
回复了 leofml 创建的主题 Vim 关于vim自动补全python的求助
。。。。哥,这个应该是pycharm的截图吧?
人家花几百块钱一年买来的,你想找个插件就搞到这么流弊的效果,有点不太现实吧?

ps: try, ropevim?
2013-01-30 18:07:35 +08:00
回复了 liuxurong 创建的主题 Linux 硬盘有40G,塞了35G文件,如何把35G打包成一个文件?
还有5G的可用硬盘空间,最直接的方法是,再现在硬盘上,用小刀再刻个35G新空间出来。一切问题就解决啦
2013-01-19 19:11:25 +08:00
回复了 hartnett 创建的主题 Python mongodb中查出来的数据如何向tornado的模板传参数?
[u'\u90ed\u4f1f'] 这个是list,你试试 entry['title'][0]


@hiwljun
2013-01-04 18:27:40 +08:00
回复了 wuxiaolin 创建的主题 PHP \x1D\x04\x00\x08\x00\x00\x00 这种是什么数据格式
base64
2012-12-31 15:07:51 +08:00
回复了 kenneth 创建的主题 Python 想写个程序定时发微博,用那种方案好?
crontab?
2012-12-28 12:49:34 +08:00
回复了 wuxqing 创建的主题 云计算 用过最烂的云服务器就数腾讯的CVM了
推荐楼主换用 stdyun -。- 速度快,客服态度好什么的,爽歪歪我用的,反正

他们现在支持api了,我准备过段时间给自己折腾一个后台
2012-12-12 10:45:28 +08:00
回复了 ltzliwe 创建的主题 Linux 把程序守护进程化
有个叫python-daemon的包
2012-12-12 10:27:59 +08:00
回复了 ry_wang 创建的主题 Python 请各位看下这个Python版本兼容的问题.
要不,自己把不靠谱的接口全部山寨一遍吧,以后发现不兼容的,就在前面换。
2012-12-12 10:23:38 +08:00
回复了 talentsnail 创建的主题 MySQL tags的数据库设计问题
@ElmerZhang 。。。人家有topic_tag表

其实扯那么多范式也没有说到点子吧,楼主是来问他那个冗余巧不巧妙的。
2012-12-12 10:21:43 +08:00
回复了 talentsnail 创建的主题 MySQL tags的数据库设计问题
@napoleonu ...那个topic-> tag还是加个缓存吧,不要放表了,不然一个topic新增一个tag,你多了一张topic表需要维护。

80000页的缓存问题。。哥,缓存真不是这么操作的,一口气命中80000页也太流弊了。。
2012-12-12 02:44:55 +08:00
回复了 wog 创建的主题 程序员 为什么面向对象分析与设计的能力这么不受重视
多用几种语言,基本上就能明白设计模式是怎样的一种东西

-,- python农表示,偶尔日一次java,认识到设计模式干嘛的了。。

ps:感觉面试面算法啥的,就和找工作要看你本科毕业一样(新人)

以后进去可能高中生不到的水平就能干的事。。。门口就得把个关,入场券。。不然凭什么招你呢
2012-11-24 16:30:17 +08:00
回复了 nasa 创建的主题 Python 创业技术选择
。。。给楼主推荐node.js会不会挨打?

嗯。。就有不同意对方,不如找第三个语言开始好了

其实,现在一般的语言没差多少。。一通百通,等要求高的时候,需要语言特性的时候,你们估计就熟悉nodejs了。

然后你们还可以拓展到写css,写html5,然后基本上全部业务都能接了
1  2  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   3064 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 32ms · UTC 12:57 · PVG 20:57 · LAX 04:57 · JFK 07:57
Developed with CodeLauncher
♥ Do have faith in what you're doing.