【技術性】OO語言知識

持續更新。
--------------------C++篇------------------------分佈式

  1. 分佈計算提升效率的庫及庫函數,好比FB的folly庫就有folly::gen一大堆函數,e.g.
auto results = from(ids) | get<0>() | as<vector>();

本質上和e.g.Pyspark的分佈式計算的底層思想是一致的。函數

--------------------Python篇-----------------------spa

  1. Python特別適用於搭data pipeline,好比FB的Dataswarm repo(用於run hive&presto tasks)和在Zillow用的Pyspark,其實根本上都是用了Python的腳本特性,串聯起tasks來。
  2. dict的4種常見操做
    增:d['key1'] = 4
    刪:d.pop('key1')
    找key:if 'key1' in d
    get值:d.get('key1')
  3. subprocess:
    Popen, e.g.rest

    process = Popen(['cat', 'test.py'], stdout=PIPE, stderr=PIPE)

    至關於執行了cat test.py這個命令
    而後能夠用communicate函數來read,e.g. stdout, stderr = process.communicate(); print stdoutcode

  4. yield & generators
    e.g.ip

    def foo():
        for i in range(0,100):
            yield i*i
    generator = foo()
    for i in generator:
        print(i)
  5. eee
相關文章
相關標籤/搜索