E lasticsearch是一款分佈式搜索引擎,支持在大數據環境中進行實時數據分析。它基於Apache Lucene文本搜索引擎,內部功能經過ReST API暴露給外部。除了經過HTTP直接訪問Elasticsearch,還能夠經過支持Java、JavaScript、Python及更多語言的客戶 端庫來訪問。它也支持集成Apache Hadoop環境。Elasticsearch在有些處理海量數據的公司中已經有所應用,如GitHub、Foursquare和SoundCloud等。html
elasticsearch 他對外提供了rest的http的接口,貌似很強大的樣子。 可是我們的一些數據平臺市場會對於elasticsearch的數據進行分析,尤爲是實時分析。 固然不能用 http的方式。python
下面是http的方式的一個demo:vim
下面是查詢,/ceshi是索引,rui是type,搜索的內容是title爲jones的數據curl
curl http://vim.xiaorui.cc:9200/ceshi/rui/_search?q=title:jones&size=5&pretty=true
添加數據elasticsearch
curl -X POST -d '{"title":"jones","amount":5.7}'
可是據說,1.x以後不能直接curl,這不是重點忽略分佈式
下面介紹一個python使用elasticsearch的例子ide
from datetime import datetime from elasticsearch import Elasticsearch #鏈接elasticsearch,默認是9200 es = Elasticsearch() #建立索引,索引的名字是my-index,若是已經存在了,就返回個400, #這個索引能夠如今建立,也能夠在後面插入數據的時候再臨時建立 es.indices.create(index='my-index',ignore) #{u'acknowledged':True} #插入數據,(這裏省略插入其餘兩條數據,後面用) es.index(index="my-index",doc_type="test-type",id=01,body={"any":"data01","timestamp":datetime.now()}) #{u'_type':u'test-type',u'created':True,u'_shards':{u'successful':1,u'failed':0,u'total':2},u'_version':1,u'_index':u'my-index',u'_id':u'1} #也能夠,在插入數據的時候再建立索引test-index es.index(index="test-index",doc_type="test-type",id=42,body={"any":"data","timestamp":datetime.now()}) #查詢數據,兩種get and search #get獲取 res = es.get(index="my-index", doc_type="test-type", id=01) print(res) #{u'_type': u'test-type', u'_source': {u'timestamp': u'2016-01-20T10:53:36.997000', u'any': u'data01'}, u'_index': u'my-index', u'_version': 1, u'found': True, u'_id': u'1'} print(res['_source']) #{u'timestamp': u'2016-01-20T10:53:36.997000', u'any': u'data01'} #search獲取 res = es.search(index="test-index", body={"query":{"match_all":{}}}) print(res) #{u'hits': # { # u'hits': [ # {u'_score': 1.0, u'_type': u'test-type', u'_id': u'2', u'_source': {u'timestamp': u'2016-01-20T10:53:58.562000', u'any': u'data02'}, u'_index': u'my-index'}, # {u'_score': 1.0, u'_type': u'test-type', u'_id': u'1', u'_source': {u'timestamp': u'2016-01-20T10:53:36.997000', u'any': u'data01'}, u'_index': u'my-index'}, # {u'_score': 1.0, u'_type': u'test-type', u'_id': u'3', u'_source': {u'timestamp': u'2016-01-20T11:09:19.403000', u'any': u'data033'}, u'_index': u'my-index'} # ], # u'total': 5, # u'max_score': 1.0 # }, #u'_shards': {u'successful': 5, u'failed': 0, u'total':5}, #u'took': 1, #u'timed_out': False #} for hit in res['hits']['hits']: print(hit["_source"]) res = es.search(index="test-index", body={'query':{'match':{'any':'data'}}}) #獲取any=data的全部值 print(res)
至於body裏面參數的設置,具體請看:https://www.elastic.co/guide/en/elasticsearch/reference/current/query-filter-context.html oop