~ubuntu-branches/debian/sid/golang-github-blevesearch-bleve/sid

//  Copyright (c) 2016 Couchbase, Inc.

//

// Licensed under the Apache License, Version 2.0 (the "License");

// you may not use this file except in compliance with the License.

// You may obtain a copy of the License at

//

//              http://www.apache.org/licenses/LICENSE-2.0

//

// Unless required by applicable law or agreed to in writing, software

// distributed under the License is distributed on an "AS IS" BASIS,

// WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.

// See the License for the specific language governing permissions and

// limitations under the License.

 

package letter

 

import (

        "unicode"

 

        "github.com/blevesearch/bleve/analysis"

        "github.com/blevesearch/bleve/analysis/tokenizer/character"

        "github.com/blevesearch/bleve/registry"

)

 

const Name = "letter"

 

func TokenizerConstructor(config map[string]interface{}, cache *registry.Cache) (analysis.Tokenizer, error) {

        return character.NewCharacterTokenizer(unicode.IsLetter), nil

}

 

func init() {

        registry.RegisterTokenizer(Name, TokenizerConstructor)

}