← Back to branch summary

~ubuntu-branches/ubuntu/oneiric/mozc/oneiric

« back to all changes in this revision

Viewing changes to dictionary/dictionary_preloader.cc

  • Committer: Bazaar Package Importer
  • Author(s): Nobuhiro Iwamatsu
  • Date: 2010-07-14 03:26:47 UTC
  • mfrom: (1.1.1 upstream)
  • Revision ID: james.westby@ubuntu.com-20100714032647-13qjisj6m8cm8jdx
Tags: 0.12.410.102-1
http://bugs.debian.org/588971
http://bugs.debian.org/588972
* New upstream release (Closes: #588971).
  - Add mozc-server, mozc-utils-gui and scim-mozc packages.
* Update debian/rules.
  Add --gypdir option to build_mozc.py.
* Update debian/control.
  - Bumped standards-version to 3.9.0.
  - Update description.
* Add mozc icon (Closes: #588972).
* Add patch which revises issue 18.
  ibus_mozc_issue18.patch
* kFreeBSD build support.
  support_kfreebsd.patch

Show diffs side-by-side

added added

removed removed

Lines of Context:
dictionary/dictionary_preloader.cc
 
1
// Copyright 2010, Google Inc.
 
2
// All rights reserved.
 
3
//
 
4
// Redistribution and use in source and binary forms, with or without
 
5
// modification, are permitted provided that the following conditions are
 
6
// met:
 
7
//
 
8
//     * Redistributions of source code must retain the above copyright
 
9
// notice, this list of conditions and the following disclaimer.
 
10
//     * Redistributions in binary form must reproduce the above
 
11
// copyright notice, this list of conditions and the following disclaimer
 
12
// in the documentation and/or other materials provided with the
 
13
// distribution.
 
14
//     * Neither the name of Google Inc. nor the names of its
 
15
// contributors may be used to endorse or promote products derived from
 
16
// this software without specific prior written permission.
 
17
//
 
18
// THIS SOFTWARE IS PROVIDED BY THE COPYRIGHT HOLDERS AND CONTRIBUTORS
 
19
// "AS IS" AND ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT
 
20
// LIMITED TO, THE IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR
 
21
// A PARTICULAR PURPOSE ARE DISCLAIMED. IN NO EVENT SHALL THE COPYRIGHT
 
22
// OWNER OR CONTRIBUTORS BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL,
 
23
// SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT
 
24
// LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES; LOSS OF USE,
 
25
// DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED AND ON ANY
 
26
// THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT LIABILITY, OR TORT
 
27
// (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE
 
28
// OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE.
 
29
 
 
30
#include "dictionary/dictionary_preloader.h"
 
31
 
 
32
#if defined(OS_WINDOWS)
 
33
#include <process.h>
 
34
#include <windows.h>
 
35
#include <CommCtrl.h>  // for CCSIZEOF_STRUCT
 
36
#else
 
37
#include <pthread.h>   // for pthread_create
 
38
#endif
 
39
 
 
40
#ifdef OS_MACOSX
 
41
#include <mach/mach_host.h>
 
42
#endif
 
43
 
 
44
#include "base/util.h"
 
45
#include "base/singleton.h"
 
46
#include "base/thread.h"
 
47
#include "session/config_handler.h"
 
48
#include "session/config.pb.h"
 
49
 
 
50
DEFINE_int32(preload_memory_factor, 5,
 
51
             "A factor to be multiplied to the preload size "
 
52
             "and compared with available system memory."
 
53
             "Preload is enabled if available system memory is "
 
54
             "large enough");
 
55
 
 
56
namespace mozc {
 
57
namespace {
 
58
bool IsPreloadable(const char *image, size_t size) {
 
59
  if (!GET_CONFIG(use_dictionary_suggest)) {
 
60
    return false;
 
61
  }
 
62
 
 
63
  const int64 preload_size = size;
 
64
 
 
65
#ifdef OS_WINDOWS
 
66
  MEMORYSTATUSEX status;
 
67
  ::ZeroMemory(&status, sizeof(status));
 
68
  status.dwLength = CCSIZEOF_STRUCT(MEMORYSTATUSEX, ullAvailExtendedVirtual);
 
69
  if (!::GlobalMemoryStatusEx(&status)) {
 
70
    LOG(ERROR) <<
 
71
        "GlobalMemoryStatusEx failed. error = " << ::GetLastError();
 
72
    return false;
 
73
  }
 
74
 
 
75
  return status.ullAvailPhys > preload_size * FLAGS_preload_memory_factor;
 
76
#endif
 
77
 
 
78
#ifdef OS_MACOSX
 
79
  struct vm_statistics vm_info;
 
80
  mach_msg_type_number_t count = HOST_VM_INFO_COUNT;
 
81
  if (KERN_SUCCESS !=
 
82
      host_statistics(mach_host_self(), HOST_VM_INFO,
 
83
                      reinterpret_cast<host_info_t>(&vm_info), &count)) {
 
84
    LOG(ERROR) << "host_statistics() failed: ";
 
85
    return false;
 
86
  }
 
87
 
 
88
  const uint64 available_memory = vm_info.free_count * vm_page_size;
 
89
  return available_memory > preload_size * FLAGS_preload_memory_factor;
 
90
#endif
 
91
 
 
92
#ifdef OS_LINUX
 
93
  // TOOD(taku): implement Linux version.
 
94
  // Since Linux is installed into heterogeneous environment,
 
95
  // we have to check the amount of available memory.
 
96
  LOG(WARNING) << "Dictionary preloading is not implemented: " << preload_size;
 
97
  return true;
 
98
  //  return false;
 
99
#endif
 
100
}
 
101
 
 
102
// Note: this thread proc may be terminated by the end of main thread.
 
103
class PreloaderThread : public Thread {
 
104
 public:
 
105
  PreloaderThread() : image_(NULL), size_(0) {}
 
106
 
 
107
  ~PreloaderThread() {
 
108
    Join();
 
109
  }
 
110
 
 
111
  void StartPreloader(const char *image, size_t size) {
 
112
    if (IsRunning()) {
 
113
      LOG(WARNING) << "Preloader is already running";
 
114
      return;
 
115
    }
 
116
    image_ = image;
 
117
    size_ = size;
 
118
    Thread::Start();
 
119
  }
 
120
 
 
121
  void Run() {
 
122
#ifdef OS_WINDOWS
 
123
    // GetCurrentThread returns pseudo handle, which you need not
 
124
    // to pass CloseHandle.
 
125
    const HANDLE thread_handle = ::GetCurrentThread();
 
126
 
 
127
    // Enter low priority mode.
 
128
    if (Util::IsVistaOrLater()) {
 
129
      // THREAD_MODE_BACKGROUND_BEGIN is beneficial for the preloader since
 
130
      // all I/Os occurred in the background-mode thread are marked as
 
131
      // "Low-Priority" so that the activity of the preloader is less likely
 
132
      // to interrupt normal I/O tasks.
 
133
      // Note that "all I/Os" includes implicit page-fault I/Os, which is
 
134
      // what the preloader aims to do.
 
135
      ::SetThreadPriority(thread_handle, THREAD_MODE_BACKGROUND_BEGIN);
 
136
    } else {
 
137
      ::SetThreadPriority(thread_handle, THREAD_PRIORITY_IDLE);
 
138
    }
 
139
#endif
 
140
 
 
141
    if (image_ == NULL || size_ == 0) {
 
142
      LOG(ERROR) << "image is NULL or size is 0";
 
143
      return;
 
144
    }
 
145
 
 
146
    // Preleoad dictionary region.
 
147
    // TODO(yukawa): determine the best region to load.
 
148
    Util::PreloadMappedRegion(image_, size_, NULL);
 
149
 
 
150
    VLOG(1) << "Preloader done!";
 
151
  }
 
152
 
 
153
 private:
 
154
  const char *image_;
 
155
  size_t size_;
 
156
};
 
157
}  // anonymous namespace
 
158
 
 
159
void DictionaryPreloader::PreloadIfApplicable(const char *image, size_t size) {
 
160
  // On Windows, dictionary preloader is no longer enabled because
 
161
  // GoogleIMEJaCacheService.exe is responsible for keeping the dictionary
 
162
  // on-page (or freeing the memory in low-memory condition).
 
163
  // See http://b/2354549 for details.
 
164
#if defined(OS_MACOSX) || defined(OS_LINUX)
 
165
  if (!IsPreloadable(image, size)) {
 
166
    return;
 
167
  }
 
168
 
 
169
  Singleton<PreloaderThread>::get()->StartPreloader(image, size);
 
170
#endif  // OS_MACOSX or OS_LINUX
 
171
}
 
172
}  // namespace mozc