additionally guard iterateIndexableFiles / pushedproperty updating as not all process...
[idea/community.git] / platform / lang-impl / src / com / intellij / util / indexing / UnindexedFilesUpdater.java
1 /*
2  * Copyright 2000-2014 JetBrains s.r.o.
3  *
4  * Licensed under the Apache License, Version 2.0 (the "License");
5  * you may not use this file except in compliance with the License.
6  * You may obtain a copy of the License at
7  *
8  * http://www.apache.org/licenses/LICENSE-2.0
9  *
10  * Unless required by applicable law or agreed to in writing, software
11  * distributed under the License is distributed on an "AS IS" BASIS,
12  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
13  * See the License for the specific language governing permissions and
14  * limitations under the License.
15  */
16 package com.intellij.util.indexing;
17
18 import com.intellij.ProjectTopics;
19 import com.intellij.ide.IdeBundle;
20 import com.intellij.ide.caches.FileContent;
21 import com.intellij.ide.startup.impl.StartupManagerImpl;
22 import com.intellij.openapi.application.ApplicationManager;
23 import com.intellij.openapi.diagnostic.Logger;
24 import com.intellij.openapi.progress.ProcessCanceledException;
25 import com.intellij.openapi.progress.ProgressIndicator;
26 import com.intellij.openapi.project.CacheUpdateRunner;
27 import com.intellij.openapi.project.DumbModeTask;
28 import com.intellij.openapi.project.DumbService;
29 import com.intellij.openapi.project.Project;
30 import com.intellij.openapi.roots.CollectingContentIterator;
31 import com.intellij.openapi.roots.ModuleRootAdapter;
32 import com.intellij.openapi.roots.ModuleRootEvent;
33 import com.intellij.openapi.roots.impl.PushedFilePropertiesUpdater;
34 import com.intellij.openapi.roots.impl.PushedFilePropertiesUpdaterImpl;
35 import com.intellij.openapi.startup.StartupManager;
36 import com.intellij.openapi.vfs.VirtualFile;
37 import com.intellij.util.Consumer;
38 import org.jetbrains.annotations.NotNull;
39
40 import java.util.List;
41
42 /**
43  * @author Eugene Zhuravlev
44  * @since Jan 29, 2008
45  */
46 public class UnindexedFilesUpdater extends DumbModeTask {
47   private static final Logger LOG = Logger.getInstance("#com.intellij.util.indexing.UnindexedFilesUpdater");
48
49   private final FileBasedIndexImpl myIndex = (FileBasedIndexImpl)FileBasedIndex.getInstance();
50   private final Project myProject;
51   private final boolean myOnStartup;
52
53   public UnindexedFilesUpdater(final Project project, boolean onStartup) {
54     myProject = project;
55     myOnStartup = onStartup;
56     project.getMessageBus().connect(this).subscribe(ProjectTopics.PROJECT_ROOTS, new ModuleRootAdapter() {
57       @Override
58       public void rootsChanged(ModuleRootEvent event) {
59         DumbService.getInstance(project).cancelTask(UnindexedFilesUpdater.this);
60       }
61     });
62   }
63
64   private void updateUnindexedFiles(ProgressIndicator indicator) {
65     long started = System.currentTimeMillis();
66     PushedFilePropertiesUpdaterImpl.ourConcurrentlyFlag.set(Boolean.TRUE);
67     try {
68       PushedFilePropertiesUpdater.getInstance(myProject).pushAllPropertiesNow();
69     } finally {
70       PushedFilePropertiesUpdaterImpl.ourConcurrentlyFlag.set(null);
71     }
72
73     LOG.info("Pushed properties in " + (System.currentTimeMillis() - started) + " ms");
74
75     indicator.setIndeterminate(true);
76     indicator.setText(IdeBundle.message("progress.indexing.scanning"));
77
78     CollectingContentIterator finder = myIndex.createContentIterator(indicator);
79     long l = System.currentTimeMillis();
80     FileBasedIndexImpl.ourConcurrentlyFlag.set(Boolean.TRUE);
81     try {
82       myIndex.iterateIndexableFiles(finder, myProject, indicator);
83     } finally {
84       FileBasedIndexImpl.ourConcurrentlyFlag.set(null);
85     }
86
87     myIndex.filesUpdateEnumerationFinished();
88
89     LOG.info("Indexable files iterated in " + (System.currentTimeMillis() - l) + " ms");
90     List<VirtualFile> files = finder.getFiles();
91
92     if (myOnStartup && !ApplicationManager.getApplication().isUnitTestMode()) {
93       // full VFS refresh makes sense only after it's loaded, i.e. after scanning files to index is finished
94       ((StartupManagerImpl)StartupManager.getInstance(myProject)).scheduleInitialVfsRefresh();
95     }
96
97     if (files.isEmpty()) {
98       return;
99     }
100
101     started = System.currentTimeMillis();
102     LOG.info("Unindexed files update started: " + files.size() + " files to update");
103
104     indicator.setIndeterminate(false);
105     indicator.setText(IdeBundle.message("progress.indexing.updating"));
106
107     indexFiles(indicator, files);
108     LOG.info("Unindexed files update done in " + (System.currentTimeMillis() - started) + " ms");
109   }
110
111   private void indexFiles(ProgressIndicator indicator, List<VirtualFile> files) {
112     CacheUpdateRunner.processFiles(indicator, true, files, myProject, new Consumer<FileContent>() {
113       @Override
114       public void consume(FileContent content) {
115         try {
116           myIndex.indexFileContent(myProject, content);
117         }
118         finally {
119           IndexingStamp.flushCache(content.getVirtualFile());
120         }
121       }
122     });
123   }
124
125   @Override
126   public void performInDumbMode(@NotNull ProgressIndicator indicator) {
127     myIndex.filesUpdateStarted(myProject);
128     try {
129       updateUnindexedFiles(indicator);
130     }
131     catch (ProcessCanceledException e) {
132       LOG.info("Unindexed files update canceled");
133       throw e;
134     } finally {
135       myIndex.filesUpdateFinished(myProject);
136     }
137   }
138 }