]> git.street.me.uk Git - andy/viking.git/blobdiff - src/background.c
Some spelling fixes in a comment
[andy/viking.git] / src / background.c
index b388fb599be6ee8c02fe594906633cbba9f4ad98..24c035765bd77d71c6cf06ea7e88df022cff60bc 100644 (file)
@@ -2,6 +2,7 @@
  * viking -- GPS Data and Topo Analyzer, Explorer, and Manager
  *
  * Copyright (C) 2003-2005, Evan Battaglia <gtoevan@gmx.net>
+ * Copyright (c) 2015, Rob Norris <rw_norris@hotmail.com>
  *
  * This program is free software; you can redistribute it and/or modify
  * it under the terms of the GNU General Public License as published by
 
 #include "background.h"
 #include "settings.h"
-
-static GThreadPool *thread_pool = NULL;
+#include "util.h"
+#include "math.h"
+#include "uibuilder.h"
+#include "globals.h"
+#include "preferences.h"
+
+static GThreadPool *thread_pool_remote = NULL;
+static GThreadPool *thread_pool_local = NULL;
+#ifdef HAVE_LIBMAPNIK
+static GThreadPool *thread_pool_local_mapnik = NULL;
+#endif
 static gboolean stop_all_threads = FALSE;
 
-static GtkWidget *bgwindow = NULL;
-static GtkWidget *bgtreeview = NULL;
+// A single store of background items for all Windows
+// Must always be accessed in the main thread
 static GtkListStore *bgstore = NULL;
 
+G_LOCK_DEFINE_STATIC(window_list);
 // Still only actually updating the statusbar though
 static GSList *windows_to_update = NULL;
 
@@ -54,19 +65,50 @@ void a_background_update_status ( VikWindow *vw, gpointer data )
   vik_window_statusbar_update ( vw, buf, VIK_STATUSBAR_ITEMS );
 }
 
+// NB can be called from any thread
 static void background_thread_update ()
 {
+  G_LOCK(window_list);
   g_slist_foreach ( windows_to_update, (GFunc) a_background_update_status, NULL );
+  G_UNLOCK(window_list);
+}
+
+typedef struct {
+  GtkTreeIter *iter;
+  gdouble percent;
+} progress_t;
+
+// In main thread
+static gboolean idle_progress_update ( gpointer user_data )
+{
+  progress_t *progress = user_data;
+  if ( bgstore )
+    gtk_list_store_set ( GTK_LIST_STORE(bgstore), progress->iter, PROGRESS_COLUMN, progress->percent, -1 );
+  g_free ( progress );
+  return FALSE;
 }
 
+/**
+ * a_background_thread_progress:
+ * @callbackdata: Thread data
+ * @fraction:     The value should be between 0.0 and 1.0 indicating percentage of the task complete
+ *
+ * Called from other threads
+ *
+ * Returns a non zero number if the thread should be terminated
+ */
 int a_background_thread_progress ( gpointer callbackdata, gdouble fraction )
 {
   gpointer *args = (gpointer *) callbackdata;
   int res = a_background_testcancel ( callbackdata );
   if (args[5] != NULL) {
-    gdk_threads_enter();
-    gtk_list_store_set( GTK_LIST_STORE(bgstore), (GtkTreeIter *) args[5], PROGRESS_COLUMN, fraction*100, -1 );
-    gdk_threads_leave();
+    gdouble myfraction = fabs(fraction);
+    if ( myfraction > 1.0 )
+      myfraction = 1.0;
+    progress_t *progress = g_malloc0 ( sizeof(progress_t) );
+    progress->percent = myfraction * 100;
+    progress->iter = (GtkTreeIter*)args[5];
+    gdk_threads_add_idle ( idle_progress_update, progress );
   }
 
   args[6] = GINT_TO_POINTER(GPOINTER_TO_INT(args[6])-1);
@@ -88,10 +130,11 @@ static void thread_die ( gpointer args[VIK_BG_NUM_ARGS] )
     background_thread_update ();
   }
 
-  g_free ( args[5] ); /* free iter */
   g_free ( args );
 }
 
+// Called from other threads
+// Returns a non zero number if the thread should be terminated
 int a_background_testcancel ( gpointer callbackdata )
 {
   gpointer *args = (gpointer *) callbackdata;
@@ -107,6 +150,21 @@ int a_background_testcancel ( gpointer callbackdata )
   return 0;
 }
 
+typedef struct {
+  GtkTreeIter *iter;
+} remove_t;
+
+// Called from the main thread
+static gboolean idle_remove ( gpointer user_data )
+{
+  remove_t *remove = user_data;
+  if ( bgstore )
+    gtk_list_store_remove ( bgstore, remove->iter );
+  g_free ( remove->iter );
+  return FALSE;
+}
+
+// Called from other threads
 static void thread_helper ( gpointer args[VIK_BG_NUM_ARGS], gpointer user_data )
 {
   /* unpack args */
@@ -117,16 +175,17 @@ static void thread_helper ( gpointer args[VIK_BG_NUM_ARGS], gpointer user_data )
 
   func ( userdata, args );
 
-  gdk_threads_enter();
-  if ( ! args[0] )
-    gtk_list_store_remove ( bgstore, (GtkTreeIter *) args[5] );
-  gdk_threads_leave();
-
+  if ( ! args[0] ) {
+    remove_t *remove = g_malloc0 ( sizeof(remove_t) );
+    remove->iter = args[5];
+    gdk_threads_add_idle ( idle_remove, remove );
+  }
   thread_die ( args );
 }
 
 /**
  * a_background_thread:
+ * @bp:      Which pool this thread should run in
  * @parent:
  * @message:
  * @func: worker function
@@ -137,7 +196,7 @@ static void thread_helper ( gpointer args[VIK_BG_NUM_ARGS], gpointer user_data )
  *
  * Function to enlist new background function.
  */
-void a_background_thread ( GtkWindow *parent, const gchar *message, vik_thr_func func, gpointer userdata, vik_thr_free_func userdata_free_func, vik_thr_free_func userdata_cancel_cleanup_func, gint number_items )
+void a_background_thread ( Background_Pool_Type bp, GtkWindow *parent, const gchar *message, vik_thr_func func, gpointer userdata, vik_thr_free_func userdata_free_func, vik_thr_free_func userdata_cancel_cleanup_func, gint number_items )
 {
   GtkTreeIter *piter = g_malloc ( sizeof ( GtkTreeIter ) );
   gpointer *args = g_malloc ( sizeof(gpointer) * VIK_BG_NUM_ARGS );
@@ -162,19 +221,17 @@ void a_background_thread ( GtkWindow *parent, const gchar *message, vik_thr_func
                       -1 );
 
   /* run the thread in the background */
-  g_thread_pool_push( thread_pool, args, NULL );
-}
-
-/**
- * a_background_show_window:
- *
- * Display the background window.
- */
-void a_background_show_window ()
-{
-  gtk_widget_show_all ( bgwindow );
+  if ( bp == BACKGROUND_POOL_REMOTE )
+    g_thread_pool_push( thread_pool_remote, args, NULL );
+#ifdef HAVE_LIBMAPNIK
+  else if ( bp == BACKGROUND_POOL_LOCAL_MAPNIK )
+    g_thread_pool_push( thread_pool_local_mapnik, args, NULL );
+#endif
+  else
+    g_thread_pool_push( thread_pool_local, args, NULL );
 }
 
+// In main thread
 static void cancel_job_with_iter ( GtkTreeIter *piter )
 {
     gpointer *args;
@@ -188,62 +245,112 @@ static void cancel_job_with_iter ( GtkTreeIter *piter )
     args[0] = GINT_TO_POINTER(1); /* set killswitch */
 
     gtk_list_store_remove ( bgstore, piter );
+    g_free ( piter );
     args[5] = NULL;
 }
 
-static void bgwindow_response (GtkDialog *dialog, gint arg1 )
+// In main thread
+static void bgwindow_response (GtkDialog *dialog, gint response_id, GtkTreeView *bgtreeview )
 {
-  /* note this function is a signal handler called back from the GTK main loop, 
-   * so GDK is already locked.  We need to release the lock before calling 
-   * thread-safe routines
-   */
-  if ( arg1 == 1 ) /* cancel */
+  switch ( response_id ) {
+  case GTK_RESPONSE_DELETE_EVENT:
+    // Delibrate fall through
+  case GTK_RESPONSE_CLOSE:
+    gtk_widget_destroy ( GTK_WIDGET(dialog) );
+    break;
+  case 1: // Delete / Cancel selected item
     {
       GtkTreeIter iter;
-      if ( gtk_tree_selection_get_selected ( gtk_tree_view_get_selection ( GTK_TREE_VIEW(bgtreeview) ), NULL, &iter ) )
-       cancel_job_with_iter ( &iter );
-      gdk_threads_leave();
+      if ( gtk_tree_selection_get_selected ( gtk_tree_view_get_selection(bgtreeview), NULL, &iter ) )
+        cancel_job_with_iter ( &iter );
       background_thread_update();
-      gdk_threads_enter();
     }
-  else if ( arg1 == 2 ) /* clear */
+    break;
+  case 2: // Clear All jobs
     {
       GtkTreeIter iter;
       while ( gtk_tree_model_get_iter_first ( GTK_TREE_MODEL(bgstore), &iter ) )
-       cancel_job_with_iter ( &iter );
-      gdk_threads_leave();
+        cancel_job_with_iter ( &iter );
       background_thread_update();
-      gdk_threads_enter();
     }
-  else /* OK */
-    gtk_widget_hide ( bgwindow );
+    default: break;
+  }
 }
 
 #define VIK_SETTINGS_BACKGROUND_MAX_THREADS "background_max_threads"
+#define VIK_SETTINGS_BACKGROUND_MAX_THREADS_LOCAL "background_max_threads_local"
+
+#ifdef HAVE_LIBMAPNIK
+VikLayerParamScale params_threads[] = { {1, 64, 1, 0} }; // 64 threads should be enough for anyone...
+// implicit use of 'MAPNIK_PREFS_NAMESPACE' to avoid dependency issues
+static VikLayerParam prefs_mapnik[] = {
+  { VIK_LAYER_NUM_TYPES, "mapnik.background_max_threads_local_mapnik", VIK_LAYER_PARAM_UINT, VIK_LAYER_GROUP_NONE, N_("Threads:"), VIK_LAYER_WIDGET_SPINBUTTON, params_threads, NULL,
+    N_("Number of threads to use for Mapnik tasks. You need to restart Viking for a change to this value to be used"), NULL, NULL, NULL },
+};
+#endif
 
 /**
  * a_background_init:
  *
+ * Just setup any preferences.
+ */
+void a_background_init ()
+{
+#ifdef HAVE_LIBMAPNIK
+  VikLayerParamData tmp;
+  // implicit use of 'MAPNIK_PREFS_NAMESPACE' to avoid dependency issues
+  tmp.u = 1; // Default to 1 thread due to potential crashing issues
+  a_preferences_register(&prefs_mapnik[0], tmp, "mapnik");
+#endif
+}
+
+/**
+ * a_background_post_init:
+ *
  * Initialize background feature.
  */
-void a_background_init()
+void a_background_post_init()
 {
-  /* initialize thread pool */
+  // initialize thread pools
   gint max_threads = 10;  /* limit maximum number of threads running at one time */
   gint maxt;
   if ( a_settings_get_integer ( VIK_SETTINGS_BACKGROUND_MAX_THREADS, &maxt ) )
     max_threads = maxt;
 
-  thread_pool = g_thread_pool_new ( (GFunc) thread_helper, NULL, max_threads, FALSE, NULL );
+  thread_pool_remote = g_thread_pool_new ( (GFunc) thread_helper, NULL, max_threads, FALSE, NULL );
+
+  if ( a_settings_get_integer ( VIK_SETTINGS_BACKGROUND_MAX_THREADS_LOCAL, &maxt ) )
+    max_threads = maxt;
+  else {
+    guint cpus = util_get_number_of_cpus ();
+    max_threads = cpus > 1 ? cpus-1 : 1; // Don't use all available CPUs!
+  }
+
+  thread_pool_local = g_thread_pool_new ( (GFunc) thread_helper, NULL, max_threads, FALSE, NULL );
+
+#ifdef HAVE_LIBMAPNIK
+  // implicit use of 'MAPNIK_PREFS_NAMESPACE' to avoid dependency issues
+  guint mapnik_threads = a_preferences_get("mapnik.background_max_threads_local_mapnik")->u;
+  thread_pool_local_mapnik = g_thread_pool_new ( (GFunc) thread_helper, NULL, mapnik_threads, FALSE, NULL );
+#endif
+
+  bgstore = gtk_list_store_new ( N_COLUMNS, G_TYPE_STRING, G_TYPE_DOUBLE, G_TYPE_POINTER );
+}
 
+/**
+ * a_background_show_window:
+ *
+ * Display the background window.
+ */
+void a_background_show_window ()
+{
+  GtkWidget *bgwindow = NULL;
+  GtkWidget *bgtreeview = NULL;
   GtkCellRenderer *renderer;
   GtkTreeViewColumn *column;
   GtkWidget *scrolled_window;
 
-  g_debug(__FUNCTION__);
-
   /* store & treeview */
-  bgstore = gtk_list_store_new ( N_COLUMNS, G_TYPE_STRING, G_TYPE_DOUBLE, G_TYPE_POINTER );
   bgtreeview = gtk_tree_view_new_with_model ( GTK_TREE_MODEL(bgstore) );
   gtk_tree_view_set_rules_hint (GTK_TREE_VIEW (bgtreeview), TRUE);
   gtk_tree_selection_set_mode (gtk_tree_view_get_selection (GTK_TREE_VIEW (bgtreeview)),
@@ -263,7 +370,7 @@ void a_background_init()
   gtk_container_add ( GTK_CONTAINER(scrolled_window), bgtreeview );
   gtk_scrolled_window_set_policy ( GTK_SCROLLED_WINDOW(scrolled_window), GTK_POLICY_AUTOMATIC, GTK_POLICY_AUTOMATIC );
 
-  bgwindow = gtk_dialog_new_with_buttons ( "", NULL, 0, GTK_STOCK_OK, GTK_RESPONSE_ACCEPT, GTK_STOCK_DELETE, 1, GTK_STOCK_CLEAR, 2, NULL );
+  bgwindow = gtk_dialog_new_with_buttons ( _("Viking Background Jobs"), NULL, 0, GTK_STOCK_CLOSE, GTK_RESPONSE_CLOSE, GTK_STOCK_DELETE, 1, GTK_STOCK_CLEAR, 2, NULL );
   gtk_dialog_set_default_response ( GTK_DIALOG(bgwindow), GTK_RESPONSE_ACCEPT );
   GtkWidget *response_w = NULL;
 #if GTK_CHECK_VERSION (2, 20, 0)
@@ -271,14 +378,14 @@ void a_background_init()
 #endif
   gtk_box_pack_start ( GTK_BOX(gtk_dialog_get_content_area(GTK_DIALOG(bgwindow))), scrolled_window, TRUE, TRUE, 0 );
   gtk_window_set_default_size ( GTK_WINDOW(bgwindow), 400, 400 );
-  gtk_window_set_title ( GTK_WINDOW(bgwindow), _("Viking Background Jobs") );
   if ( response_w )
     gtk_widget_grab_focus ( response_w );
-  /* don't destroy win */
-  g_signal_connect ( G_OBJECT(bgwindow), "delete-event", G_CALLBACK(gtk_widget_hide_on_delete), NULL );
 
-  g_signal_connect ( G_OBJECT(bgwindow), "response", G_CALLBACK(bgwindow_response), 0 );
+  g_signal_connect ( G_OBJECT(bgwindow), "response", G_CALLBACK(bgwindow_response), GTK_TREE_VIEW(bgtreeview) );
+
+  gtk_widget_show_all ( bgwindow );
 
+  gtk_dialog_set_default_response ( GTK_DIALOG(bgwindow), GTK_RESPONSE_CLOSE );
 }
 
 /**
@@ -288,22 +395,28 @@ void a_background_init()
  */
 void a_background_uninit()
 {
-  /* wait until all running threads stop */
   stop_all_threads = TRUE;
-  g_thread_pool_free ( thread_pool, TRUE, TRUE );
-
+  // Don't wait for these threads to complete - i.e. end now.
+  g_thread_pool_free ( thread_pool_remote, TRUE, FALSE );
+  g_thread_pool_free ( thread_pool_local, TRUE, FALSE );
+#ifdef HAVE_LIBMAPNIK
+  g_thread_pool_free ( thread_pool_local_mapnik, TRUE, FALSE );
+#endif
   gtk_list_store_clear ( bgstore );
   g_object_unref ( bgstore );
-
-  gtk_widget_destroy ( bgwindow );
+  bgstore = NULL;
 }
 
 void a_background_add_window (VikWindow *vw)
 {
+  G_LOCK(window_list);
   windows_to_update = g_slist_prepend(windows_to_update,vw);
+  G_UNLOCK(window_list);
 }
 
 void a_background_remove_window (VikWindow *vw)
 {
+  G_LOCK(window_list);
   windows_to_update = g_slist_remove(windows_to_update,vw);
+  G_UNLOCK(window_list);
 }