[BACK]Return to lonproblemanalysis.pm CVS log [TXT] [DIR] Up to [LON-CAPA] / loncom / interface / statistics

Diff for /loncom/interface/statistics/lonproblemanalysis.pm between versions 1.43 and 1.48

version 1.43, 2003/10/20 20:42:39 version 1.48, 2003/11/11 22:07:46
Line 24 Line 24
 #  #
 # http://www.lon-capa.org/  # http://www.lon-capa.org/
 #  #
   
 package Apache::lonproblemanalysis;  package Apache::lonproblemanalysis;
   
 use strict;  use strict;
Line 43  my $plotcolors = ['#33ff00', Line 42  my $plotcolors = ['#33ff00',
                   '#66ccff', '#ff9999', '#cccc33', '#660000', '#33cc66',                    '#66ccff', '#ff9999', '#cccc33', '#660000', '#33cc66',
                   ];                     ]; 
   
   my @SubmitButtons = ({ name => 'ProblemAnalyis',
                          text => 'Analyze Problem Again' },
                        { name => 'ClearCache',
                          text => 'Clear Caches' },
                        { name => 'updatecaches',
                          text => 'Update Student Data' },
                        { name => 'SelectAnother',
                          text => 'Choose a different resource' },
                        { name => 'ExcelOutput',
                          text => 'Produce Excel Output' });
   
   sub render_resource {
       my ($resource) = @_;
       ##
       ## Render the problem
       my $base;
       ($base,undef) = ($resource->{'src'} =~ m|(.*/)[^/]*$|);
       $base = "http://".$ENV{'SERVER_NAME'}.$base;
       my $rendered_problem = 
           &Apache::lonnet::ssi_body($resource->{'src'});
       $rendered_problem =~ s/<\s*form\s*/<nop /g;
       $rendered_problem =~ s|(<\s*/form\s*>)|<\/nop>|g;
       return '<table bgcolor="ffffff"><tr><td>'.
           '<base href="'.$base.'" />'.
           $rendered_problem.
           '</td></tr></table>';
   }
   
 sub BuildProblemAnalysisPage {  sub BuildProblemAnalysisPage {
     my ($r,$c)=@_;      my ($r,$c)=@_;
       #
     $r->print('<h2>'.&mt('Option Response Problem Analysis').'</h2>');      $r->print('<h2>'.&mt('Option Response Problem Analysis').'</h2>');
     $r->print(&CreateInterface());      $r->print(&CreateInterface());
     #      #
     my @Students = @Apache::lonstatistics::Students;      my @Students = @Apache::lonstatistics::Students;
     #      #
       if (@Students < 1) {
           $r->print('<h2>There are no students in the sections selected</h2>');
       }
       #
       &Apache::loncoursedata::clear_internal_caches();
     if (exists($ENV{'form.ClearCache'}) ||       if (exists($ENV{'form.ClearCache'}) || 
         exists($ENV{'form.updatecaches'}) ||          exists($ENV{'form.updatecaches'}) ||
         (exists($ENV{'form.firstanalysis'}) &&          (exists($ENV{'form.firstanalysis'}) &&
Line 62  sub BuildProblemAnalysisPage { Line 95  sub BuildProblemAnalysisPage {
         $r->print('<input type="hidden" name="firstanalysis" value="no" />');          $r->print('<input type="hidden" name="firstanalysis" value="no" />');
     }      }
     $r->rflush();      $r->rflush();
       #
     if (exists($ENV{'form.problemchoice'}) &&       if (exists($ENV{'form.problemchoice'}) && 
         ! exists($ENV{'form.SelectAnother'})) {          ! exists($ENV{'form.SelectAnother'})) {
         $r->print('<input type="submit" name="ProblemAnalysis" value="'.          foreach my $button (@SubmitButtons) {
                   &mt('Analyze Problem Again').'" />');              $r->print('<input type="submit" name="'.$button->{'name'}.'" '.
         $r->print('&nbsp;'x5);                        'value="'.&mt($button->{'text'}).'" />');
         $r->print('<input type="submit" name="ClearCache" value="'.              $r->print('&nbsp;'x5);
                   &mt('Clear Caches').'" />');          }
         $r->print('&nbsp;'x5);  
         $r->print('<input type="submit" name="updatecaches" value="'.  
                   &mt('Update Student Data').'" />');  
         $r->print('&nbsp;'x5);  
         $r->print('<input type="hidden" name="problemchoice" value="'.          $r->print('<input type="hidden" name="problemchoice" value="'.
                   $ENV{'form.problemchoice'}.'" />');                    $ENV{'form.problemchoice'}.'" />');
         $r->print('<input type="submit" name="SelectAnother" value="'.  
                   &mt('Choose a different resource').'" />');  
         $r->print('&nbsp;'x5);  
         $r->print('<input type="submit" name="ExcelOutput" value="'.  
                   &mt('Produce Excel Data Sheet').'" />');  
         $r->print('&nbsp;'x5);  
         #          #
         $r->print('<hr />');          $r->print('<hr />');
         #          #
         my ($symb,$part,$resid) = &get_problem_symb(          my ($symb,$part,$resid,$resptype) = &get_problem_symb(
                      &Apache::lonnet::unescape($ENV{'form.problemchoice'})                    &Apache::lonnet::unescape($ENV{'form.problemchoice'}));
                                            );  
         $r->rflush();          $r->rflush();
         #          #
         my $resource = &get_resource_from_symb($symb);          my $resource = &get_resource_from_symb($symb);
         if (defined($resource)) {          if (! defined($resource) || ! defined($resptype)) {
               $r->print('resource is undefined');
           } else {
               $r->print('<h1>'.$resource->{'title'}.'</h1>');
             $r->print('<h3>'.$resource->{'src'}.'</h3>');              $r->print('<h3>'.$resource->{'src'}.'</h3>');
             my %Data = &get_problem_data($resource->{'src'});              $r->print(&render_resource($resource));
             my $PerformanceData =   
                 &Apache::loncoursedata::get_optionresponse_data  
                                            (\@Students,$symb,$resid);  
             my $ORdata = $Data{$part.'.'.$resid};  
             if (exists($ENV{'form.ExcelOutput'}) &&   
                 defined($PerformanceData)) {  
                 my $result = &prepare_excel_sheet($r,$resource,  
                                                   $PerformanceData,$ORdata);  
                 $r->print($result);  
                 $r->rflush();  
             }  
             ##  
             ## Render the problem  
             my $base;  
             ($base,undef) = ($resource->{'src'} =~ m|(.*/)[^/]*$|);  
             $base = "http://".$ENV{'SERVER_NAME'}.$base;  
             my $rendered_problem =   
                 &Apache::lonnet::ssi_body($resource->{'src'});  
             $rendered_problem =~ s/<\s*form\s*/<nop /g;  
             $rendered_problem =~ s|(<\s*/form\s*>)|<\/nop>|g;  
             $r->print('<table bgcolor="ffffff"><tr><td>'.  
                       '<base href="'.$base.'" />'.  
                       $rendered_problem.  
                       '</td></tr></table>');  
             $r->rflush();              $r->rflush();
             ##              my %Data = &get_problem_data($resource->{'src'});
             ## Analyze the problem              my $ProblemData = $Data{$part.'.'.$resid};
             if (defined($PerformanceData) &&               if ($resptype eq 'option') {
                 ref($PerformanceData) eq 'ARRAY') {                  &OptionResponseAnalysis($r,$resource,$resid,$ProblemData,
                 if ($ENV{'form.AnalyzeOver'} eq 'Tries') {                                          \@Students);
                     my $analysis_html = &tries_analysis($r,$PerformanceData,              } elsif ($resptype eq 'radiobutton') {
                                                          $ORdata);                  &RadioResponseAnalysis($r,$resource,$part,$resid,$ProblemData,
                     $r->print($analysis_html);                                         \@Students);
                     $r->rflush();  
                 } elsif ($ENV{'form.AnalyzeOver'} eq 'Time') {  
                     my $analysis_html = &time_analysis($PerformanceData,  
                                                          $ORdata);  
                     $r->print($analysis_html);  
                     $r->rflush();  
                 } else {  
                     $r->print('<h2>'.  
                               &mt('The analysis you have selected is '.  
                                          'not supported at this time').  
                               '</h2>');  
                 }  
             } else {              } else {
                 $r->print('<h2>'.                  $r->print('<h2>This analysis is not supported</h2>');
                           &mt('There is no student data for this problem.').  
                           '</h2>');  
             }              }
         } else {  
             $r->print('resource is undefined');  
         }          }
         $r->print('<hr />');          $r->print('<hr />');
     } else {      } else {
Line 152  sub BuildProblemAnalysisPage { Line 138  sub BuildProblemAnalysisPage {
                   &mt('Analyze Problem').'" />');                    &mt('Analyze Problem').'" />');
         $r->print('&nbsp;'x5);          $r->print('&nbsp;'x5);
         $r->print('<h3>'.&mt('Please select a problem to analyze').'</h3>');          $r->print('<h3>'.&mt('Please select a problem to analyze').'</h3>');
         $r->print(&OptionResponseProblemSelector());          $r->print(&ProblemSelector());
     }      }
 }  }
   
   =pod
   
   Removed code:
   
 #########################################################  #########################################################
 #########################################################  #########################################################
 ##  ##
 ##      Misc interface routines use by analysis code  ##      Radio Response Routines
 ##  ##
 #########################################################  #########################################################
 #########################################################  #########################################################
 sub build_foil_index {  sub RadioResponseAnalysis {
     my ($ORdata) = @_;      my ($r,$resource,$part,$respid,$ProblemData,$Students) = @_;
     return if (! exists($ORdata->{'Foils'}));      my $analysis_html;
     my %Foildata = %{$ORdata->{'Foils'}};      my $PerformanceData = 
     my @Foils = sort(keys(%Foildata));          &Apache::loncoursedata::get_response_data
     my %Concepts;          ($Students,$resource->{'symb'},$respid);
     foreach my $foilid (@Foils) {      if (! defined($PerformanceData) || 
         push(@{$Concepts{$Foildata{$foilid}->{'Concept'}}},          ref($PerformanceData) ne 'ARRAY' ) {
              $foilid);          $analysis_html = '<h2>'.
               &mt('There is no submission data for this resource').
               '</h2>';
           $r->print($analysis_html);
           return;
       }
       if (exists($ENV{'form.ExcelOutput'})) {
           $analysis_html .= &RR_Excel_output($r,$resource,$PerformanceData,
                                             $ProblemData);
       } elsif ($ENV{'form.AnalyzeOver'} eq 'Tries') {
           $analysis_html .= &RR_Tries_Analysis($r,$resource,$PerformanceData,
                                              $ProblemData);
       } elsif ($ENV{'form.AnalyzeOver'} eq 'Time') {
           $analysis_html .= &RR_Time_Analysis($r,$resource,$PerformanceData,
                                              $ProblemData);
       } else {
           $analysis_html .= '<h2>'.
              &mt('The analysis you have selected is not supported at this time').
              '</h2>';
     }      }
     undef(@Foils);      $r->print($analysis_html);
     # Having gathered the concept information in a hash, we now translate it  }
     # into an array because we need to be consistent about order.  
     # Also put the foils in order, too.  
     my $sortfunction = sub {  sub RR_Excel_output   { 
         my %Numbers = (one   => 1,      my ($r,$PerformanceData,$ProblemData) = @_;
                        two   => 2,      return '<h1>No!</h1>';
                        three => 3,  }
                        four  => 4,  
                        five  => 5,  sub RR_Tries_Analysis { 
                        six   => 6,      my ($r,$resource,$PerformanceData,$ProblemData) = @_;
                        seven => 7,      my $analysis_html;
                        eight => 8,      my $mintries = 1;
                        nine  => 9,      my $maxtries = $ENV{'form.NumPlots'};
                        ten   => 10,);      my ($table,$Foils,$Concepts) = &build_foil_index($ProblemData);
         my $a1 = lc($a);       if ((@$Concepts < 2) && ($ENV{'form.AnalyzeAs'} ne 'Foils')) {
         my $b1 = lc($b);          $table = '<h3>'.
         if (exists($Numbers{$a})) {              &mt('Not enough data for concept analysis.  '.
             $a1 = $Numbers{$a};                  'Performing Foil Analysis').
         }              '</h3>'.$table;
         if (exists($Numbers{$b})) {          $ENV{'form.AnalyzeAs'} = 'Foils';
             $b1 = $Numbers{$b};  
         }  
         $a1 cmp $b1;  
     };  
     my @Concepts;  
     foreach my $concept (sort $sortfunction (keys(%Concepts))) {  
         push(@Concepts,{ name => $concept,  
                         foils => [@{$Concepts{$concept}}]});  
         push(@Foils,(@{$Concepts{$concept}}));  
     }      }
     #      $analysis_html .= $table;
     # Build up the table of row labels.      my @TryData = &RR_tries_data_analysis($r,$PerformanceData);
     my $table = '<table border="1" >'."\n";      if ($ENV{'form.AnalyzeAs'} eq 'Foils') {
     if (@Concepts > 1) {          $analysis_html = &RR_Tries_Foil_Analysis($mintries,$maxtries,$Foils,
         $table .= '<tr>'.                                                   \@TryData,$ProblemData);
             '<th>'.&mt('Concept Number').'</th>'.  
             '<th>'.&mt('Concept').'</th>'.  
             '<th>'.&mt('Foil Number').'</th>'.  
             '<th>'.&mt('Foil Name').'</th>'.  
             '<th>'.&mt('Foil Text').'</th>'.  
             '<th>'.&mt('Correct Value').'</th>'.  
             "</tr>\n";  
     } else {      } else {
         $table .= '<tr>'.          $analysis_html = &RR_Tries_Concept_Analysis($mintries,$maxtries,
             '<th>'.&mt('Foil Number').'</th>'.                                                      $Concepts,
             '<th>'.&mt('Foil Name').'</th>'.                                                      \@TryData,
             '<th>'.&mt('Foil Text').'</th>'.                                                      $ProblemData);
             '<th>'.&mt('Correct Value').'</th>'.      }
             "</tr>\n";      return $analysis_html;
     }          }
     my $conceptindex = 1;  
     my $foilindex = 1;  sub RR_tries_data_analysis {
     foreach my $concept (@Concepts) {      my ($r,$Attempt_data) = @_;
         my @FoilsInConcept = @{$concept->{'foils'}};      my @TryData;
         my $firstfoil = shift(@FoilsInConcept);      foreach my $attempt (@$Attempt_data) {
         if (@Concepts > 1) {          my %Attempt = &hashify_attempt($attempt);
             $table .= '<tr>'.          my ($answer,undef) = split('=',$Attempt{'submission'});
                 '<td>'.$conceptindex.'</td>'.          $TryData[$Attempt{'tries'}]->{$answer}++;
                 '<td>'.$concept->{'name'}.'</td>'.      }
                 '<td>'.$foilindex++.'</td>'.      return @TryData;
                 '<td>'.$Foildata{$firstfoil}->{'name'}.'</td>'.  }
                 '<td>'.$Foildata{$firstfoil}->{'text'}.'</td>'.  
                 '<td>'.$Foildata{$firstfoil}->{'value'}.'</td>'.  sub RR_Time_Analysis  { 
                 "</tr>\n";      my ($r,$PerformanceData,$ProblemData) = @_;
         } else {      my $html;
             $table .= '<tr>'.      return $html;
                 '<td>'.$foilindex++.'</td>'.  }
                 '<td>'.$Foildata{$firstfoil}->{'name'}.'</td>'.  
                 '<td>'.$Foildata{$firstfoil}->{'text'}.'</td>'.  sub RR_Tries_Foil_Analysis {
                 '<td>'.$Foildata{$firstfoil}->{'value'}.'</td>'.      my ($min,$max,$Foils,$TryData,$ProblemData) = @_;
                 "</tr>\n";      my $html;
       #
       # Compute the data neccessary to make the plots
       for (my $try=$min;$try<=$max;$try++) {
           my @PlotData_Correct; 
           my @PlotData_Incorrect;
           next if ($try > scalar(@{$TryData}));
           next if (! defined($TryData->[$try-1]));
           my %DataSet = %{$TryData->[$try-1]};
           my $total = 0;
           foreach my $foilid (@$Foils) {
               $total += $DataSet{$foilid};
         }          }
         foreach my $foilid (@FoilsInConcept) {          foreach my $foilid (@$Foils) {
             if (@Concepts > 1) {              if ($total == 0) {
                 $table .= '<tr>'.                  push (@PlotData_Correct,0);
                     '<td></td>'.                  push (@PlotData_Incorrect,0);
                     '<td></td>'.  
                     '<td>'.$foilindex.'</td>'.  
                     '<td>'.$Foildata{$foilid}->{'name'}.'</td>'.  
                     '<td>'.$Foildata{$foilid}->{'text'}.'</td>'.  
                     '<td>'.$Foildata{$foilid}->{'value'}.'</td>'.  
                     "</tr>\n";  
             } else {              } else {
                 $table .= '<tr>'.                  if ($ProblemData->{'_Foils'}->{$foilid}->{'value'} eq 'true') {
                     '<td>'.$foilindex.'</td>'.                      push (@PlotData_Correct,
                     '<td>'.$Foildata{$foilid}->{'name'}.'</td>'.                            int(100*$DataSet{$foilid}/$total));
                     '<td>'.$Foildata{$foilid}->{'text'}.'</td>'.                      push (@PlotData_Incorrect,0);
                     '<td>'.$Foildata{$foilid}->{'value'}.'</td>'.                  } else {
                     "</tr>\n";                      push (@PlotData_Correct,0);
             }                                      push (@PlotData_Incorrect,
         } continue {                            int(100*$DataSet{$foilid}/$total));
             $foilindex++;                  }
               }
         }          }
     } continue {          my $title='Attempt '.$try;
         $conceptindex++;          my $xlabel = $total.' Submissions';
           $html.=  &Apache::loncommon::DrawBarGraph($title,
                                                     $xlabel,
                                                     'Percent Choosing',
                                                     100,
                                                     ['#33ff00','#ff3300'],
                                                     \@PlotData_Correct,
                                                     \@PlotData_Incorrect);
     }      }
     $table .= "</table>\n";      &Apache::lonnet::logthis('plot = '.$html);
     #      return $html;
     # Build option index with color stuff  
     return ($table,\@Foils,\@Concepts);  
 }  }
   
 sub build_option_index {  sub RR_Tries_Concept_Analysis {
     my ($ORdata)= @_;      my ($min,$max,$Concepts,$ResponseData,$ProblemData) = @_;
     my $table = "<table>\n";      my $html;
     my $optionindex = 0;      return $html;
     my @Rows;  }
     foreach my $option (&mt('correct option chosen'),@{$ORdata->{'Options'}}) {  
         push (@Rows,  sub RR_Time_Foil_Analysis {
               '<tr>'.      my ($min,$max,$Foils,$ResponseData,$ProblemData) = @_;
               '<td bgcolor="'.$plotcolors->[$optionindex++].'">'.      my $html;
               ('&nbsp;'x4).'</td>'.      return $html;
               '<td>'.$option.'</td>'.  }
               "</tr>\n");  
   sub RR_Time_Concept_Analysis {
       my ($min,$max,$Concepts,$ResponseData,$ProblemData) = @_;
       my $html;
       return $html;
   }
   
   
   
   sub get_Radio_problem_data {
       my ($url) = @_;
       my $Answ=&Apache::lonnet::ssi($url,('grade_target' => 'analyze'));
       (my $garbage,$Answ)=split('_HASH_REF__',$Answ,2);
       my %Answer = &Apache::lonnet::str2hash($Answ);
       my %Partdata;
       &Apache::lonnet::logthis('url = '.$url);
       foreach my $part (@{$Answer{'parts'}}) {
           while (my($key,$value) = each(%Answer)) {
   #            if (ref($value) eq 'ARRAY') {
   #                &Apache::lonnet::logthis('is ref part:'.$part.' '.$key.'='.join(',',@$value));
   #            } else {
   #                &Apache::lonnet::logthis('notref part:'.$part.' '.$key.'='.$value);
   #            }                
               next if ($key !~ /^$part/);
               $key =~ s/^$part\.//;
               if ($key eq 'foils') {
                   $Partdata{$part}->{'_Foils'}=$value;
               } elsif ($key eq 'options') {
                   $Partdata{$part}->{'_Options'}=$value;
               } elsif ($key eq 'shown') {
                   $Partdata{$part}->{'_Shown'}=$value;
               } elsif ($key =~ /^foil.value.(.*)$/) {
                   $Partdata{$part}->{$1}->{'value'}=$value;
               } elsif ($key =~ /^foil.text.(.*)$/) {
                   $Partdata{$part}->{$1}->{'text'}=$value;
               }
           }
     }      }
     shift(@Rows); # Throw away 'correct option chosen' color      return %Partdata;
     $table .= join('',reverse(@Rows));  
     $table .= "</table>\n";  
 }  }
   
   =cut
   
   
 #########################################################  #########################################################
 #########################################################  #########################################################
 ##  ##
 ##         Tries Analysis  ##      Option Response Routines
 ##  ##
 #########################################################  #########################################################
 #########################################################  #########################################################
   sub OptionResponseAnalysis {
       my ($r,$resource,$resid,$ProblemData,$Students) = @_;
       my $PerformanceData = 
           &Apache::loncoursedata::get_response_data
           ($Students,$resource->{'symb'},$resid);
       if (! defined($PerformanceData) || 
           ref($PerformanceData) ne 'ARRAY' ) {
           $r->print('<h2>'.
                     &mt('There is no student data for this problem.').
                     '</h2>');
       }  else {
           $r->rflush();
           if (exists($ENV{'form.ExcelOutput'})) {
               my $result = &prepare_optionresponse_excel_sheet($r,$resource,
                                                                $PerformanceData,
                                                                $ProblemData);
               $r->print($result);
               $r->rflush();
           } else {
               if ($ENV{'form.AnalyzeOver'} eq 'Tries') {
                   my $analysis_html = &tries_analysis($r,
                                                       $PerformanceData,
                                                       $ProblemData);
                   $r->print($analysis_html);
                   $r->rflush();
               } elsif ($ENV{'form.AnalyzeOver'} eq 'Time') {
                   my $analysis_html = &time_analysis($PerformanceData,
                                                      $ProblemData);
                   $r->print($analysis_html);
                   $r->rflush();
               } else {
                   $r->print('<h2>'.
                             &mt('The analysis you have selected is '.
                                 'not supported at this time').
                             '</h2>');
               }
           }
       }
   }
   
   #########################################################
   #
   #       Option Response:  Tries Analysis
   #
   #########################################################
 sub tries_analysis {  sub tries_analysis {
     my ($r,$PerformanceData,$ORdata) = @_;      my ($r,$PerformanceData,$ORdata) = @_;
     my $mintries = 1;      my $mintries = 1;
Line 342  sub Tries_Foil_Analysis { Line 427  sub Tries_Foil_Analysis {
                      100*$ResponseData{$foilid}->[$i]->{'_correct'}/                       100*$ResponseData{$foilid}->[$i]->{'_correct'}/
                      $ResponseData{$foilid}->[$i]->{'_total'});                       $ResponseData{$foilid}->[$i]->{'_total'});
             }              }
             foreach my $option (@{$ORdata->{'Options'}}) {              foreach my $option (@{$ORdata->{'_Options'}}) {
                 push(@{$PlotData[$i]->{'_total'}},                  push(@{$PlotData[$i]->{'_total'}},
                      $ResponseData{$foilid}->[$i]->{'_total'});                       $ResponseData{$foilid}->[$i]->{'_total'});
                 if ($ResponseData{$foilid}->[$i]->{'_total'} == 0) {                  if ($ResponseData{$foilid}->[$i]->{'_total'} == 0) {
Line 376  sub Tries_Foil_Analysis { Line 461  sub Tries_Foil_Analysis {
         }          }
         my $title = 'Attempt '.$i.', '.$count;          my $title = 'Attempt '.$i.', '.$count;
         my @Datasets;          my @Datasets;
         foreach my $option ('_correct',@{$ORdata->{'Options'}}) {          foreach my $option ('_correct',@{$ORdata->{'_Options'}}) {
             next if (! exists($PlotData[$i]->{$option}));              next if (! exists($PlotData[$i]->{$option}));
             push(@Datasets,$PlotData[$i]->{$option});              push(@Datasets,$PlotData[$i]->{$option});
         }          }
         my $correctgraph = &Apache::loncommon::DrawGraph          my $correctgraph = &Apache::loncommon::DrawBarGraph
             ($title,'Foil Number','Percent Correct',              ($title,'Foil Number','Percent Correct',
              100,$plotcolors,$Datasets[0]);               100,$plotcolors,$Datasets[0]);
         $analysis_html.= '<tr><td>'.$correctgraph.'</td>';          $analysis_html.= '<tr><td>'.$correctgraph.'</td>';
Line 398  sub Tries_Foil_Analysis { Line 483  sub Tries_Foil_Analysis {
             $count = $count.' submissions';              $count = $count.' submissions';
         }          }
         $title = 'Attempt '.$i.', '.$count;          $title = 'Attempt '.$i.', '.$count;
         my $incorrectgraph = &Apache::loncommon::DrawGraph          my $incorrectgraph = &Apache::loncommon::DrawBarGraph
             ($title,'Foil Number','% Option Chosen Incorrectly',              ($title,'Foil Number','% Option Chosen Incorrectly',
              100,$plotcolors,@Datasets);               100,$plotcolors,@Datasets);
         $analysis_html.= '<td>'.$incorrectgraph.'</td>';          $analysis_html.= '<td>'.$incorrectgraph.'</td>';
Line 465  sub Tries_Concept_Analysis { Line 550  sub Tries_Concept_Analysis {
             $count = $count.' submissions';              $count = $count.' submissions';
         }          }
         $title = 'Attempt '.$i.', '.$count;          $title = 'Attempt '.$i.', '.$count;
         my $graphlink = &Apache::loncommon::DrawGraph          my $graphlink = &Apache::loncommon::DrawBarGraph
             ($title,'Concept Number','Percent Correct',              ($title,'Concept Number','Percent Correct',
              100,$plotcolors,$PlotData[$i]->{'_correct'});               100,$plotcolors,$PlotData[$i]->{'_correct'});
         $analysis_html.= '<tr><td>'.$graphlink."</td></tr>\n";          $analysis_html.= '<tr><td>'.$graphlink."</td></tr>\n";
Line 482  sub analyze_option_data_by_tries { Line 567  sub analyze_option_data_by_tries {
     foreach my $row (@$PerformanceData) {      foreach my $row (@$PerformanceData) {
         next if (! defined($row));          next if (! defined($row));
         my $tries = &get_tries_from_row($row);          my $tries = &get_tries_from_row($row);
         my %Row   = &Process_Row($row);          my %Row   = &Process_OR_Row($row);
         next if (! %Row);          next if (! %Row);
         while (my ($foilid,$href) = each(%Row)) {          while (my ($foilid,$href) = each(%Row)) {
             if (! ref($href)) {               if (! ref($href)) { 
Line 498  sub analyze_option_data_by_tries { Line 583  sub analyze_option_data_by_tries {
 }  }
   
 #########################################################  #########################################################
 #########################################################  #
 ##  #     Option Response: Time Analysis
 ##                 Time Analysis  #
 ##  
 #########################################################  
 #########################################################  #########################################################
 sub time_analysis {  sub time_analysis {
     my ($PerformanceData,$ORdata) = @_;      my ($PerformanceData,$ORdata) = @_;
Line 546  sub time_analysis { Line 629  sub time_analysis {
         my $end_index;          my $end_index;
         my $j;          my $j;
         while (++$j < scalar(@$PerformanceData)) {          while (++$j < scalar(@$PerformanceData)) {
             last if (&get_time_from_row($PerformanceData->[$j]) > $starttime);              last if (&get_time_from_row($PerformanceData->[$j]) 
                                                                 > $starttime);
         }          }
         $begin_index = $j;          $begin_index = $j;
         while (++$j < scalar(@$PerformanceData)) {          while (++$j < scalar(@$PerformanceData)) {
Line 584  sub Foil_Time_Analysis { Line 668  sub Foil_Time_Analysis {
     for (my $j=$begin_index;$j<=$end_index;$j++) {      for (my $j=$begin_index;$j<=$end_index;$j++) {
         my $row = $PerformanceData->[$j];          my $row = $PerformanceData->[$j];
         next if (! defined($row));          next if (! defined($row));
         my %Row = &Process_Row($row);          my %Row = &Process_OR_Row($row);
         while (my ($foilid,$href) = each(%Row)) {          while (my ($foilid,$href) = each(%Row)) {
             if (! ref($href)) {              if (! ref($href)) {
                 $TimeData{$foilid} += $href;                  $TimeData{$foilid} += $href;
Line 606  sub Foil_Time_Analysis { Line 690  sub Foil_Time_Analysis {
         }          }
         my $total_incorrect = $total - $TimeData{$foil}->{'_correct'};          my $total_incorrect = $total - $TimeData{$foil}->{'_correct'};
         my $optionidx = 1;          my $optionidx = 1;
         foreach my $option (@{$ORdata->{'Options'}}) {          foreach my $option (@{$ORdata->{'_Options'}}) {
             if ($total_incorrect == 0) {              if ($total_incorrect == 0) {
                 push(@{$Plotdata[$optionidx]},0);                  push(@{$Plotdata[$optionidx]},0);
             } else {              } else {
Line 628  sub Foil_Time_Analysis { Line 712  sub Foil_Time_Analysis {
     } else {      } else {
         $title = $count.' submissions';          $title = $count.' submissions';
     }      }
     my $correctplot = &Apache::loncommon::DrawGraph($title,      my $correctplot = &Apache::loncommon::DrawBarGraph($title,
                                                     'Foil Number',                                                         'Foil Number',
                                                     'Percent Correct',                                                         'Percent Correct',
                                                     100,                                                         100,
                                                     $plotcolors,                                                         $plotcolors,
                                                     $Plotdata[0]);                                                         $Plotdata[0]);
     for (my $j=0; $j< scalar(@{$Plotdata[0]});$j++) {      for (my $j=0; $j< scalar(@{$Plotdata[0]});$j++) {
         $Plotdata[0]->[$j]=0;          $Plotdata[0]->[$j]=0;
     }      }
Line 645  sub Foil_Time_Analysis { Line 729  sub Foil_Time_Analysis {
     } else {      } else {
         $title = $count.' submissions';          $title = $count.' submissions';
     }      }
     my $incorrectplot = &Apache::loncommon::DrawGraph($title,      my $incorrectplot = &Apache::loncommon::DrawBarGraph($title,
                                                  'Foil Number',                                                   'Foil Number',
                                                  'Incorrect Option Choice',                                                   'Incorrect Option Choice',
                                                  100,                                                   100,
Line 680  sub Concept_Time_Analysis { Line 764  sub Concept_Time_Analysis {
     for (my $j=$begin_index;$j<=$end_index;$j++) {      for (my $j=$begin_index;$j<=$end_index;$j++) {
         my $row = $PerformanceData->[$j];          my $row = $PerformanceData->[$j];
         next if (! defined($row));          next if (! defined($row));
         my %Row = &Process_Row($row);          my %Row = &Process_OR_Row($row);
         while (my ($foilid,$href) = each(%Row)) {          while (my ($foilid,$href) = each(%Row)) {
             if (! ref($href)) {              if (! ref($href)) {
                 $TimeData{$foilid} += $href;                  $TimeData{$foilid} += $href;
Line 709  sub Concept_Time_Analysis { Line 793  sub Concept_Time_Analysis {
     #      #
     # Create the plot      # Create the plot
     my $title = ($end_index - $begin_index).' submissions';      my $title = ($end_index - $begin_index).' submissions';
     my $correctplot = &Apache::loncommon::DrawGraph($title,      my $correctplot = &Apache::loncommon::DrawBarGraph($title,
                                                     'Concept Number',                                                      'Concept Number',
                                                     'Percent Correct',                                                      'Percent Correct',
                                                     100,                                                      100,
Line 735  sub Concept_Time_Analysis { Line 819  sub Concept_Time_Analysis {
 ##  ##
 #########################################################  #########################################################
 #########################################################  #########################################################
   sub prepare_optionresponse_excel_sheet {
 sub prepare_excel_sheet {  
     my ($r,$resource,$PerformanceData,$ORdata) = @_;      my ($r,$resource,$PerformanceData,$ORdata) = @_;
     my $response = '<h2>'.&mt('Excel Spreadsheet Creation').'</h2>';      my $response = '';
     my (undef,$Foils,$Concepts) = &build_foil_index($ORdata);      my (undef,$Foils,$Concepts) = &build_foil_index($ORdata);
     #      #
     # Create excel worksheet      # Create excel worksheet
Line 761  sub prepare_excel_sheet { Line 844  sub prepare_excel_sheet {
     my $format;      my $format;
     $format->{'header'} = $workbook->add_format(bold      => 1,       $format->{'header'} = $workbook->add_format(bold      => 1, 
                                                 bottom    => 1,                                                  bottom    => 1,
 #                                                text_wrap => 1,  
                                                 align     => 'center');                                                  align     => 'center');
     $format->{'bold'} = $workbook->add_format(bold=>1);      $format->{'bold'} = $workbook->add_format(bold=>1);
     $format->{'h1'}   = $workbook->add_format(bold=>1, size=>18);      $format->{'h1'}   = $workbook->add_format(bold=>1, size=>18);
Line 796  sub prepare_excel_sheet { Line 878  sub prepare_excel_sheet {
     if ($result ne 'okay') {      if ($result ne 'okay') {
         # Do something useful          # Do something useful
     }      }
    $response_data_sheet->activate();      $response_data_sheet->activate();
     #      #
     # Close the excel file      # Close the excel file
     $workbook->close();      $workbook->close();
     #      #
     # Write a link to allow them to download it      # Write a link to allow them to download it
     $result .= '<br />'.      $result .= '<h2>'.&mt('Excel Raw Data Output').'</h2>'.
               '<a href="'.$filename.'">Your Excel spreadsheet.</a>'."\n";                '<p><a href="'.$filename.'">'.
                 &mt('Your Excel spreadsheet.').
                 '</a></p>'."\n";
     return $result;      return $result;
 }  }
   
Line 822  sub build_problem_data_worksheet { Line 906  sub build_problem_data_worksheet {
         @Headers = ('Foil Number','FoilName','Foil Text','Correct value');          @Headers = ('Foil Number','FoilName','Foil Text','Correct value');
     }      }
     $worksheet->write_row($rows_output++,0,\@Headers,$format->{'header'});      $worksheet->write_row($rows_output++,0,\@Headers,$format->{'header'});
     my %Foildata = %{$ORdata->{'Foils'}};      my %Foildata = %{$ORdata->{'_Foils'}};
     my $conceptindex = 1;      my $conceptindex = 1;
     my $foilindex = 1;      my $foilindex = 1;
     foreach my $concept (@$Concepts) {      foreach my $concept (@$Concepts) {
Line 870  sub build_problem_data_worksheet { Line 954  sub build_problem_data_worksheet {
     ##      ##
     ## Option data output      ## Option data output
     $worksheet->write($rows_output++,0,'Options',$format->{'header'});      $worksheet->write($rows_output++,0,'Options',$format->{'header'});
     foreach my $string (@{$ORdata->{'Options'}}) {      foreach my $string (@{$ORdata->{'_Options'}}) {
         $worksheet->write($rows_output++,0,$string);          $worksheet->write($rows_output++,0,$string);
     }      }
     return 'okay';      return 'okay';
Line 1125  sub _adjustment { Line 1209  sub _adjustment {
         return $adjust;          return $adjust;
 }  }
   
   sub build_foil_index {
       my ($ORdata) = @_;
       return if (! exists($ORdata->{'_Foils'}));
       my %Foildata = %{$ORdata->{'_Foils'}};
       my @Foils = sort(keys(%Foildata));
       my %Concepts;
       foreach my $foilid (@Foils) {
           push(@{$Concepts{$Foildata{$foilid}->{'_Concept'}}},
                $foilid);
       }
       undef(@Foils);
       # Having gathered the concept information in a hash, we now translate it
       # into an array because we need to be consistent about order.
       # Also put the foils in order, too.
       my $sortfunction = sub {
           my %Numbers = (one   => 1,
                          two   => 2,
                          three => 3,
                          four  => 4,
                          five  => 5,
                          six   => 6,
                          seven => 7,
                          eight => 8,
                          nine  => 9,
                          ten   => 10,);
           my $a1 = lc($a); 
           my $b1 = lc($b);
           if (exists($Numbers{$a})) {
               $a1 = $Numbers{$a};
           }
           if (exists($Numbers{$b})) {
               $b1 = $Numbers{$b};
           }
           $a1 cmp $b1;
       };
       my @Concepts;
       foreach my $concept (sort $sortfunction (keys(%Concepts))) {
           push(@Concepts,{ name => $concept,
                           foils => [@{$Concepts{$concept}}]});
           push(@Foils,(@{$Concepts{$concept}}));
       }
       #
       # Build up the table of row labels.
       my $table = '<table border="1" >'."\n";
       if (@Concepts > 1) {
           $table .= '<tr>'.
               '<th>'.&mt('Concept Number').'</th>'.
               '<th>'.&mt('Concept').'</th>'.
               '<th>'.&mt('Foil Number').'</th>'.
               '<th>'.&mt('Foil Name').'</th>'.
               '<th>'.&mt('Foil Text').'</th>'.
               '<th>'.&mt('Correct Value').'</th>'.
               "</tr>\n";
       } else {
           $table .= '<tr>'.
               '<th>'.&mt('Foil Number').'</th>'.
               '<th>'.&mt('Foil Name').'</th>'.
               '<th>'.&mt('Foil Text').'</th>'.
               '<th>'.&mt('Correct Value').'</th>'.
               "</tr>\n";
       }        
       my $conceptindex = 1;
       my $foilindex = 1;
       foreach my $concept (@Concepts) {
           my @FoilsInConcept = @{$concept->{'foils'}};
           my $firstfoil = shift(@FoilsInConcept);
           if (@Concepts > 1) {
               $table .= '<tr>'.
                   '<td>'.$conceptindex.'</td>'.
                   '<td>'.$concept->{'name'}.'</td>'.
                   '<td>'.$foilindex++.'</td>'.
                   '<td>'.$Foildata{$firstfoil}->{'name'}.'</td>'.
                   '<td>'.$Foildata{$firstfoil}->{'text'}.'</td>'.
                   '<td>'.$Foildata{$firstfoil}->{'value'}.'</td>'.
                   "</tr>\n";
           } else {
               $table .= '<tr>'.
                   '<td>'.$foilindex++.'</td>'.
                   '<td>'.$Foildata{$firstfoil}->{'name'}.'</td>'.
                   '<td>'.$Foildata{$firstfoil}->{'text'}.'</td>'.
                   '<td>'.$Foildata{$firstfoil}->{'value'}.'</td>'.
                   "</tr>\n";
           }
           foreach my $foilid (@FoilsInConcept) {
               if (@Concepts > 1) {
                   $table .= '<tr>'.
                       '<td></td>'.
                       '<td></td>'.
                       '<td>'.$foilindex.'</td>'.
                       '<td>'.$Foildata{$foilid}->{'name'}.'</td>'.
                       '<td>'.$Foildata{$foilid}->{'text'}.'</td>'.
                       '<td>'.$Foildata{$foilid}->{'value'}.'</td>'.
                       "</tr>\n";
               } else {
                   $table .= '<tr>'.
                       '<td>'.$foilindex.'</td>'.
                       '<td>'.$Foildata{$foilid}->{'name'}.'</td>'.
                       '<td>'.$Foildata{$foilid}->{'text'}.'</td>'.
                       '<td>'.$Foildata{$foilid}->{'value'}.'</td>'.
                       "</tr>\n";
               }                
           } continue {
               $foilindex++;
           }
       } continue {
           $conceptindex++;
       }
       $table .= "</table>\n";
       #
       # Build option index with color stuff
       return ($table,\@Foils,\@Concepts);
   }
   
   sub build_option_index {
       my ($ORdata)= @_;
       my $table = "<table>\n";
       my $optionindex = 0;
       my @Rows;
       foreach my $option (&mt('correct option chosen'),@{$ORdata->{'_Options'}}) {
           push (@Rows,
                 '<tr>'.
                 '<td bgcolor="'.$plotcolors->[$optionindex++].'">'.
                 ('&nbsp;'x4).'</td>'.
                 '<td>'.$option.'</td>'.
                 "</tr>\n");
       }
       shift(@Rows); # Throw away 'correct option chosen' color
       $table .= join('',reverse(@Rows));
       $table .= "</table>\n";
   }
   
 #########################################################  #########################################################
 #########################################################  #########################################################
 ##  ##
 ##             Interface   ##   Generic Interface Routines
 ##  ##
 #########################################################  #########################################################
 #########################################################  #########################################################
Line 1227  sub CreateInterface { Line 1442  sub CreateInterface {
     return $Str;      return $Str;
 }  }
   
 sub OptionResponseProblemSelector {  sub ProblemSelector {
     my $Str;      my $Str;
     $Str = "\n<table>\n";      $Str = "\n<table>\n";
     foreach my $seq (&Apache::lonstatistics::Sequences_with_Assess()) {      foreach my $seq (&Apache::lonstatistics::Sequences_with_Assess()) {
Line 1237  sub OptionResponseProblemSelector { Line 1452  sub OptionResponseProblemSelector {
             next if ($res->{'type'} ne 'assessment');              next if ($res->{'type'} ne 'assessment');
             foreach my $part (@{$res->{'parts'}}) {              foreach my $part (@{$res->{'parts'}}) {
                 my $partdata = $res->{'partdata'}->{$part};                  my $partdata = $res->{'partdata'}->{$part};
                 if (! exists($partdata->{'option'}) ||   #                &Apache::lonnet::logthis('----------------');
                     $partdata->{'option'} == 0) {  #                while (my ($k,$v)=each(%$partdata)) {
   #                    if (ref($v) eq 'ARRAY') {
   #                        &Apache::lonnet::logthis($k.' = '.join(',',@$v));
   #                    } else {
   #                        &Apache::lonnet::logthis($k.' = '.$v);
   #                    }
   #                }
                   if ((! exists($partdata->{'option'}) || 
                        $partdata->{'option'} == 0      ) &&
                       (! exists($partdata->{'radiobutton'}) ||
                        $partdata->{'radiobutton'} == 0)) {
                     next;                      next;
                 }                  }
                 for (my $i=0;$i<scalar(@{$partdata->{'ResponseTypes'}});$i++){                  for (my $i=0;$i<scalar(@{$partdata->{'ResponseTypes'}});$i++){
                     my $respid = $partdata->{'ResponseIds'}->[$i];                      my $respid = $partdata->{'ResponseIds'}->[$i];
                     my $resptype = $partdata->{'ResponseTypes'}->[$i];                      my $resptype = $partdata->{'ResponseTypes'}->[$i];
                     if ($resptype eq 'option') {                      if ($resptype eq 'option' ){
                         my $value = &Apache::lonnet::escape($res->{'symb'}.':'.$part.':'.$respid);  #                    if ($resptype eq 'option' || $resptype eq 'radiobutton') {
                           my $value = 
                               &Apache::lonnet::escape($res->{'symb'}.':'.$part.
                                                       ':'.$respid.':'.$resptype);
                         my $checked = '';                          my $checked = '';
                         if ($ENV{'form.problemchoice'} eq $value) {                          if ($ENV{'form.problemchoice'} eq $value) {
                             $checked = 'checked ';                              $checked = 'checked ';
Line 1254  sub OptionResponseProblemSelector { Line 1482  sub OptionResponseProblemSelector {
   '<input type="radio" name="problemchoice" value="'.$value.'" '.$checked.'/>'.    '<input type="radio" name="problemchoice" value="'.$value.'" '.$checked.'/>'.
   '</td><td>'.    '</td><td>'.
   '<a href="'.$res->{'src'}.'">'.$res->{'title'}.'</a> ';    '<a href="'.$res->{'src'}.'">'.$res->{'title'}.'</a> ';
   #  '<a href="'.$res->{'src'}.'">'.$resptype.' '.$res->{'title'}.'</a> ';
                         if ($partdata->{'option'} > 1) {                          if ($partdata->{'option'} > 1) {
                             $seq_str .= &mt('response').' '.$respid;                              $seq_str .= &mt('response').' '.$respid;
                         }                          }
Line 1280  sub OptionResponseProblemSelector { Line 1509  sub OptionResponseProblemSelector {
 #########################################################  #########################################################
 sub get_problem_symb {  sub get_problem_symb {
     my $problemstring = shift();      my $problemstring = shift();
     my ($symb,$partid,$resid) = ($problemstring=~ /^(.*):([^:]*):([^:]*)$/);      my ($symb,$partid,$resid,$resptype) = 
     return ($symb,$partid,$resid);          ($problemstring=~ /^(.*):([^:]*):([^:]*):([^:]*)$/);
       return ($symb,$partid,$resid,$resptype);
 }  }
   
 sub get_resource_from_symb {  sub get_resource_from_symb {
Line 1296  sub get_resource_from_symb { Line 1526  sub get_resource_from_symb {
     return undef;      return undef;
 }  }
   
   
   #########################################################
   #########################################################
   ##
   ##              Misc Option Response functions
   ##
   #########################################################
   #########################################################
 sub get_time_from_row {  sub get_time_from_row {
     my ($row) = @_;      my ($row) = @_;
     if (ref($row)) {      if (ref($row)) {
         return $row->[3];          return $row->[&Apache::loncoursedata::RD_timestamp()];
     }       } 
     return undef;      return undef;
 }  }
Line 1307  sub get_time_from_row { Line 1545  sub get_time_from_row {
 sub get_tries_from_row {  sub get_tries_from_row {
     my ($row) = @_;      my ($row) = @_;
     if (ref($row)) {      if (ref($row)) {
         return $row->[5];          return $row->[&Apache::loncoursedata::RD_tries()];
     }      }
     return undef;      return undef;
 }  }
   
 sub Process_Row {  sub hashify_attempt {
       my ($row) = @_;
       my %attempt;
       $attempt{'tries'}      = $row->[&Apache::loncoursedata::RD_tries()];
       $attempt{'submission'} = $row->[&Apache::loncoursedata::RD_submission()];
       $attempt{'award'}      = $row->[&Apache::loncoursedata::RD_awarddetail()];
       $attempt{'timestamp'}  = $row->[&Apache::loncoursedata::RD_timestamp()];
       return %attempt;
   }
   
   sub Process_OR_Row {
     my ($row) = @_;      my ($row) = @_;
     my %RowData;      my %RowData;
     my ($student_id,$award,$grading,$submission,$time,$tries) = @$row;      my $student_id = $row->[&Apache::loncoursedata::RD_student_id()];
       my $award      = $row->[&Apache::loncoursedata::RD_awarddetail()];
       my $grading    = $row->[&Apache::loncoursedata::RD_response_eval()];
       my $submission = $row->[&Apache::loncoursedata::RD_submission()];
       my $time       = $row->[&Apache::loncoursedata::RD_timestamp()];
       my $tries      = $row->[&Apache::loncoursedata::RD_tries()];
     return undef if ($award eq 'MISSING_ANSWER');      return undef if ($award eq 'MISSING_ANSWER');
     if ($award =~ /(APPROX_ANS|EXACT_ANS)/) {      if ($award =~ /(APPROX_ANS|EXACT_ANS)/) {
         $RowData{'_correct'} = 1;          $RowData{'_correct'} = 1;
Line 1355  sub get_problem_data { Line 1608  sub get_problem_data {
             $key =~ s/^$part\.//;              $key =~ s/^$part\.//;
             if (ref($value) eq 'ARRAY') {              if (ref($value) eq 'ARRAY') {
                 if ($key eq 'options') {                  if ($key eq 'options') {
                     $Partdata{$part}->{'Options'}=$value;                      $Partdata{$part}->{'_Options'}=$value;
                 } elsif ($key eq 'concepts') {                  } elsif ($key eq 'concepts') {
                     $Partdata{$part}->{'Concepts'}=$value;                      $Partdata{$part}->{'_Concepts'}=$value;
                 } elsif ($key =~ /^concept\.(.*)$/) {                  } elsif ($key =~ /^concept\.(.*)$/) {
                     my $concept = $1;                      my $concept = $1;
                     foreach my $foil (@$value) {                      foreach my $foil (@$value) {
                         $Partdata{$part}->{'Foils'}->{$foil}->{'Concept'}=                          $Partdata{$part}->{'_Foils'}->{$foil}->{'_Concept'}=
                                                                       $concept;                                                                        $concept;
                     }                      }
                 }                  }
             } else {              } else {
                 if ($key=~ /^foil\.text\.(.*)$/) {                  if ($key=~ /^foil\.text\.(.*)$/) {
                     my $foil = $1;                      my $foil = $1;
                     $Partdata{$part}->{'Foils'}->{$foil}->{'name'}=$foil;                      $Partdata{$part}->{'_Foils'}->{$foil}->{'name'}=$foil;
                     $value =~ s/(\s*$|^\s*)//g;                      $value =~ s/(\s*$|^\s*)//g;
                     $Partdata{$part}->{'Foils'}->{$foil}->{'text'}=$value;                      $Partdata{$part}->{'_Foils'}->{$foil}->{'text'}=$value;
                 } elsif ($key =~ /^foil\.value\.(.*)$/) {                  } elsif ($key =~ /^foil\.value\.(.*)$/) {
                     my $foil = $1;                      my $foil = $1;
                     $Partdata{$part}->{'Foils'}->{$foil}->{'value'}=$value;                      $Partdata{$part}->{'_Foils'}->{$foil}->{'value'}=$value;
                 }                  }
             }              }
         }          }
Line 1384  sub get_problem_data { Line 1637  sub get_problem_data {
 1;  1;
   
 __END__  __END__
   
   #####
   # partdata{part}->{_Foils}->{foilid}->{'name'}     = $
   #                                   ->{'text'}     = $
   #                                   ->{'value'}    = $
   #                                   ->{'_Concept'} = $
   # partdata{part}->{_Options}  = @
   # partdata{part}->{_Concepts} = @
Removed from v.1.43  
changed lines
  Added in v.1.48

FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>